• 어린이, 노인, 개인의 일상생활을 촬영한 이미지에 대하여 시각정보에 대한 객관적인 상황이나 추론 가능한 질문에 대해 스스로 답변이 가능한 인공지능을 훈련하기 위한 데이터 셋

• 시각 정보에 대한 인공지능 자유 묘사, 이미지를 통한 상황 유추 등이 가능한 한국형 AI 시각지능 모델 개발

• 한국인의 실생활 속에서 다양한 이미지를 촬영하고, 연관된 질의응답 데이터를 생성하여 인공지능이 생활환경 속 물체나 위험요소 등에 대하여 답변할 수 있도록 훈련할 수 있는 데이터셋. 이미지에 대한 비식별화 및 정제 처리 후 가공, 검증을 진행하여 촬영된 사진에서 개인정보 침해 문제를 해결하고 가공을 수행하였음
   

• 일상생활 속 이미지 1,063,340장(일반 촬영 961,068장 / 3D 공간 스캔 기반 추출 이미지 102,272장)
• 이미지별 질의응답 텍스트 총 7,119,756건(이미지당 평균 7건)
   

  구축 내용 및 제공 데이터량 표

  	어린이 생활 거주환경		개인 생활환경		노인 생활 거주환경		실내 가전 및 가구배치
  	슈퍼헤더	수집이미지	슈퍼헤더	수집이미지	슈퍼헤더	수집이미지	슈퍼헤더	수집이미지	3D이미지
  슈퍼헤더별 수량	번화가	8,902	번화가	11,272	번화가	23,936	사무공간	693	16,141
  	골목	11,912	골목	26,993	골목	15,437	개인공간	8,876
  	차량	16,946	차량	19,127	차량	20,657	휴게공간	7,663
  	야외	16,977	야외	43,868	야외	23,002	가전	9,741
  	가전(가구)	7,591	가전(가구)	7,817	가전(가구)	16,918	가구	34,822
  	공공장소	42,997	공공장소	34,169	공공장소	31,994	공공장소	8,475
  	여가공간	7,995	여가공간	7,507	여가공간	7,541	여가공간	23,967
  	음식	6,893	음식	8,253	음식	7,518	음식	7,501
  	실내	43,576	실내	22,503	실내	23,825	실내	913	44,131
  	생활	39,922	생활	20,931	생활	21,271	생활	45,635
  	물건	15,864	물건	23,693	물건	21,506	물건	1,622	42,000
  	매장	38,258	매장	33,897	매장	37,134	매장	42,558
  	합계	257,833	합계	260,030	합계	250,739	합계	192,466	102,272

• 해외에서 활발하게 연구되고 있는 영어 기반의 시각정보 질의응답 데이터와 달리 한국형 데이터는 학습용 데이터가 거의 전무한 상황
• 해외에서는 영어를 기반으로 시각정보 질의응답 데이터를 공개하고 매년 모델링 대회를 개최하고 있음. 영어로 된 데이터를 활용한 세계 대회에서 국내 기업이 선두를 달리고 있는 상황에도 한국형 질의응답 학습용 데이터는 거의 전무한 상황임
• 기존 20년도 사업에서 시각정보 질의응답 데이터셋을 구축한 바가 있으나, 대부분의 원천 데이터를 해외 공개이미지로 사용하였기에 국내 환경에 맞지 않는 요소가 있었음
• 이에 한국적인 사물과 상황을 이해하여 질문과 답변을 제시하며 새로운 가치를 창출할 수 있는 시각정보 질의응답 AI 기술개발을 위하여 검증된 학습용 데이터를 구축하고자 함

• 1. 데이터 구성

• 2. 어노테이션 포맷

수행기관(주관) : 유클리드소프트

수행기관(참여)