AI-Hub

데이터 변경이력

데이터 히스토리

소개

다양한 한국적 유물과 작품에 대한 2D 이미지 20만장 이상, 3D 이미지 1만장이상과 메타데이터 한국어/영어 30만건을 구축함

구축목적

디지털화된 K-Art 데이터를 통해 미술품, 유물 등의 복원 및 랜더링 연구분야 그리고 실감형 메타버스 관련 연구에 활용하기 위한 데이터를 구축함

데이터 통계
- 2D 이미지 데이터 221,291건, 3D 이미지 데이터 10,097건, 라벨링 데이터 231,388건

- 모델별 데이터 분포

- 시대구분(2D/3D)

- 작품유형(2D/3D)

저작도구 설명서 및 저작도구 다운로드

AI 모델 상세 설명서 다운로드

모델학습

1) 2D Image 분류모델
- SE-Resnet은 K-art 2D 이미지 분류를 위해 검증용 이미지와 시험용 이미지를 각 클래스에 대해 10%로 구성한다. 그리고 각 클래스에 대해서 나머지 80%를 학습용 이미지로 제시한다. 전체 데이터는 약 20만장으로 이루어져 있음.
- K-art 2D dataset인 2D Image를 입력으로 한다. 입력을 받은 2D 모델인 SE-ResNet은 각각의 분류 클래스에 대한 예측(prediction) 값을 결과물로 내놓는다. 그 후 실제 해당하는 클래스(분류) 라벨과 비교 학습하여 2D 이미지에 대한 분류 과정을 학습하는 모델임. 

서비스 활용 시나리오
 1) 라벨링 활용
 - 각 미술관이나 기타 전시회에서 새롭게 전시되는 K-art 물품들에 대해서 자동적으로 labeling 하는데 활용 가능 
 2) 다른 task에 활용
 - K-art dataset으로 학습된 2D,3D classification pretrain model을 이용하여 좋은 feature를 추출하여 분류모델 외의 다른 task에 대해서 더 좋은 성능을 만드는 모델을 연구하는데 활용
 - 3D 이미지정보를 통한 문화재 3D 보존 데이터 활용
 - 신기술 기반의 체험형 콘텐츠 소스 데이터로 활용(상업적 이용은 별도 저작권 협의 필요)

기타정보
 1) 대표성
 - 한국의 근현대 작품을 2D/3D 이미지로 수집하여, 2D는 6개 분야(건축, 공예, 조각, 악기, 서예, 회화)유형, 3D는 4개 분야(건축, 공예, 조각, 악기)를 대상으로 수집 구축함
 - 6개 분야는 십진분류법을 기준으로 실제 촬영 가능한 대상을 선별하였음

 2) 독립성
 - 한국에서 만들어진 다양한 분류로 이루어진 미술 관련 2D와 3D dataset은 이전에 만들어진 적이 없음 (타 데이터셋과 중복이 되지 않음)

데이터 성능 점수

설명서 및 활용가이드 다운로드

데이터 포맷
1) 2D 데이터 (전체, 일부, 주요부분 이미지로 작품 당 3장의 이미지로 구성)
 - 서예 : 전통서예, 현대서예, 전각(도장), 서각(편지)
 - 회화 : 한국화, 서양화, 판화

2) 3D 데이터 (작품당 1개 이미지로 구성)
- 건축 : 궁전, 묘지, 성곽, 탑, 종교건물, 건축자재
- 조각 : 목조, 석조, 금동조, 점토
- 공예 : 도자공예, 금속공예, 보석공예, 폐류공예, 의복공예
- 악기 : 건반악기, 타악기, 현악기, 국악기

3) 2D-3D 연계데이터 (3D와 매핑되는 2D 이미지이며, 작품당 전/후/좌/우로 구성됨)
- 건축 : 궁전, 묘지, 성곽, 탑, 종교건물, 건축자재
- 조각 : 목조, 석조, 금동조, 점토
- 공예 : 도자공예, 금속공예, 보석공예, 폐류공예, 의복공예
- 악기 : 건반악기, 타악기, 현악기, 국악기

데이터 구성포맷 

어노테이션 포맷 (2D)

실제예시 (2D)

{
    "Object_Info": {
        "MainCategory": "현대",
        "MiddleCategory": "회화",
        "SubCategory": "현대회화"
    },
    "Photo_Info": {
        "PhotoDate": "2022-11-07",
        "PhotoEquipment": "Cannon EOS 200D II"
    },
    "Image_Info": {
        "Width": 53,
        "Length": 43,
        "Height": "N/A",
        "Camera Intrinsic parameter": {
            "fx": "12,396.12",
            "fy": "12,396.12"
        }
    },
    "Data_Info": {
        "DataSort": "2D",
        "ImageFileName": "kart_2d129895-C-8-82-3",
        "SourceDataExtension": "JPG",
        "Rangeofuse": "공공누리 2"
    },
    "Description": {
        "Class_kor": "회화",
        "Class_eng": "Painting",
        "ArtTitle_kor": " 항아리의 나들이 ",
        "ArtTitle_eng": "Outing",
        "ArtistName_kor": "정낙희",
        "ArtistName_eng": "Jung Nakhee",
        "Location_kor": "개인",
        "Location_eng": "Private",
        "Material_kor": "종이",
        "Material_eng": "Paper"
    },
    "Annotation_Info": {
        "Polygon": [
            [
                0,
                0,
                545,
                0,
                545,
                480,
                0,
                480
            ]
        ]
    }
}

어노테이션 포맷 (3D

실제예시 (3D)

{
    "Object_Info": {
        "MainCategory": "고대",
        "MiddleCategory": "악기",
        "SubCategory": "국악기"
    },
    "Photo_Info": {
        "PhotoDate": "2022-10-26",
        "PhotoEquipment": "Canon EOS 200D II"
    },
    "Image_Info": {
        "Width": 42.3,
        "Length": 10.3,
        "Height": 53,
        "Camera Intrinsic parameter": {
            "fx": "12,396.12",
            "fy": "12,396.12"
        }
    },
    "Data_Info": {
        "DataSort": "3D",
        "ImageFileName": "kart_3d04044",
        "SourceDataExtension": "obj",
        "Rangeofuse": "공공누리 2"
    },
    "Description": {
        "Class_kor": "악기",
        "Class_eng": "instrument",
        "ArtTitle_kor": "징2",
        "ArtTitle_eng": "Jing",
        "ArtistName_kor": "미상",
        "ArtistName_eng": "unknown",
        "Location_kor": "김천민속박물관",
        "Location_eng": "Gimcheon Folk Museum",
        "Material_kor": "황동",
        "Material_eng": "Brass"
    },
    "Annotation_Info": {
        "cuboid": [
            [0, 53,10.2956],
            [42.2741,53,10.2956],
            [0,53,0],
            [42.2741,53,0],
            [0,0,10.2956],
            [42.2741,0,10.2956],
            [0,0,0],
            [42.2741,0,0]
        ]
    }
}

데이터셋 구축 담당자

수행기관(주관) : 비큐에이아이

수행기관(참여)

데이터 관련 문의처