AI 품질관리 - 멀티모달 데이터 품질 관리 가이드

http://weekly.tta.or.kr/weekly/files/20251330061341_weekly.pdf

2025.4.10
[생성형 AI 학습을 위한 멀티모달 데이터품질특성 고찰 및 적용방안]

이 연구 보고서는 생성형 멀티모달 AI 모델의 성능 향상을 위한 핵심 자산으로서 데이터 품질 특성을 정의하고, 이를 실제 학습 모델에 적용하는 방안을 체계적으로 제시합니다. 텍스트, 이미지, 음성 등 서로 다른 형태의 이기종 데이터(Modality)가 결합되는 특성을 고려하여, 각 데이터 간의 개체 식별 여부를 묻는 표현성, 정보의 의미적 일치 여부를 따지는 일치성, 그리고 시공간적 대응 관계를 확인하는 정렬성을 주요 품질 검증 지침으로 제안합니다. 특히 시각적 음성 인식, 객체 분류, 이미지 캡셔닝 등 구체적인 AI 학습 임무별로 최적화된 품질 평가 매커니즘을 설명하며 고품질 데이터 구축의 가이드라인을 제공합니다. 결과적으로 이 원고는 다양한 모달리티 간의 상호작용과 통합을 효과적으로 관리함으로써, 더욱 신뢰할 수 있고 인간 중심적인 생성형 AI 생태계를 조성하는 데 그 목적이 있습니다.