AI

독자 AI 모델용 학습 데이터 3544만 건, AI허브서 무료 공개

디플릭 Editorial

🗓️ 2026.09.01

⏱️ 6

Hero Image
©AI Image

AI 모델의 성능은 파라미터 수만으로 결정되지 않습니다. 어떤 언어와 상황을 학습했는지, 텍스트뿐 아니라 영상과 음성을 함께 다루는지, 잘못된 답변과 위험한 행동을 점검할 데이터가 있는지에 따라 실제 쓰임새가 달라집니다.

과학기술정보통신부와 한국지능정보사회진흥원(NIA)이 독자 AI 파운데이션 모델 프로젝트에서 구축한 학습 데이터를 AI허브에 공개했습니다. 이번 개방의 핵심은 3,544만 건이라는 규모보다, 국내 모델 개발에 사용된 서로 다른 학습 전략이 연구자와 기업이 다시 활용할 수 있는 공용 자원으로 전환됐다는 데 있습니다.

5개 정예팀이 만든 29종의 학습 자원

과학기술정보통신부 발표에 따르면 5개 정예팀은 1차 단계평가 과정에서 AI 학습용 데이터 29종, 약 3,544만 건을 구축했습니다. 토큰 기준으로는 약 1조 5,600억 토큰이며, 정부는 이론적으로 70~80B 규모의 대형 AI 모델 학습에 활용할 수 있다고 설명했습니다. 데이터 구축·가공에는 지난해 예산 150억 원이 투입됐습니다.

팀별 구성은 개발 전략에 따라 다릅니다. 네이버클라우드는 공개·방송 영상과 여기서 추출한 텍스트, 음성 질의응답 데이터를 만들었습니다. 업스테이지는 1조 토큰 규모의 사전학습 데이터와 추론·판단 능력을 다듬는 사후학습 데이터를 구축했습니다. SK텔레콤은 수학·과학·법률 분야의 다단계 추론 데이터와 한국 사회의 맥락을 반영한 레드티밍 데이터를 포함했습니다.

NC AI는 제조 기술문서와 민원 상담 음성을 바탕으로 긴 문맥 이해, 멀티턴 대화, 질의응답에 필요한 7종 데이터를 마련했습니다. LG AI연구원은 국내 실제 가정 50곳에서 50종 이상의 가사 활동을 촬영해 17만 개가 넘는 영상 클립을 구축했습니다. 같은 ‘AI 학습 데이터’라도 언어, 장면, 행동, 안전성을 서로 다른 방식으로 다룬 셈입니다.

Sub Image
©AI Image

규모보다 구성과 검증이 중요한 이유

대규모 텍스트 데이터는 언어의 패턴과 지식을 익히는 기반이 됩니다. 그러나 실제 서비스는 문서만 읽지 않습니다. 영상을 보고 상황을 이해하거나, 음성을 듣고 대화를 이어가거나, 긴 문맥 속에서 앞선 정보를 기억해야 합니다. 멀티모달 데이터가 함께 공개되면 국내 AI가 학습할 수 있는 현실의 장면도 넓어집니다.

사후학습과 레드티밍 데이터가 포함된 점도 중요합니다. 모델을 처음 학습시키는 데이터만으로는 지시를 얼마나 정확하게 따르는지, 복잡한 문제를 어떻게 추론하는지, 위험한 질문에 어떤 반응을 보이는지까지 확인하기 어렵습니다. 성능 향상과 안전성 점검에 필요한 자료가 함께 있어야 모델을 실제 서비스에 적용하는 과정까지 연결할 수 있습니다.

다만 데이터가 공개됐다고 모든 개발자가 같은 출발선에 서는 것은 아닙니다. 대형 모델을 학습할 연산 자원, 데이터를 정제하고 조합하는 기술, 결과를 평가할 기준이 여전히 필요합니다. 이번 개방은 경쟁 조건을 같게 만드는 조치라기보다, 학습 자원에 접근할 수 있는 문턱을 낮추는 변화로 보는 편이 정확합니다.

실제 활용 전 확인해야 할 세 가지 기준

첫째는 공개된 데이터의 구성입니다. 기사나 발표에서 제시한 전체 건수만 보지 말고, 필요한 언어와 도메인, 입력 형식, 학습 단계가 포함돼 있는지 확인해야 합니다. 영상·음성 데이터라도 주석 방식과 촬영 환경이 목적에 맞지 않으면 활용 범위가 달라집니다.

둘째는 품질과 권리 조건입니다. 정부는 NIA와 한국정보통신기술협회(TTA)가 품질, 개인정보, 유해성을 검증하고 라이선스 제약이 있는 데이터를 제외했다고 설명했습니다. 이용자는 각 데이터 페이지에서 세부 라이선스와 신청·다운로드 조건을 다시 확인해야 합니다.

셋째는 발표 수치와 실제 공개 목록의 차이입니다. 과학기술정보통신부 발표는 29종을 제시하지만, AI허브가 8월 31일 게시한 공식 개방 안내에는 현재 22종이 표시돼 있습니다. 공개 시점이나 집계 기준의 차이일 수 있으므로, 실제 활용 단계에서는 기사에 적힌 총량보다 AI허브의 최신 목록을 기준으로 확인할 필요가 있습니다.

D.Flick Perspective

D.Flick Note

이번 공개에서 가장 중요한 변화는 5개 정예팀이 축적한 데이터만이 아니라, 각 팀의 학습 전략이 외부에서 다시 사용할 수 있는 형태로 열렸다는 점입니다. 영상 중심의 장면 이해, 전문 분야의 다단계 추론, 긴 문맥과 대화, 가정환경의 행동 데이터, 한국형 안전성 검증은 서로 다른 모델 개발 방향을 보여줍니다.

이제 질문은 “얼마나 많은 데이터를 확보했는가”에서 “어떤 데이터가 실제 학습과 검증에 연결될 수 있는가”로 옮겨갑니다. 공개 데이터의 가치는 숫자보다 구성, 품질, 권리 조건, 그리고 재사용 가능성에서 결정됩니다.

References

  • 사전학습 데이터: 모델이 언어와 지식의 기본 패턴을 익히도록 처음 학습할 때 사용하는 데이터
  • 사후학습 데이터: 사전학습을 마친 모델의 지시 수행, 추론, 판단 능력을 목적에 맞게 다듬는 데이터
  • 레드티밍 데이터: 모델이 위험하거나 잘못된 답변을 내는 조건을 찾아 안전성과 취약점을 점검하는 데이터


다양한 아티클을 확인해보세요