크라우드웍스, 모티프 컨소시엄과 ‘국대 AI’ 정예팀 합류…300B 추론형 모델 핵심 데이터 공급 전담

• 독자 파운데이션 모델 개발 사업서 모티프 컨소시엄 최종 선정
• 단계별 추론(CoT) 특화 데이터셋 구축… ‘추론형 AI’ 성능 결정짓는 핵심 역할 
• 자체 데이터 전처리 솔루션 ‘알피 날리지 컴파일러’ 투입, 고복잡도 비정형 문서의 AI-Ready 가속화

AI 테크 기업 크라우드웍스가 대한민국 AI 기술 자립을 이끌 ‘국가대표 AI’ 프로젝트에  전격 합류한다.

최근 과학기술정보통신부의 ‘독자 AI 파운데이션 모델(독파모) 개발 사업’ 추가 공모에 모티프테크놀로지스(이하 모티프) 컨소시엄이 선정됐다. 크라우드웍스는 이 컨소시엄에 데이터 공급 핵심 파트너로 참여하며 LG AI연구원, SK텔레콤, 업스테이지 컨소시엄과 함께 국내 AI 생태계를 선도할 4대 정예팀의 일원으로 활동하게 됐다.

이번 사업에서 크라우드웍스는 모티프 컨소시엄이 추진 중인 3,000억(300B) 파라미터급 ‘추론형 거대언어모델(LLM)’ 개발의 성패를 가를 고품질 데이터 공급을 책임진다. 모델의 지능적 사고 역량을 극대화하기 위해, 단순 가공을 넘어 ‘단계별 추론(Chain-of-Thought) 특화 학습 데이터셋’ 구축에 핵심 역량을 집중한다.

특히, 크라우드웍스는 자체 개발한 비정형 문서 데이터 전처리 솔루션인 ‘알피 날리지 컴파일러(Alpy Knowledge Compiler)’를 전격 투입한다. 이를 통해 표, 차트 등 복잡한 구조를 가진 비정형 문서를 정교하게 파싱하여 AI가 이해할 수 있는 ‘AI-Ready’ 데이터로 변환한다. 이는 추론형 모델이 다양한 전문 지식을 안정적으로 학습하고 단계별로 추론하는 능력을 구현하는 데 핵심 동력이 될 전망이다.

크라우드웍스는 이번 정예팀 합류 이전부터, ‘국대 AI’ 정예팀에 고품질 학습 데이터를 지속적으로 공급해 왔다. 지난해 하반기에는 저작권 문제를 해결한 도서 데이터 등을 제공해 왔으며, 한국 사회의 언어적·문화적·시대적 맥락을 정교하게 반영한 ‘방송영상 이해 데이터셋’ 구축 사업까지 성공적으로 완료하며 실전 역량을 검증받은 바 있다. 

크라우드웍스 관계자는 “추론형 LLM의 지능은 얼마나 논리적이고 정교한 데이터를 학습하느냐에 달려 있는 만큼, 크라우드웍스의 역할이 그 어느 때보다 중요하다”며, “그동안 국내 빅테크들과 협업하며 검증받은 데이터 정제 기술과 고품질 데이터 구축 노하우를 결집해, 글로벌 빅테크와 경쟁할 수 있는 독자 AI 모델 개발을 완벽하게 뒷받침할 것”이라고 전했다.