프로젝트 성공사례#32 교육용 문항생성 및 컷제작 프로젝트 위한 PoC 작업기
교육용 문항생성 및 컷제작 프로젝트 위한 PoC 작업기
교육 AI 플랫폼 내 중등 교육/학습용 서비스 고도화를 위한 문항 데이터 제작 및 모델 시연 작업
고객사 요구사항
- 중등 학습 기준 문항을 참고하여 쌍둥이 문항 제작 요청
- 쌍둥이 문항 제작 완료에 필요한 컷 작업 진행 요청
- 기준 문항 1개 당 난이도별 쌍둥이 문항 3개 제작 요청
- 기존 프로세스 대비 20% 절감 확인 요청
고객사 소개
크라우드웍스에 프로젝트를 의뢰한 고객사는 전통적인 에듀테크 기반의 교육 업체입니다. 보유하고 있는 학습 문항이 많을 수록 교육 업계 경쟁에서 유리한 위치를 차지할 수 있기에, 매년 서비스 고도화를 위한 학습 문항 생성에 대한 업무가 지속되어 오고 있습니다. 고객사는 기존의 교육 업체 방식대로 AI 서비스에 활용할 학습 문항 및 컷 제작 방식을 구상하던 중, 크라우드웍스와 함께 시간과 비용을 절감할 수 있는 방법에 대해 논의하였고, 이를 증명하기 위한 POC 프로젝트를 설계하여 진행했습니다.
고객사에게 어떤 어려움이 있었나요?
고객사는 교육 업계의 전통적인 방식으로 문제 및 문제 컷을 만드는 부분에 있어 시간과 비용을 절감하고자 하는 니즈가 있었으나, 해당 방식에 대한 솔루션을 찾지 못하고 있었습니다. 크라우드소싱을 활용하여 기존보다 효율적인 방식으로 문제를 생성하고 컷 제작 프로세스를 진행 시, 시간과 비용을 절감하며 프로젝트를 진행할 수 있을 것이라 예상했습니다.
크라우드웍스를 선택한 이유!
- POC 프로젝트의 설계/제안/결과 분석 등이 가능한 전문 업체
- 고객사가 필요로 하는 문항 제작과 컷 제작을 위한 인재의 확보 용이
- 교육 업계 레퍼런스가 있는 학습 데이터 가공 업체 크라우드웍스가 유일
크라우드웍스 솔루션
프로젝트 설계
다수의 에듀테크 산업 관련 프로젝트를 진행한 경험이 있는 크라우드웍스는 해당 프로젝트에 최적화된 작업자를 선발하기 위해 초등 수학 문항 제작 경험자 및 컷 제작자를 대상으로 작업자 풀을 구성했습니다. 작업 가이드에 기반한 사전 자격시험을 출제하여 관련 경험이 있는 작업자들을 대상으로 자격시험을 보도록 하였는데요. 자격시험에서 통과한 인원으로만 구축된 작업자 드림팀은 개개인의 프로젝트 경험을 바탕으로 1개월 내에 고객사에서 요청한 교육 문항들을 구축 및 검수까지 완료했습니다.
프로젝트 진행
교육 산업에서 ‘쌍둥이 문항’이라는 단어를 자주 보셨을텐데요. 쌍둥이 문항은 문제의 형태와 꼴이 비슷한 문항을 말합니다. 원하는 문항의 형태를 심화학습하고 싶을 때 사용하는 방법이죠. 작업자 선발이후 첫번째 단계로 담당PM은 문항 제작자 5인에게 쌍둥이 문항 918건을 제작하는 업무를 지시합니다. 이후, 컷 제작자로 선발된 5인은 제작된 쌍둥이 문항의 컷 발주서를 확인하여 485개의 문항과 관련된 컷을 제작 했습니다. 컷 제작이 완료되면 문항 제작자 5인은 제작된 컷을 다시 확인하고 컨펌(검수완료) 또는 반려하는 형태로 프로젝트가 운영되었습니다.
담당 PM 후기
전문성을 요하는 작업인 만큼 작업자 모집에 어려움을 겪을 것으로 예상했으나 비교적 짧은 기간 내에 작업자 모집이 이루어졌습니다. 48만 작업자를 보유한 크라우드웍스가 아니었다면 이렇게 작업에 꼭 맞는 구체적인 작업자 선발은 불가능했을거에요. 전문적인 작업자들과 함께 저희는 고객사가 기대했던 비용 절감의 가능성을 확인할 수 있었고, 고객사 또한 작업의 결과물에 대해 아주 만족스러워한 프로젝트 였습니다. 실제로 크라우드웍스를 통해 제작된 문항의 99.7%를 서비스에 사용하는 것으로 확인했죠. (0.3%의 문항은 실제로 쌍둥이 문항으로 제작될 수 없는 학습 단원이였기 때문에 실제 크라우드웍스에서 제작된 문항의 사용 비율은 100%로 볼 수 있습니다.) 이처럼 저희를 통해 더 나은 서비스를 제공하시는 고객사들을 보며 비교할 수 없는 뿌듯함을 느끼고 있습니다.