고객사 개요
고객사는 Netherlands에 본사를 둔 신뢰받는 데이터 솔루션 파트너입니다. 이 회사는 데이터 라벨링, 생성, 수집과 같은 서비스를 통해 고품질 데이터를 제공함으로써 AI 개발의 모든 단계인 학습부터 평가까지 지원하는 데 특화되어 있습니다.
비즈니스 과제
고객은 다음과 같은 요구사항 때문에 파트너 선정에 어려움을 겪었습니다.
- 다수의 도메인 전문가를 제공할 수 있는 업체
- 짧은 기간 내에 많은 작업량을 처리할 수 있는 역량
- 자연스러운 코드 작성 요건을 충족할 수 있는 능력
또한 고객은 대형언어모델(LLM)용 데이터 라벨링 서비스를 제공하여, 고품질의 지도 학습용(SFT) 데이터셋으로 안전하고 책임감 있으며 신뢰할 수 있는 AI 제품 개발을 가능하게 할 공급업체를 찾고 있었습니다.
프로젝트 정보
언어: Python, C/C++, Java, JS, Scala, .Net, Bash, R
솔루션
프로젝트를 받은 후, LTS GDS는 다음과 같은 단계를 수행했습니다.
– 고객의 문제를 분석하고 요구사항을 명확히 파악했습니다.
– 기존의 응답 데이터(질문과 답변 포함)를 정제하여 LLM에 자연스러운 입력이 되도록 개선했습니다.
– 기술 지식과 논리적 추론을 활용해 새로운 질문에 대한 답변을 생성했습니다.
과정은 다음과 같은 단계가 포함됩니다.
- 제공된 Text2Code를 기반으로 질문을 자연어로 다시 작성하고, 논리적으로 올바른 답변을 설명과 함께 작성한 후, 테스트 케이스를 표준으로 생성합니다.
- 1 단계에서 생성한 코드 데이터를 두 부분으로 나눕니다.
- 질문 생성
- 답변 생성
두 부분 모두 맥락에 맞게 다듬고 답변에는 상세한 설명을 추가합니다.
- 1 단계에서 생성한 코드에 주석과 도크스트링을 추가합니다.
- 자연어로 질문을 작성한 후 AI에게 단위 테스트, 답변 및 설명을 생성하도록 요청합니다.
주요 결과
