【 청년일보 】 네이버가 자사의 인공지능(AI) 거대언어모델(LLM)인 '하이퍼클로바X'에 대한 기술 보고서를 공개했다.

4일 네이버가 작성한 보고서에 따르면 하이퍼클로바X는 한국어, 일반 상식, 수학, 코딩 부문에서 비교·평가를 위해 선정한 14개 모델 가운데 1위를 기록했다.

한국어 능력 부문에서는 세계 최고 수준 모델을 포함해 비교·평가를 위해 보고서에서 선정한 4개 모델 중 1위에 올랐고, 영어 능력 분야에서도 같은 모델들 가운데 2위를 기록했다.

하이퍼클로바X의 사전학습(Pretraining) 데이터는 대부분 한국어, 영어, 코드 데이터로 구성됐다.

양질의 사전학습 데이터 구축을 위해 매우 짧거나 반복적인 저품질 문서는 데이터세트에서 제외했고, 개인 정보가 포함된 데이터도 삭제했다. 또 정렬학습을 통해 사용자의 의도와 지시를 AI가 더 잘 이해할 수 있도록 모델을 고도화했다.

하이퍼클로바X의 또 다른 특징은 '다국어 능력'(Multilinguality)이다.

보고서에 따르면 학습 데이터의 대부분을 차지하는 한국어와 영어 정보를 활용해 제3의 언어로 추론하는 능력을 갖춘 것이 확인됐다.

일본어, 아랍어, 힌디어, 베트남어를 비롯한 아시아 국가 언어 능력을 평가했을 때, 하이퍼클로바X는 주요 오픈소스 모델을 포함해 리포트에서 선정한 9개 모델 중 가장 높은 점수를 획득했으며, 중국어에서만 같은 모델들 중 2위를 기록했다.

한국어를 일본어로, 일본어를 한국어로 번역하는 능력은 보고서에서 선정한 10개의 모델 가운데 1위를 기록했고, 영어를 한국어로 번역하는 정확도 역시 동일한 10개 모델 중 가장 높은 점수를 기록했다.

유강민 네이버클라우드 팀장은 "하이퍼클로바X의 다국어 추론, 기계 번역 능력을 측정한 실험은 지역 또는 문화권 특화 목적으로 개발한 AI가 해당 국가 언어 외에도 여러 언어에서 일정 수준 이상의 능력을 갖출 수 있음을 실증한 것"이라며 "특정 문화권에 더 적합한 배경지식과 함께 다국어 능력까지 보유해 한층 활용도가 높은 소버린 AI의 가능성을 하이퍼클로바X가 보여주고 있다"고 설명했다.

성낙호 네이버클라우드 하이퍼스케일 AI 기술 총괄은 "한국 특화 지식뿐만 아니라 프로그래밍과 수학적 추론, 다국어 능력과 안전성까지 확보한 소버린 AI의 '모범 사례'로서 하이퍼클로바X 구축 경험을 활용해 향후 다양한 지역 및 국가의 특화 초대규모 AI를 만드는 데에도 적극적으로 나설 것"이라고 말했다.

【 청년일보=권하영 기자 】