크래프톤은 음성 AI 파운데이션 모델 'A.X K2 라온-스피치(A.X K2 Raon-Speech)'를 AI 플랫폼 허깅페이스(Hugging Face)에 공개했다고 밝혔다.
크래프톤은 과학기술정보통신부가 추진하는 '독자 AI 파운데이션 모델' 프로젝트에서 SK텔레콤 정예팀과 함께 멀티모달 AI 모델 연구를 진행하고 있다. 'A.X K2 라온-스피치'는 프로젝트 2차 연도 성과 중 하나로 공개된 음성 언어 모델이다. 이번 모델은 SK텔레콤의 소형 언어모델 'A.X K2'를 기반으로, 크래프톤이 자체 개발한 음성 인코더와 코덱을 적용해 음성을 이해하고 생성할 수 있도록 학습시켰다.
기존 AI 음성 대화 시스템은 사용자의 음성을 텍스트로 변환한 뒤 답변을 생성하고 이를 다시 음성으로 합성하는 과정을 거친다. 이 과정에서 감정과 억양 등 음성 정보가 일부 손실될 수 있다. 'A.X K2 라온-스피치'는 사용자의 목소리에 담긴 다양한 정보를 함께 활용해 보다 자연스러운 음성 답변을 생성할 수 있도록 설계됐다.
'A.X K2 라온-스피치'는 21B 파라미터 규모로 개발됐다. 크래프톤에 따르면 이번 모델은 30B 파라미터 이하 공개 음성 언어 모델 가운데 한국어 종합 성능 1위, 영어 종합 성능 3위를 기록했다. 평가는 음성 인식과 음성 합성, 음성 이해, 음성 질의응답, 텍스트 질의응답, 도구 호출 등 6개 항목을 대상으로 진행됐다.
크래프톤은 AI를 새로운 게임 경험을 구현하는 핵심 기술로 보고 언어와 음성, 비전 등 AI 파운데이션 기술을 지속적으로 연구하고 있다. 회사는 이번 연구를 통해 확보한 음성 AI 기술을 이용자와 함께 플레이하는 AI 캐릭터(CPC) 고도화에 활용할 계획이다.
Copyright ⓒ 경향게임스 무단 전재 및 재배포 금지
본 콘텐츠는 뉴스픽 파트너스에서 공유된 콘텐츠입니다.
