이용자의 자연어 지시만으로 말투와 감정, 억양은 물론 사투리까지 반영하는 음성 생성 기능을 구현하고, 자체 개발 음성 토크나이저를 적용해 처리 속도와 효율도 높였다.
한국어 중심으로 학습했지만 영어 음성 생성에서도 동일한 발화 지시를 자연스럽게 처리한다는 설명이다.
카카오에 따르면 LM-SPT는 한국어와 영어 음성 이해·생성 평가에서 글로벌 최신 기술인 Mimi, DualCodec, CosyVoice2 기반 모델보다 우수한 성능을 기록했으며, 음성의 자연스러움과 화자 유사성을 평가하는 전문가 청취 평가에서도 가장 높은 점수를 받았다.
뉴스픽의 주요 문장 추출 기술을 사용하여 “뉴스락” 기사 내용을 3줄로 요약한 결과입니다. 일부 누락된 내용이 있어 전반적인 이해를 위해서는 본문 전체 읽기를 권장합니다.