👩🏻‍🎤

Universe 아이돌 음성 합성

Date
2020 - 2022
Type
Work
Role
TTS 기술 책임
Goal
K-pop 플랫폼 Universe 어플에서 아이돌 가수들의 목소리를 프라이빗콜과 FNS를 이용하여 팬들에게 전달
Description
한국어 화자 숫자로는 국내 최대 규모의 음성합성 서비스이며, 100명 이상의 목소리를 효율적으로 서비스하기 위해 다수의 기술을 적용하였음. 유저가 팬들이기 때문에 화자의 발화에 대한 이해도가 높으며, 이를 충족시키기 위해 녹음을 기획하는 것부터 모델 및 시스템 설계 구현하는 것과 평가 검증 기획까지 합성 기술 배포를 위한 전반을 총괄하고 개발함. 중장기 프로젝트로 지속적으로 기술 연구 개발 진행 중.
Skill
Python, PyTorch

주요 기술

Python, PyTorch
고품질 음성합성 모델
다화자 음성합성 모델

담당 업무

100명 이상의 아티스트 보이스를 학습하여 모델 제공
데이터 구축, 모델 학습, 검증, 서비스까지 전체 프로세스 책임
지속적인 대본 및 녹음 고도화
지속적으로 추가되는 아티스트 보이스 업데이트

기술 제공 형태

구독한 팬에게 전화(프라이빗콜)하여 작성된 멘트를 음성합성으로 읽어주는 기능
아티스트가 작성한 SNS 글(FNS)을 음성합성으로 읽어주는 기능