알리바바는 오늘 중국 최초의 원스톱 AI 음성 생산성 플랫폼 CosyVoice Studio를 출시한다고 발표했다.
공식 발표에 따르면 이 플랫폼은 자체 개발 음성 모델 Qwen-Audio를 기반으로 하며, 음성 기록 기능 CosyFlow, 음성 에이전트 CosyAgent, 오디오 콘텐츠 제작 도구 CosyCreative 등을 제공한다.
사용자는 iOS, Android, Mac 및 Windows 앱 스토어에서 “CosyVoice”를 검색해 다운로드할 수 있으며, 기간 한정으로 무료 체험이 가능하다. CosyAgent와 CosyCreative는 현재 기업 사용자를 대상으로 화이트리스트 초대 방식으로 테스트 중이며, 조만간 전면 공개될 예정이다.
CosyVoice Studio의 주요 기능은 다음과 같다.
음성 기록 기능은 음성을 텍스트로 변환하는 기능에 의미 이해와 텍스트 생성 기능을 더했다. 일상적인 상황에서는 “그”, “음”과 같은 말버릇을 자동으로 걸러내 흩어진 생각을 명확한 표현으로 정리하며, 업무 상황에서는 말로 이메일, 업무 보고서, 회의록의 형식과 문구를 생성할 수 있다.
회의, 인터뷰, 수업 등의 상황을 위한 ‘随记’ 기능이 내장되어 있으며, 실시간 녹음과 오프라인 업로드를 지원한다. 음성 특징을 바탕으로 발화자를 구분하고, 녹음이 끝나면 구조화된 챕터와 지능형 요약을 자동으로 생성한다.
CosyAgent는 자연어를 통해 기업 지식, 도구 호출, 실시간 음성 상호작용 기능을 갖춘 에이전트를 빠르게 생성할 수 있도록 지원한다. 또한 prompt와 workflow 설정도 지원하며, 지능형 고객센터와 전화 마케팅 등의 상황을 겨냥한다.
CosyCreative에는 수천 가지 음색이 내장되어 있으며, 음성 복제를 지원해 실제 사람과 매우 유사한 음색을 생성할 수 있다. 사용자는 문서, 웹페이지 링크를 업로드하거나 텍스트를 입력해 대화형 팟캐스트 또는 여러 캐릭터가 등장하는 오디오북을 생성할 수 있어 오디오 콘텐츠 제작의 전 과정을 지원한다.
