알리바바는 오늘(17일) 공식 계정을 통해 AI 음악 모델 HappyShrimp 1.0(중문명 행복한 새우)을 정식 출시했다고 발표했다. HappyShrimp는 자연어를 정확하게 이해해 사용자의 감정, 이야기 또는 기억을 완성된 음악 한 곡으로 만들어 준다.
소개에 따르면 HappyShrimp는 개발 초기부터 창작의 진입장벽을 낮추는 데 초점을 맞췄다. 음악 이론과 편곡 등 전문 용어뿐 아니라 자연어도 정확하게 이해해 누구나 음악 창작의 즐거움을 누릴 수 있도록 했다. 또한 AI 음악의 기계적인 보컬, 가사와 멜로디의 불일치, 산만한 청감 등 문제를 해결하기 위해 음성 디테일과 음악성에서 일부 돌파구를 마련했다.
HappyShrimp는 곡 전체를 엔드투엔드 방식으로 생성하며, 음악을 문법·의미·맥락을 지닌 특수한 언어로 이해한다. 사용자가 제시한 언어 설명, 가사, 음악 스타일, 감정, 시대 및 보컬 등의 요구를 각각 처리한 뒤 이어 붙이는 것이 아니라, 전체를 계획하고 동시에 창작하며 장기 구조를 고려해 하나의 완성된 곡으로 생성한다.
뿐만 아니라 HappyShrimp는 ‘AI 음악 도구는 일반적으로 표준화된 음악 태그 처리에는 능숙하지만 자연어에 담긴 문화적 맥락, 시대적 미감과 감정적 의도는 이해하기 어렵다’는 상황에도 도전한다. 예를 들어 ‘Lo-fi R&B’와 같은 전문적인 표현을 이해할 수 있으며, 감정·장면·서사도 파악할 수 있다.
오늘부터 HappyShrimp는 중국 국내와 해외에서 PC 웹 버전을 동시에 제공한다.
체험 주소: Happy Shrimp