DiffRhythm 운영 중

DiffRhythm은 중국 시베이공업대학교 ASLP 연구실에서 개발한 AI 노래 생성 모델입니다. 가사 텍스트와 스타일 프롬프트를 창작 입력값으로 사용해 보컬과 반주가 함께 포함된 완성된 노래를 생성합니다.

이 도구는 잠재 확산 모델을 사용하며 오픈 소스 모델과 추론 코드를 제공합니다. 음악 창작을 체험하는 용도뿐 아니라 연구와 2차 개발의 기반으로도 활용할 수 있습니다.

사용자는 가사를 입력하고 ‘팝’, ‘포크’ 등의 스타일 프롬프트로 노래 생성을 유도할 수 있습니다. 중국어와 영어 노래를 지원하며, 한 번에 보컬과 반주가 포함된 완성된 오디오를 생성할 수 있고 최대 길이는 약 4분 45초입니다.

자료에 따르면 한 번의 생성에는 보통 약 10초가 걸립니다. 구체적인 생성 결과는 입력한 가사, 스타일 설명 및 실제 실행 환경에 따라 달라집니다.

음악 제작자는 곡 데모를 빠르게 검증하고 멜로디와 편곡 방향을 정리하는 데 활용할 수 있습니다. 숏폼 동영상 및 기타 콘텐츠 제작자는 배경 음악 초안을 만드는 데 사용할 수 있습니다.

AI 오디오에 관심 있는 개발자와 연구자는 오픈 소스 모델 및 추론 코드를 기반으로 연구나 2차 개발을 진행할 수 있습니다. 음악 애호가는 가사와 스타일 프롬프트를 바탕으로 완성된 노래를 생성해 볼 수 있습니다.

DiffRhythm은 창의적인 아이디어 검증, 곡 데모 및 초기 오디오 제작에 더 적합합니다. 생성된 노래에는 보컬과 반주가 포함되지만 모든 게시 또는 제작 요구사항을 바로 충족한다는 의미는 아닙니다. 사용자는 음질, 보컬 표현, 가사의 명확성 및 전체적인 스타일을 확인하고 후반 작업을 진행해야 합니다.

프로젝트 자료에는 구체적인 상업적 이용 약관, 출력 콘텐츠 검토 체계 또는 다양한 실행 환경에서 필요한 리소스가 명시되어 있지 않습니다. 정식으로 사용하기 전에 관련 규정을 직접 확인해야 합니다.