DiffRhythm Đang hoạt động

DiffRhythm là mô hình tạo bài hát bằng AI do Phòng thí nghiệm ASLP thuộc Đại học Bách khoa Tây Bắc phát triển. Công cụ sử dụng lời bài hát và gợi ý phong cách làm đầu vào sáng tác để tạo bài hát hoàn chỉnh gồm cả giọng hát và phần nhạc đệm.

Công cụ áp dụng mô hình khuếch tán tiềm ẩn và cung cấp mô hình mã nguồn mở cùng mã suy luận, vừa có thể dùng để trải nghiệm sáng tác âm nhạc, vừa làm nền tảng cho nghiên cứu và phát triển thêm.

Người dùng có thể nhập lời bài hát và định hướng quá trình tạo bài hát bằng các gợi ý phong cách như “nhạc pop” hoặc “dân ca”. Công cụ hỗ trợ bài hát tiếng Trung và tiếng Anh, có thể tạo một lần tệp âm thanh hoàn chỉnh gồm giọng hát và nhạc đệm, với thời lượng tối đa khoảng 4 phút 45 giây.

Theo tài liệu, mỗi lần tạo thường mất khoảng 10 giây. Hiệu quả tạo cụ thể phụ thuộc vào lời bài hát, mô tả phong cách và môi trường chạy thực tế.

Nhà sản xuất âm nhạc có thể dùng công cụ để nhanh chóng kiểm chứng bản nháp bài hát, hỗ trợ phát triển giai điệu và định hướng phối khí. Nhà sáng tạo video ngắn và các nội dung khác có thể sử dụng công cụ để tạo bản nháp nhạc nền.

Các nhà phát triển và nghiên cứu quan tâm đến âm thanh AI có thể dựa trên mô hình mã nguồn mở và mã suy luận để nghiên cứu hoặc phát triển thêm; người yêu âm nhạc cũng có thể bắt đầu từ lời bài hát và gợi ý phong cách để thử tạo bài hát hoàn chỉnh.

DiffRhythm phù hợp hơn với việc kiểm chứng ý tưởng, tạo bản nháp bài hát và sản xuất âm thanh bước đầu. Mặc dù bài hát được tạo ra có cả giọng hát và nhạc đệm, điều đó không có nghĩa là sản phẩm có thể đáp ứng trực tiếp mọi yêu cầu phát hành hoặc sản xuất. Người dùng vẫn cần kiểm tra và hậu kỳ dựa trên chất lượng âm thanh, phần trình bày giọng hát, độ rõ của lời bài hát và phong cách tổng thể.

Tài liệu dự án chưa nêu rõ điều khoản sử dụng thương mại, cơ chế kiểm duyệt nội dung đầu ra hoặc yêu cầu tài nguyên trong các môi trường chạy khác nhau. Trước khi sử dụng chính thức, người dùng nên tự xác minh các quy định liên quan.