Wenxin 5.5 Flash Preview Đang hoạt động

Wenxin 5.5 Flash Preview (ERNIE 5.5 Flash Preview) là mô hình nền tảng mới nhất do Baidu phát triển, là phiên bản hậu huấn luyện đầu tiên dựa trên mô hình Base đã ra mắt trước đó, với tổng 280B tham số và 14B tham số kích hoạt, hỗ trợ ngữ cảnh siêu dài 1M. ERNIE 5.5 Flash Preview thể hiện xuất sắc trong các lĩnh vực như lập trình, tạo mô hình 3D, công việc tri thức và sáng tạo nội dung. Mô hình đạt điểm số cạnh tranh trong nhiều bài kiểm thử chuẩn, đồng thời duy trì tốc độ giải mã cực cao. API mô hình đã được triển khai trên nền tảng Qianfan và trọng số sẽ được mã nguồn mở trước ngày 25 tháng 11.

Phát triển game: Hỗ trợ từ sửa lỗi, lặp lại trên kho mã thực tế đến xây dựng hoàn chỉnh các ứng dụng phức tạp; được tối ưu sâu cho các engine phổ biến như Unreal Engine, Unity, Godot và Cocos, có thể tạo ra game hoàn chỉnh về lối chơi từ đầu đến cuối.
Tạo mô hình và thiết kế 3D: Sử dụng các công cụ như Blender và FreeCAD để tạo mô hình tham số hóa, suy luận hình dạng và quan hệ không gian từ mô tả văn bản, đồng thời tạo ra các mô hình và cảnh 3D chính xác, có thể chỉnh sửa.
Công việc tri thức: Hướng đến các lĩnh vực như tài chính và pháp luật, có thể tổng hợp tài liệu phân tán thành bảng biểu, tài liệu và bài thuyết trình chuyên nghiệp, tự hoàn thành toàn bộ quy trình từ làm sạch dữ liệu, phân tích đến bàn giao báo cáo.
Sáng tạo video: Bao phủ toàn bộ quy trình từ tạo ý tưởng, kịch bản, phân cảnh, tài sản hình ảnh đến lồng tiếng; thậm chí có thể dùng mã thuần túy để điều khiển việc vẽ phim hoạt hình ngắn và tự động đồng bộ với phần biên tập nhạc nền.

Kiến trúc mô hình và định hướng huấn luyện: ERNIE 5.5 Flash Preview là phiên bản hậu huấn luyện đầu tiên của mô hình Base trước đó, với tổng 280B tham số và 14B tham số kích hoạt; trên nền tảng này, mô hình được tăng cường khả năng thông minh thông qua hậu huấn luyện, đạt điểm số cạnh tranh trong nhiều bài kiểm thử chuẩn và tốc độ giải mã cực cao, đồng thời hỗ trợ ngữ cảnh siêu dài 1M.
Khả năng phát triển game và Agent: Thông qua việc xây dựng dữ liệu huấn luyện chuyên biệt chất lượng cao cùng hệ thống đánh giá tương ứng, mô hình được tăng cường năng lực triển khai cơ chế game, tổ chức logic, quản lý trạng thái và quy trình tài nguyên; đồng thời được tối ưu sâu cho các engine phổ biến để hiểu mô hình phát triển của từng engine. Quy trình làm việc do khung Agent điều khiển, trong đó các nhiệm vụ dài được chia thành các nhiệm vụ con để tiến hành và phối hợp với nhau; các bài kiểm thử mã có thể đo lường thay thế phản hồi trực quan nhằm thúc đẩy quá trình lặp lại.
Tự động xác minh và mô phỏng xác định: Trong các tình huống như game, mô hình tách biệt lớp quy tắc và lớp trình bày để xây dựng mô phỏng xác định, sau đó sử dụng robot chơi thử, tìm kiếm không gian trạng thái và phát lại màn chơi để tự động kiểm tra khả năng vượt qua màn chơi và cân bằng giá trị. Vòng lặp “tự xác minh” tự động này bù đắp hạn chế của mô hình thuần văn bản, vốn không thể trực tiếp quan sát hiệu quả vận hành.
Sử dụng công cụ và tổ chức tài sản: Mô hình được huấn luyện chuyên biệt với các phần mềm công cụ như Blender và CAD, kết hợp công cụ bên ngoài để tìm kiếm, tải xuống tài sản và tích hợp tài sản được cấp phép. Mô hình hóa theo quy trình chuyển đổi mô tả văn bản thành tài sản 3D, sau đó sử dụng quy trình gồm thống nhất tỷ lệ, kết xuất theo từng khung hình và tổng hợp bằng FFmpeg để tổ chức và tạo ra sản phẩm hoàn chỉnh.

Truy cập nền tảng: Truy cập nền tảng mô hình lớn Qianfan của Baidu Intelligent Cloud (qianfan.cloud.baidu.com), nơi API mô hình ERNIE 5.5 Flash Preview đã được triển khai.
Kích hoạt dịch vụ: Đăng ký/đăng nhập tài khoản Baidu Intelligent Cloud, tìm ERNIE 5.5 Flash Preview trong bảng điều khiển Qianfan và kích hoạt quyền gọi.
Lấy thông tin xác thực: Tạo ứng dụng trong bảng điều khiển để lấy API Key và Secret Key.
Gọi API: Tham khảo tài liệu API của nền tảng Qianfan, truyền tên mô hình, prompt và các tham số thông qua yêu cầu HTTP hoặc SDK chính thức để nhận phản hồi từ mô hình.
Chọn tình huống sử dụng: Sử dụng trực tiếp theo nhu cầu. Lập trình/phát triển game có thể sử dụng quy trình nhiệm vụ dài thông qua khung Agent; tạo mô hình 3D có thể kết hợp với các công cụ như Blender và FreeCAD; công việc tri thức và sáng tạo video có thể được bàn giao từ đầu đến cuối thông qua các nhiệm vụ Agent nhiều bước.

Cân bằng giữa hiệu suất và năng lực: Kiến trúc MoE với tổng 280B tham số và 14B tham số kích hoạt đạt điểm số cạnh tranh trong nhiều bài kiểm thử chuẩn, đồng thời duy trì tốc độ giải mã cực cao.
Ngữ cảnh siêu dài: Hỗ trợ ngữ cảnh 1M, có thể xử lý các tác vụ đầu vào dài như kho mã quy mô lớn và khối lượng tài liệu khổng lồ.
Năng lực thực hiện nhiệm vụ dài mạnh mẽ: Có thể hoàn thành từ đầu đến cuối các nhiệm vụ phát triển phức tạp kéo dài 11 giờ, với khả năng lập kế hoạch, thực thi và lặp lại liên tục.
Tối ưu sâu cho phát triển game: Được tối ưu chuyên biệt cho các engine phổ biến như Unreal Engine, Unity và Godot, bao phủ toàn bộ quy trình từ thiết kế ý tưởng đến xây dựng cảnh.
Khả năng tự xác minh: Có thể chuyển vấn đề trực quan thành các bài kiểm thử mã có thể đo lường, đồng thời tự động xác minh chất lượng kết quả thông qua robot chơi thử và tìm kiếm trạng thái.
Khả năng tích hợp công cụ và tài sản mạnh mẽ: Sử dụng thành thạo các công cụ như Blender và CAD, có thể tìm kiếm dữ liệu, tích hợp tài sản được cấp phép, đồng thời tổ chức toàn bộ quy trình kết xuất và tổng hợp.

Trang web dự án: https://ernie.baidu.com/zh/release/ernie-5-5-flash-preview/

Phát triển game: Dựa trên tài liệu thiết kế hoàn chỉnh, tạo game di động quy mô nhỏ từ đầu đến cuối với lối chơi, đồ họa và âm thanh đầy đủ, hoặc hoàn thành quá trình phát triển và lặp lại dài hạn cho các game lớn trên UE/Unity.
Tạo mô hình và thiết kế 3D: Sử dụng các công cụ như Blender và CAD để chuyển đổi mô tả văn bản thành mô hình 3D tham số hóa, có thể chỉnh sửa, đồng thời tích hợp tài sản bên ngoài để xây dựng các cảnh giàu chi tiết.
Nghiên cứu ngành và viết báo cáo: Hướng đến các lĩnh vực như tài chính và pháp luật, tự động tổng hợp tài liệu từ nhiều nguồn để hoàn thành việc làm sạch dữ liệu, phân tích và kiểm chứng chéo, sau đó bàn giao báo cáo nghiên cứu hoặc bài thuyết trình chuyên nghiệp.
Sáng tạo video và hoạt hình: Bao phủ toàn bộ quy trình từ ý tưởng, kịch bản, phân cảnh, hình ảnh đến lồng tiếng; có thể tổ chức tài sản, điều chỉnh nhịp điệu và xuất bản thành phẩm, thậm chí dùng mã thuần túy để điều khiển việc tạo phim hoạt hình ngắn phong cách hóa.