Meta vừa chính thức công bố Muse Spark Open, mô hình open-weight đa phương thức thuộc dòng Muse với kiến trúc mixture-of-experts (MoE) có quy mô lên tới 816 tỷ tham số. Mô hình này hỗ trợ cửa sổ ngữ cảnh rộng tới một triệu token và có khả năng xử lý đồng thời văn bản, hình ảnh, âm thanh và video trong cùng một giao diện duy nhất, đánh dấu bước tiến lớn của các mô hình nguồn mở tại Mỹ.
Được thiết kế chuyên biệt cho các tác vụ agentic coding, Muse Spark Open có khả năng đọc hiểu mã nguồn, lập trình, gỡ lỗi và gọi công cụ thông qua các luồng công việc thực tế của lập trình viên. Mô hình sở hữu 256 chuyên gia (expert) trong mỗi khối MoE nhưng chỉ kích hoạt 8 chuyên gia cho mỗi token, giúp đạt tốc độ xử lý tương đương mô hình 42 tỷ tham số hoạt động. Meta phát hành các phiên bản checkpoint gồm BF16 dung lượng khoảng 1.5 TB và định dạng NVFP4 tối ưu riêng cho GPU NVIDIA Blackwell.
Sự xuất hiện của một mô hình mã nguồn mở mạnh mẽ như Muse Spark Open mở ra cơ hội lớn cho cộng đồng AI và kỹ sư phần mềm tại Việt Nam tiếp cận công nghệ frontier model tiên tiến. Các đội ngũ phát triển trong nước có thể tận dụng mô hình này để xây dựng các hệ thống trợ lý lập trình tự trị và ứng dụng đa phương thức chất lượng cao mà không bị phụ thuộc hoàn toàn vào các dịch vụ thương mại khép kín.
Nguồn: Hugging Face — Biên dịch & tổng hợp: danhbaai.com