Moonshot AI đã công bố toàn bộ trọng số của mô hình Kimi K3 vào ngày 27/7, lần đầu tiên đưa một hệ thống sở hữu tới 2,8 nghìn tỷ tham số vào tay cộng đồng.
Các điểm chính:
- Moonshot đã tung toàn bộ trọng số Kimi K3, hiện là mô hình AI mã mở có trọng số công khai lớn nhất.
- Hệ thống có tổng cộng 2,8 nghìn tỷ tham số nhưng chỉ kích hoạt 16 trên 896 “expert” cho mỗi token.
- Nhà đầu tư đang định giá Moonshot ở mức 31,5 tỷ USD trong vòng gọi vốn hiện tại, với mục tiêu đạt 50 tỷ USD trước khi niêm yết tại Hồng Kông.
Mười ngày chờ đợi trọng số Kimi K3 khép lại
Moonshot ra mắt Kimi K3 ngày 16/7 thông qua API và ứng dụng cho người dùng cuối, công bố mô hình tại Hội nghị Trí tuệ Nhân tạo Thế giới ở Thượng Hải, nhưng giữ lại phần trọng số thêm mười ngày.
Công ty từng cam kết công bố toàn bộ trước ngày 27/7 trên blog kỹ thuật, và sử dụng quãng thời gian này để phối hợp với đối tác suy luận và cộng đồng mã nguồn mở. Hiện bất kỳ ai có hạ tầng phù hợp đều có thể tải về khoảng 594 GB tệp đã lượng tử hóa.
Kimi K3 sở hữu tổng 2,8 nghìn tỷ tham số nhưng trên mỗi token chỉ kích hoạt 16 trong số 896 expert – khoảng 1,8% “bể” tham số – cùng cửa sổ ngữ cảnh lên tới 1 triệu token. Trên bảng xếp hạng Arena, mô hình được đánh giá đứng đầu hạng mục Frontend Code với 1.679 điểm, vượt qua Claude Fable 5 của Anthropic trong các bài kiểm thử mù với lập trình viên. Moonshot khuyến nghị vận hành mô hình trên cụm từ 64 bộ tăng tốc trở lên.
Bài liên quan: Kỵ Sĩ Ma Và Báo Đen: Thị trường dự đoán “trượt” hai màn công bố dàn cast lớn nhất của Marvel
Nathan Lambert gọi K3 là mô hình mã mở mạnh nhất
Giới nghiên cứu phản ứng gần như ngay lập tức.
Nathan Lambert, tác giả bản tin Interconnects, đã gọi K3 là mô hình mã mở mạnh nhất từng được phát hành. Ông cho rằng khoảng cách giữa mô hình mở và mô hình đóng đã thu hẹp đáng kể: từ mức thường được tranh luận là 6–9 tháng xuống còn khoảng 3–5 tháng. Việc công bố trọng số cũng bào mòn biên lợi nhuận của các phòng lab đóng, vốn dựa vào các hệ thống mà không ai khác có thể tải về và tự vận hành.
Kyle Chan, nghiên cứu viên tại Viện Brookings, nhận định mô hình trọng số mở cho phép Moonshot “mượn” công suất tính toán mà các doanh nghiệp khác đã đầu tư xây dựng từ trước.
Ở chiều ngược lại, Dean Ball, phụ trách mảng chiến lược tương lai tại OpenAI, cảnh báo rằng một thế giới vận hành chủ yếu trên các mô hình có thể tải về dẫn đến viễn cảnh mà ông gọi là “chủ nghĩa cộng sản AI toàn phần”.
Định giá Moonshot hướng tới mốc 50 tỷ USD
Các nhà đầu tư đang định giá Moonshot ở mức 31,5 tỷ USD trong vòng gọi vốn đang khép lại, và công ty đặt mục tiêu huy động thêm để đẩy định giá lên tới 50 tỷ USD trước khi niêm yết tại Hồng Kông. Doanh thu định kỳ hàng năm đạt 300 triệu USD vào tháng 6, tăng từ 200 triệu USD hồi tháng 4, trong khi doanh số theo ngày đã tăng ít nhất sáu lần kể từ khi K3 đi vào hoạt động.
Song song, Washington phát tín hiệu sẽ giám sát chặt các mô hình mã nguồn mở nước ngoài để tìm dấu hiệu vi phạm sở hữu trí tuệ.
Dương Chí Lâm (Yang Zhilin) thành lập Moonshot năm 2023; đến tháng 5 năm nay, các nhà đầu tư còn định giá công ty chỉ hơn 20 tỷ USD, một mốc mà hiện doanh nghiệp đã bỏ xa. Ngay sau khi K3 ra mắt, Moonshot buộc phải tạm dừng nhận đăng ký mới chỉ sau vài ngày do nhu cầu vượt xa năng lực hạ tầng sẵn có.
Đọc tiếp: Samsung chốt thỏa thuận chip Broadcom trị giá 200 tỷ USD gây choáng ngợp