Kimi khoe K3 Max nhỉnh hơn Claude và GPT trong thử nghiệm agent nội bộ
Họ nói mẫu mới làm tốt hơn ở một số việc thực tế người dùng hay gặp
TL;DR:
- Kimi chạy thử K3 Max với mấy việc như thí nghiệm, làm slide deck và xử lý số liệu tài chính
- Kết quả trông khá ổn nhưng vẫn chỉ là số liệu nội bộ nên khó ai kiểm chứng ngoài
- Các lab lớn dường như đang chuyển hướng chú trọng độ ổn định của agent hơn là mải chạy benchmark công khai
Kimi khoe K3 Max mạnh hơn
Kimi.ai cho biết K3 Max của họ nhỉnh hơn Claude Opus 4.8 và GPT-5.5 trong vài bài test nội bộ về workflow dạng agent.
Điều họ muốn nhấn mạnh không phải là thắng benchmark kiểu cũ, mà là năng lực agent nên được đo bằng cách xử lý công việc thật, chứ không chỉ dựa vào điểm số suy luận công khai.
Họ đã thử những gì
Theo thông báo, Kimi đánh giá K3 Max qua ba nhóm việc lấy từ thực tế:
- Thí nghiệm trực tuyến: xem agent có lập kế hoạch, chạy và chỉnh sửa được trong môi trường nhiều bước không.
- Tạo slide deck: đo khả năng gom thông tin, sắp xếp nội dung và xuất ra file dùng ngay.
- Tác vụ tài chính: kiểm tra xử lý dữ liệu, đối chiếu và thực hiện các bước phân tích chuyên môn.
Kimi cho rằng kết quả này cho thấy sự cải thiện thực tế ở cách agent làm việc, thay vì chỉ tối ưu cho benchmark công khai.
Vấn đề với benchmark nội bộ
Cốt lõi là Kimi dùng benchmark từ công việc thật của người dùng. Nếu đúng như công bố thì K3 Max có thể dùng được cho doanh nghiệp như gom tài liệu nghiên cứu, chuẩn bị slide hay chạy các bước kiểm tra tài chính.
Nhưng hạn chế lớn là dữ liệu và cách đánh giá chưa công khai, nên bên ngoài khó kiểm chứng mức độ vượt trội so với Claude hay GPT.
| Điểm cần theo dõi | Ý nghĩa | |---|---| | Benchmark từ việc người dùng thật | Gần với nhu cầu dùng agent trong doanh nghiệp | | Kết quả vẫn nội bộ | Chưa đủ để coi là bằng chứng độc lập | | So sánh với Claude và GPT | Có giá trị tham khảo nhưng phụ thuộc cách ra đề | | Tập trung workflow agent | Phù hợp xu hướng các lab đang ưu tiên độ ổn định khi chạy thực tế |
Bức tranh chung là các lab AI lớn đang dịch chuyển: độ ổn định của agent trong workflow thật đang quan trọng hơn việc tối đa điểm reasoning trên benchmark công khai.
Verdict: Người đọc chưa muộn với câu chuyện về độ tin cậy của agent; lợi thế hiện ở những bên tự kiểm chứng được, còn nhà đầu tư dài hạn vẫn thiếu dữ liệu công khai để kết luận chắc chắn.