Ngày 26 tháng 8, Anthropic công bố kết quả của một chương trình thí điểm: mở dữ liệu sử dụng thực tế của Claude cho ba tổ chức bên ngoài để thực hiện nghiên cứu độc lập, đồng thời công bố kết luận tổng hợp của cả ba dự án.
Ba đơn vị tham gia gồm Phòng thí nghiệm Công nghệ Xã hội và Ngôn ngữ của Đại học Stanford, Phòng thí nghiệm Xử lý Thông tin Con người của Đại học Oxford, và tổ chức đánh giá phi lợi nhuận METR. Mẫu phân tích là khoảng 250.000 đoạn hội thoại từ Claude.ai và Claude Code, thu thập trong khoảng tháng 4 đến tháng 5 năm 2026.
Nhà nghiên cứu không được xem hội thoại gốc
Về quy trình, các nhà nghiên cứu không hề tiếp cận trực tiếp nội dung hội thoại gốc trong suốt quá trình. Họ nộp yêu cầu phân tích thông qua công cụ Insights — cùng loại công cụ Anthropic dùng nội bộ — và chỉ nhận lại kết quả đã được tổng hợp; những kết quả này còn phải qua đánh giá pháp lý và quyền riêng tư trước khi được mang ra ngoài. Phạm vi rà soát theo hợp đồng giới hạn ở bốn điểm: quyền riêng tư người dùng, vi phạm chính sách, thông tin bảo mật, và độ chính xác nghiên cứu — không bao gồm việc "kết luận có lợi cho công ty hay không".
Về mặt quyền riêng tư, Anthropic còn mời Imperial College London thực hiện kiểm toán độc lập từ bên thứ ba. Dữ liệu tổng hợp của cả ba dự án đã được đăng tải công khai trên Hugging Face Datasets với tên gọi Anthropic/enabling-independent-research.
Việc các công ty mô hình công bố báo cáo thông tin sử dụng vốn đã là chuyện thường thấy — OpenAI và cả Anthropic đều từng làm nhiều lần. Điểm khác biệt nằm ở chỗ ai nắm quyền quyết định cách phân tích. Với báo cáo do chính nhà cung cấp tự viết, từ cách đặt câu hỏi, cách cắt mẫu, đến định nghĩa chỉ số đều nằm trong tay một bên, còn bên ngoài chỉ có thể chọn tin hoặc không tin; khi công cụ và dữ liệu được giao ra ngoài, ít nhất bên thứ ba có cơ hội đặt ra những câu hỏi mà nhà cung cấp sẽ không tự hỏi mình.
Ba kết luận đi ngược trực giác thông thường
Kết luận đầu tiên liên quan đến mức độ quan trọng của tác vụ. Các nghiên cứu trước đây thường cho rằng người dùng chủ yếu giao cho AI những việc vặt, trách nhiệm thấp, rủi ro thấp. Dữ liệu lần này cho kết quả ngược lại: hơn một nửa số hội thoại liên quan đến việc giao phó những tác vụ có hậu quả thực sự. Nguyên văn công bố là
(người dùng giao những công việc rủi ro cao cho AI nhiều hơn dự đoán).People bring high-stakes work to AI more than expected
Kết luận thứ hai liên quan đến quyền kiểm soát. Trong ba phần tư số hội thoại, con người giữ vai trò chỉ huy còn mô hình đóng vai trò hỗ trợ, chứ không phải mô hình tự chạy toàn bộ quy trình một mình. Điều này khác rõ rệt so với câu chuyện phổ biến rằng "AI agent đang dần tiếp quản công việc".
Kết luận thứ ba liên quan đến ma sát trong tương tác. Các nhà nghiên cứu nhận thấy việc hợp tác người-máy gặp trục trặc là chuyện bình thường, nhưng loại ma sát này thường mang lại kết quả tích cực — sau khi bị mô hình phản hồi không như ý, người dùng thường sẽ tổ chức lại cách diễn đạt nhu cầu của mình.
Ngoài ra còn một con số đáng chú ý: tỷ lệ hội thoại thuộc nhóm vi phạm chính sách thấp hơn 5%. Con số này vẫn còn khoảng trống để tranh luận, vì tiêu chí phân loại vẫn do một mình Anthropic định nghĩa, còn các nhà nghiên cứu bên ngoài chỉ nhận được kết quả sau khi đã được phân loại.
Ý nghĩa thực tế đối với độc giả trong nước
Các nhóm trong nước đang triển khai AI cho doanh nghiệp thường xuyên vấp phải câu hỏi: rốt cuộc những việc gì có thể giao cho mô hình. Dữ liệu công khai hiện có để tham khảo phần lớn đến từ tài liệu tiếp thị của chính các nhà cung cấp, trong khi mẫu dữ liệu, tiêu chí đo lường và động cơ công bố đều không minh bạch. Bộ dữ liệu lần này được đăng công khai trên kho lưu trữ mở, dù độ chi tiết còn thô, nhưng ít nhất cũng cung cấp một đường tham chiếu không do bộ phận kinh doanh soạn ra.
Cần lưu ý một điểm: 250.000 đoạn hội thoại này đến từ người dùng Claude.ai và Claude Code, nhóm người dùng này vốn thiên về lập trình viên và ngữ cảnh tiếng Anh, nên nếu áp thẳng kết luận vào các tình huống doanh nghiệp trong nước sẽ dễ bị lệch. Bộ dữ liệu này phù hợp hơn để dùng làm nhóm đối chiếu, chứ không nên xem là kết luận cuối cùng.
Sau đợt thí điểm này, Anthropic chưa nói rõ liệu cơ chế này có được duy trì thường xuyên hay không, cũng chưa công bố danh sách đối tác tiếp theo. Trong ba đơn vị tham gia, vai trò của METR khá đặc biệt — thông thường tổ chức này chuyên đánh giá năng lực mô hình, nhưng lần này lại được tiếp cận dữ liệu phía sử dụng. Việc cùng một tổ chức nhìn thấy cả hai đầu năng lực và cách sử dụng là một thay đổi vị trí đáng chú ý đối với hoạt động giám sát từ bên ngoài.
Nguồn tham khảo: blog nghiên cứu của Anthropic, CocoLoop, Hugging Face Datasets; quy mô mẫu, danh sách tổ chức tham gia và sắp xếp kiểm toán quyền riêng tư được xác minh theo thông báo chính thức.