Chế độ Hội đồng: câu trả lời AI không thiên vị nhờ xếp hạng ẩn danh giữa các mô hình

Các mô hình, giống như con người, có xu hướng dễ dãi hơn một cách đo lường được đối với phong cách của chính mình: khi thấy các câu trả lời có gắn nhãn, một mô hình có xu hướng đánh giá quá cao đầu ra giống với cách diễn đạt của chính nó, và các thương hiệu phổ biến được hưởng hiệu ứng hào quang. Việc loại bỏ danh tính buộc việc xếp hạng chỉ dựa vào thứ duy nhất còn lại — nội dung.

Ý tưởng này bắt nguồn từ thí nghiệm llm-council của Andrej Karpathy, cho thấy rằng khi các mô hình xếp hạng câu trả lời ẩn danh của nhau, chúng thường tạo ra một phán quyết tập thể tốt hơn bất kỳ mô hình đơn lẻ nào — và đôi khi xếp câu trả lời của đối thủ cao hơn câu trả lời của chính mình.

Tranh biện mang tính đối kháng và tương tác — phù hợp nhất khi câu hỏi có những đánh đổi thực sự cần bàn luận (định giá, kiến trúc, chiến lược) và bạn muốn chứng kiến các lập trường va chạm nhau.

Hội đồng mang tính độc lập và được đánh giá — phù hợp nhất khi bạn muốn một câu trả lời đáng tin cậy duy nhất cho một câu hỏi khó mà không có sự ồn ào của tranh luận trực tiếp: một câu hỏi kỹ thuật phức tạp, một lời giải thích y tế hoặc pháp lý cần kiểm tra tính hợp lý, một câu hỏi kiểu 'điều gì thực sự đúng ở đây'.

Sử dụng 3–5 tác nhân từ các nhà cung cấp thực sự khác nhau — tính ẩn danh chỉ mang lại lợi ích khi các câu trả lời đến từ những 'bộ óc' khác nhau. Đặt một mô hình mạnh vào vị trí đầu tiên: nó cũng đóng vai trò chủ tọa viết bản tổng hợp cuối cùng. Chế độ Hội đồng là tính năng Pro (Pro có giá 20 đô la/tháng). Mọi gói đều bao gồm các mô hình tích hợp sẵn và tín dụng hằng tháng, nên bạn có thể sử dụng mà không cần bất kỳ khóa nào; tùy chọn, hãy kết nối khóa API của riêng bạn thì bạn thanh toán trực tiếp cho nhà cung cấp, tiêu tốn 0 tín dụng.