وضع المجلس: إجابات ذكاء اصطناعي غير متحيزة عبر تصنيف الأقران المجهول
كل طريقة لدمج إجابات الذكاء الاصطناعي تعاني من مشكلة التحيز. اطلب من النماذج أن تتناقش، وستنجرف نحو الاتفاق. اطلب من نموذج واحد أن يحكم على الآخرين، وسيفضّل الإجابات التي تشبه أسلوبه. اسأل إنسانًا، وسنختار العلامة التجارية التي نثق بها بالفعل.
وضع المجلس يزيل الأسماء. يجيب كل نموذج على سؤالك بشكل مستقل، ثم يتلقى إجابات الآخرين مجهولة الهوية — الإجابة A، B، C — ويصنّفها بناءً على الجودة فقط. يقوم نموذج رئيس بتوليف الإجابة النهائية من المادة الأعلى تصنيفًا. لا يعرف أي نموذج أي إجابة تخص من، بما في ذلك إجابته هو.
كيف تسير جلسة المجلس
- الجولة 1 — إجابات مستقلة: يجيب كل وكيل على سؤالك بمفرده، دون رؤية الآخرين. لا ترسيخ، لا تفكير جماعي.
- الجولة 2 — التصنيف الأعمى: يحصل كل وكيل على المجموعة الكاملة من الإجابات بعد إزالة الأسماء، وعليه تصنيفها من الأفضل إلى الأسوأ حسب الدقة والفائدة، مع تبرير كل ترتيب — بصدق، بما في ذلك الإجابة التي قد تكون إجابته هو.
- التوليف — الرئيس: تمرّ جولة أخيرة تجمع التصنيفات، وتأخذ أقوى الحجج تصنيفًا، وتستبعد النقاط الضعيفة، وتقدّم إجابة واحدة يمكن الدفاع عنها، مع الإشارة إلى الإجابة التي صنّفها المجلس في المرتبة الأعلى.
لماذا تغيّر عدم الكشف عن الهوية النتيجة
النماذج، مثل البشر، أكثر تساهلاً بشكل قابل للقياس تجاه أسلوبها الخاص: عند رؤية إجابات موسومة بأسماء، يميل النموذج إلى المبالغة في تقييم المخرجات التي تشبه صياغته الخاصة، وتحصل العلامات التجارية الشائعة على تأثير الهالة. إزالة الهوية تجبر التصنيف على الاعتماد على الشيء الوحيد المتبقي — المحتوى.
تعود الفكرة إلى تجربة llm-council التي أجراها أندريه كارباثي، والتي وجدت أن النماذج التي تصنّف إجابات بعضها البعض المجهولة غالبًا ما تنتج حكمًا جماعيًا أفضل من أي نموذج منفرد — وأحيانًا تصنّف إجابة منافس فوق إجابتها الخاصة.
المجلس مقابل المناظرة: متى تستخدم أيهما
المناظرة تنافسية وتفاعلية — الأفضل عندما يحتوي السؤال على مفاضلات حقيقية للنقاش (التسعير، البنية، الاستراتيجية) وتريد مشاهدة تصادم المواقف.
المجلس مستقل ويُحكم عليه — الأفضل عندما تريد الإجابة الأكثر موثوقية على سؤال صعب دون ضجيج النقاش المباشر: سؤال تقني معقد، أو شرح طبي أو قانوني للتحقق من منطقيته، أو سؤال 'ما هو الصحيح فعلاً هنا'.
- المناظرة: تتطور المواقف عبر مهاجمة بعضها البعض، ويُتابع الاتفاق في كل جولة
- المجلس: تتشكل المواقف بشكل مستقل، ويُحكم على الجودة بشكل أعمى
- المناظرة: رائعة للمفاضلات والقرارات
- المجلس: رائع للدقة في الأسئلة الصعبة
- كلاهما: ينتهيان بحكم موحّد يمكنك تصديره
كيفية إعداد مجلس جيد
استخدم 3–5 وكلاء من مزوّدين مختلفين حقًا — عدم الكشف عن الهوية لا يحقق فائدة إلا عندما تأتي الإجابات من عقول مختلفة. ضع نموذجًا قويًا في الموضع الأول: فهو يعمل أيضًا كرئيس يكتب التوليف النهائي. وضع المجلس ميزة Pro (اشتراك Pro بـ 20 دولارًا/شهريًا). تتضمن كل خطة نماذج مدمجة ورصيدًا شهريًا، لذا يمكنك تشغيله دون أي مفاتيح؛ واختياريًا، أدخل مفاتيح API الخاصة بك فتدفع للمزوّد مباشرة، مستهلكًا 0 رصيد.
الأسئلة الشائعة
هل يمكن لنموذج أن يتعرف على إجابته الخاصة رغم إخفاء الهوية؟
أحيانًا، من خلال الأسلوب — لكنه لا يعرف مؤلفي الإجابات الأخرى، وتعليمات التصنيف تتطلب الصدق حتى تجاه إجابته الخاصة. عمليًا، تصنّف النماذج غالبًا إجابات المنافسين فوق إجاباتها الخاصة.
لماذا المجلس متاح فقط في Pro؟
يشغّل كل وكيل مرتين (الإجابة + جولة تصنيف كاملة) بالإضافة إلى توليف الرئيس، مما يجعله الوضع الأكثر استهلاكًا للرموز والتنسيق. كما يفتح Pro إمكانية استخدام حتى 10 وكلاء لمجالس أكبر.
من أين جاءت الفكرة؟
من تجربة llm-council مفتوحة المصدر لأندريه كارباثي (2024)، التي أظهرت التصنيف الأعمى بين الأقران عبر مزوّدين مختلفين. وضع المجلس هو تطبيقنا الإنتاجي لهذه الآلية، مع توليف من الرئيس وأحكام قابلة للتصدير.
خطة مجانية · استخدم مفاتيح API الخاصة بك · 15 لغة