Modo Consejo: respuestas de IA sin sesgo mediante ranking anónimo entre pares

Toda forma de combinar respuestas de IA tiene un problema de sesgo. Pide a los modelos que debatan y derivarán hacia el consenso. Pide a un modelo que juzgue a los demás y favorecerá las respuestas que suenen como él mismo. Pregunta a un humano y elegiremos la marca en la que ya confiamos.

El modo Consejo elimina los nombres. Cada modelo responde tu pregunta de forma independiente, luego recibe las demás respuestas anonimizadas — Respuesta A, B, C — y las clasifica basándose únicamente en la calidad. Un modelo presidente sintetiza la respuesta final a partir del material mejor clasificado. Ningún modelo sabe de quién es cada respuesta, incluida la suya propia.

Cómo se desarrolla una sesión de Consejo

  • Ronda 1 — Respuestas independientes: cada agente responde tu pregunta por su cuenta, sin visibilidad de los demás. Sin anclaje, sin pensamiento de grupo.
  • Ronda 2 — Clasificación a ciegas: cada agente recibe el conjunto completo de respuestas sin nombres y debe clasificarlas de mejor a peor según su corrección y utilidad, justificando cada posición — con honestidad, incluyendo la que podría ser la suya propia.
  • Síntesis — El presidente: una pasada final agrega las clasificaciones, toma el razonamiento mejor valorado, descarta los puntos débiles y entrega una respuesta defendible, señalando cuál respuesta clasificó el consejo como la mejor.

Por qué el anonimato cambia el resultado

Los modelos, como las personas, son mensurablemente más indulgentes con su propio estilo: al ver respuestas etiquetadas, un modelo tiende a sobrevalorar el resultado que se asemeja a su propia forma de expresarse, y las marcas populares reciben un efecto halo. Eliminar la identidad obliga a que la clasificación se base en lo único que queda: el contenido.

La idea proviene del experimento llm-council de Andrej Karpathy, que descubrió que los modelos que clasifican las respuestas anónimas de los demás a menudo producen un veredicto colectivo mejor que cualquier modelo individual — y a veces clasifican la respuesta de un rival por encima de la propia.

Consejo vs Debate: cuándo usar cada uno

El Debate es adversarial e interactivo — ideal cuando la pregunta tiene compromisos reales que discutir (precios, arquitectura, estrategia) y quieres ver cómo chocan las posturas.

El Consejo es independiente y evaluado — ideal cuando quieres la respuesta única más fiable a una pregunta difícil sin el ruido de una discusión en vivo: una pregunta técnica compleja, una explicación médica o legal para verificar su sensatez, una pregunta de 'qué es realmente verdad aquí'.

  • Debate: las posturas evolucionan atacándose entre sí, el acuerdo se registra ronda a ronda
  • Consejo: las posturas se forman de manera independiente, la calidad se juzga a ciegas
  • Debate: excelente para compromisos y decisiones
  • Consejo: excelente para la corrección en preguntas difíciles
  • Ambos: terminan con un veredicto sintetizado que puedes exportar

Cómo configurar un buen consejo

Usa entre 3 y 5 agentes de proveedores genuinamente distintos — el anonimato solo aporta valor cuando las respuestas provienen de mentes diferentes. Coloca un modelo potente en la primera posición: también actuará como presidente, redactando la síntesis final. El modo Consejo es una función Pro (Pro cuesta 20 $/mes). Cada plan incluye modelos integrados y créditos mensuales, así que puedes usarlo sin ninguna clave; opcionalmente, conecta tus propias claves de API y pagas directamente al proveedor, gastando 0 créditos.

Preguntas frecuentes

¿Puede un modelo reconocer su propia respuesta a pesar de la anonimización?

A veces, por el estilo — pero no conoce a los autores de las demás respuestas, y la instrucción de clasificación exige honestidad incluso respecto a la propia. En la práctica, los modelos suelen clasificar las respuestas rivales por encima de las suyas.

¿Por qué el Consejo es un modo exclusivo de Pro?

Ejecuta a cada agente dos veces (respuesta + pasada completa de clasificación) más una síntesis del presidente, lo que lo convierte en el modo más exigente en tokens y orquestación. Pro también desbloquea hasta 10 agentes para consejos más grandes.

¿De dónde viene la idea?

Del experimento de código abierto llm-council de Andrej Karpathy (2024), que demostró la clasificación ciega entre pares de distintos proveedores. El modo Consejo es nuestra implementación en producción de ese mecanismo, con síntesis del presidente y veredictos exportables.

Convocar el consejo (Pro)

Plan gratuito · usa tus propias claves API · 15 idiomas

Modo Consejo: respuestas de IA sin sesgo mediante ranking anónimo entre pares · LLM Debate Council