Question 1

¿De qué trata "LLM-as-a-judge"?

Accepted Answer

Un modelo potente califica las respuestas con una lista de criterios clara: rápido y escalable, pero ojo con sus sesgos.

Question 2

¿Qué problema resuelve?

Accepted Answer

Tienes 10,000 respuestas abiertas que calificar. Los humanos no pueden con todas.

Question 3

¿Qué sabré hacer después de esta lección?

Accepted Answer

Puedes explicar LLM-as-a-judge, sus sesgos y cómo hacerlo confiable.

Question 4

¿Qué viene después?

Accepted Answer

Tanto las evals como los jueces necesitan una fuente de verdad: datos etiquetados.