Словарь
Модель-судья
Языковая модель, которая оценивает ответы или работу других моделей вместо людей (LLM-as-a-judge). Этот способ дешевле и лучше масштабируется, чем оценка людьми, но у судьи бывают систематические перекосы: например, он может предпочитать более длинные ответы или ответы моделей своего семейства. Поэтому его оценки выборочно сверяют с оценками людей.