Термин
LLM-как-судья
Англ.: оценка моделью
Короткое определение
Использование сильной языковой или мультимодальной модели для автоматической оценки вывода другой модели, масштабируя проверку за пределы ручного ревью.
LLM-as-judge просит способную модель оценить или сравнить выводы по критериям, давая быструю, дешёвую и воспроизводимую оценку транскриптов, резюме или ответов по видео. Требует аккуратных промптов и сверки с людьми, ведь судья может быть смещён или ошибаться.
Считаете параметры для своего продукта?
Поможем собрать энкодер-леддер и посчитать стоимость доставки – до старта разработки.