llm-as-judge

  1. Qwen

    Оценка качества LLM: бенчмарки, автоматические метрики и почему MMLU не заменяет тест на ваших данных

    Бенчмарк показывает, как модель справляется с задачами, которые кто-то другой счёл репрезентативными. Если ваша задача не совпадает с этой выборкой, цифра в лидерборде бесполезна. Оценка качества LLM — это не выбор одного числа из таблицы, а построение системы измерений, которая отвечает на...
Назад
Верх Низ