Описание урока

Рубрики и пределы модельного судьи

Рубрики и пределы модельного судьи — Оценка AI-агентов на практике. Критерий с видимой опорой; Калибровка судьи; Инъекция в оцениваемом ответе. Практическое задание: Рубрики и пределы модельного судьи.

Демо-версия. Материалы проходят редакторскую проверку.

Что рассмотрим

  • Критерий с видимой опорой
  • Калибровка судьи
  • Инъекция в оцениваемом ответе

Практическое задание

Рубрики и пределы модельного судьи

Полный урок доступен в составе курса.

Перейти к обучению

Программа курса

  1. Превратить задачу в тестовый случай
  2. Детерминированные проверки результата
  3. Траектория инструментов и побочные действия
  4. Рубрики и пределы модельного судьи
  5. Регрессии и честное сравнение версий
  6. Стоимость, задержка и отчёт о приёмке