Для работыИсточник изучен
Сначала оцените упряжь
Создайте систему оценки, которая будет контролировать каждый этап тонкой настройки — «золотые наборы», оценщики для каждого режима отказа, оценочную калибровку и базовые показатели базовой модели.
Что передать AI
Описание задачи, исходные материалы, ограничения и желаемый результат.
Что получите
Готовый результат по задаче, пояснения к ключевым решениям и список следующих действий.
Кому пригодится
Специалистам и командам, которые решают эту задачу с помощью AI.
Требования и ограничения
Для запуска могут понадобиться доступ к проекту и инструменты, указанные в первоисточнике.
Автор и источник
Оригинальное название: eval-harness-first
Автор или репозиторий: wshobson/agents
Лицензия: MIT
Открыть первоисточник ↗