Отчёт об оценке LLM-функции

Оцени ИИ-функцию системно: набор данных и метрики, сравнение моделей или версий по качеству и стоимости, разбор ошибок и вывод, можно ли выпускать.

Промпт

Подготовь отчёт об оценке ИИ-ассистента для ответов службы поддержки со сравнением трёх моделей-кандидатов. Цель: решить, какую модель использовать и готова ли функция к запуску. Требования: начни с рекомендации, опиши источники, объём и состав оценочного набора по сценариям, определи метрики — точность, фактологичность, соблюдение формата — и способ оценки, сравни в таблице качество, задержку и стоимость одного запроса, в том числе по сценариям, классифицируй ошибки с типичными примерами, приведи результаты проверок безопасности и заверши условиями запуска, планом поэтапного раскатывания и метриками мониторинга. Опирайся на данные оценки, не выдумывай баллы.

Источник
Ofox

Как пользоваться

  1. 1

    Нажмите «Сделать такое же»

    Откроется Ofox Chat, структура документа уже подготовлена. Если вы не вошли, сначала войдите.

  2. 2

    Сделайте своё

    Измените выделенные части промпта, подставив свои детали.

  3. 3

    Отправьте и создайте

    Отправьте — Ofox Chat напишет документ целиком, его можно сразу скачать. Продолжайте диалог, чтобы доработать.

Частые вопросы

Какой файл я получу?

Готовый структурированный документ для скачивания (Word или PDF), а не просто текст в чате.

Нужно ли что-то подготовить?

Нет — можно отправить сразу, и Ofox Chat напишет первую версию по шаблону. Если приложить вводные, данные или готовые документы (вставить текстом или загрузить PDF, Word и другие файлы), результат будет точнее соответствовать вашей ситуации.

Можно ли изменить промпт?

Да. Промпт подставляется в поле ввода Ofox Chat — перед отправкой можно заменить тему на свою, добавить требования или убрать лишнее.

Можно ли просто скопировать промпт?

Да. Нажмите «Копировать» на карточке промпта, чтобы получить чистый текст, — он подойдёт и для других AI-инструментов для текстов.

Есть своя идея? Начните создавать

Опишите нужное изображение одной фразой — Ofox Chat создаст его с нуля.

Начать