К содержимому

Датасет · HuggingFaceH4

Набор промптов MT-Bench для оценки чат-ботов

HuggingFaceH4/mt_bench_prompts

Эталонный набор англоязычных промптов от LMSYS для тестирования диалоговых моделей.

Что внутри

Внутри лежат текстовые промпты на английском языке, созданные организацией LMSYS для оценки качества чат-моделей в рамках бенчмарка MT-Bench. Размер набора небольшой — менее 1 тысячи записей. В этой версии поле turns переименовано в prompts и добавлены пустые референсы для внутренних инструментов.

Что можно сделать

  • Тестирование и сравнение инструктивных LLM в многошаговых диалогах
  • Автоматическая оценка ответов моделей с помощью LLM-as-a-Judge
Задачи
Вопрос-ответ
Языки
Английский
Размер
до 1K записей
Скачиваний за месяц
19,8 тыс.
Лайков
27

Модели, обученные на нём

Как загрузить

from datasets import load_dataset

ds = load_dataset("HuggingFaceH4/mt_bench_prompts")