Датасет · lmsys
Парные предпочтения из Chatbot Arena
lmsys/chatbot_arena_conversations
33 тыс. очищенных диалогов с парными человеческими оценками моделей из Chatbot Arena.
Что внутри
Набор содержит 33K очищенных разговоров с попарными предпочтениями людей, собранных в Chatbot Arena с апреля по июнь 2023 года с 13K уникальных IP. В каждом примере есть ID вопроса, названия двух моделей, полный текст диалога в OpenAI API JSON, голос пользователя, анонимизированный ID, языковой тег, теги модерации и токсичности, метка времени. Данные в табличном и текстовом формате.
Что можно сделать
- Обучение reward-модели для RLHF
- Сравнение и оценка чат-моделей
- Исследование предпочтений пользователей
- Размер
- 10K–100K записей
- Скачиваний за месяц
- 2,4 тыс.
- Лайков
- 509
- Доступ
- по запросу на Hugging Face
Модели, обученные на нём
- llm-blender/PairRM-hfГенерация текста 2 тыс.
- llm-blender/PairRMГенерация текста 1,8 тыс.
- or4cl3ai/SoundSlayerAIСинтез речи 1,1 тыс.
- Cyronius/titlerСуммаризация 657
- mightbe/Better-PairRM 73
- InfiniAILab/Mistral-150M-InstructГенерация текста 31
- Ronny/Mistral-150M-Instruct-Q8_0-GGUFГенерация текста 22
- Himanshu167/AI-Response-Comparer-v1.6Классификация текста 14
Как загрузить
from datasets import load_dataset
ds = load_dataset("lmsys/chatbot_arena_conversations")