К содержимому

Датасет · shachardon

Открытые диалоги людей с языковыми моделями

shachardon/ShareLM

Объединенный корпус переписок пользователей с ИИ-ассистентами для обучения чат-моделей.

Что внутри

В репозитории собраны диалоги людей с языковыми моделями на английском языке, общий размер превышает миллион записей. Часть данных (около 3 500 бесед и 40 000 ответов) собрана напрямую через плагин ShareLM, а остальное объединено из других открытых источников.

Что можно сделать

  • SFT-дообучение разговорных языковых моделей и чат-ботов
  • Анализ реальных пользовательских сценариев общения с нейросетью
Задачи
Генерация текста
Языки
Английский
Размер
1M–10M записей
Скачиваний за месяц
2,3 тыс.
Лайков
37

Как загрузить

from datasets import load_dataset

ds = load_dataset("shachardon/ShareLM")