К содержимому

Датасет · sentence-transformers

Пары вопросов и ответов Natural Questions для эмбеддингов

sentence-transformers/natural-questions

Англоязычные пары вопрос-ответ в формате Sentence Transformers для обучения моделей поиска и семантической близости.

Что внутри

Адаптированная версия датасета Natural Questions, состоящая из строковых пар в колонках question и answer. Содержит от 100 000 до 1 000 000 примеров на английском языке. Данные подготовлены для прямого использования с библиотекой Sentence Transformers.

Что можно сделать

  • Обучение моделей эмбеддингов (bi-encoders) для семантического поиска
  • Создание и тестирование поисковых компонентов в RAG-системах
Задачи
Эмбеддинги, Похожесть текстов
Языки
Английский
Размер
100K–1M записей
Скачиваний за месяц
3,6 тыс.
Лайков
52

Модели, обученные на нём

Как загрузить

from datasets import load_dataset

ds = load_dataset("sentence-transformers/natural-questions")