Датасет · MedRAG
Корпус PubMed для медицинского RAG
MedRAG/pubmed
Текстовые фрагменты PubMed на английском для медицинского Retrieval-Augmented Generation.
Что внутри
Содержит сниппеты из корпуса PubMed, использованные в MedRAG. Предназначен для медицинского RAG; язык — английский, модальность — текст. Размер по метаданным — 1M–10M записей. В карточке отмечены обновлённые колонки id и PMID.
Что можно сделать
- Построение и оценка медицинского RAG
- Обучение retriever/embedder для биомедицинских текстов
- Проверка QA-систем на PubMed
- Задачи
- Вопрос-ответ
- Языки
- Английский
- Размер
- 1M–10M записей
- Скачиваний за месяц
- 10,9 тыс.
- Лайков
- 116
Модели, обученные на нём
- BMRetriever/BMRetriever-410MЭмбеддинги 296
- BMRetriever/BMRetriever-7BЭмбеддинги 87
- Simonlee711/Clinical_UltraBERTПохожесть текстов 86
- BMRetriever/BMRetriever-2BЭмбеддинги 85
- BMRetriever/BMRetriever-1BЭмбеддинги 80
- brivangl/qwenar-0.6bЭмбеддинги 23
- alulakinfe27/OBGYNaiСуммаризация 0
- subhodeeppal/SUBHO-SATHI 0
Как загрузить
from datasets import load_dataset
ds = load_dataset("MedRAG/pubmed")