Датасет · CShorten
Статьи ArXiv по машинному обучению
CShorten/ML-ArXiv-Papers
Около 100 тыс. статей cs.LG с ArXiv: тексты и метаданные для обучения и анализа ML-публикаций.
Что внутри
Датасет содержит подмножество статей ArXiv с тегом cs.LG о машинном обучении. Он отфильтрован из полного набора ArXiv на Kaggle примерно из 2 млн статей; в текущей версии около 100 тыс. статей. Данные поддерживаются через запросы к ArXiv API и представлены в табличном и текстовом виде.
Что можно сделать
- Дообучение языковой модели на научных текстах
- Классификация и тематический анализ ML-статей
- Поиск по научным публикациям
- Размер
- 100K–1M записей
- Скачиваний за месяц
- 2,4 тыс.
- Лайков
- 74
Модели, обученные на нём
- makltd1/continual-lmГенерация текста 750
- or4cl3ai/Aiden_t5Генерация текста 195
- ZMC2019/Llama-3-330MГенерация текста 119
- AlexWortega/taskGPT2-xl-v0.2aГенерация текста 24
- suarkadipa/GPT-2-finetuned-papersГенерация текста 17
- acecalisto3/PhiCo-D-InstruckГенерация текста 13
- aalksii/albert-base-v2-ml-arxiv-papersЗаполнение пропусков 11
- alplusplus/vibecheck-v2-138MКлассификация текста 9
Как загрузить
from datasets import load_dataset
ds = load_dataset("CShorten/ML-ArXiv-Papers")