К содержимому

Датасет · open-index

Полный архив метаданных пакетов реестра npm

open-index/open-npm

Масштабный снимок всех пакетов Node.js из реестра npm с версиями, зависимостями и статистикой скачиваний.

Что внутри

Это таблично-текстовый корпус размером от 10 до 100 миллионов записей на английском языке, представляющий собой полный срез реестра пакетов npm. Внутри хранятся подробные метаданные каждого пакета, история версий, графы зависимостей и статистика загрузок.

Что можно сделать

  • Обучение моделей классификации репозиториев и поиска по программным пакетам
  • Анализ графов зависимостей и поиск уязвимостей или аномалий в экосистеме Node.js
  • Извлечение признаков (feature extraction) для рекомендательных систем разработчика
Задачи
Классификация текста, Эмбеддинги
Языки
Английский
Размер
10M–100M записей
Скачиваний за месяц
560
Лайков
4

Как загрузить

from datasets import load_dataset

ds = load_dataset("open-index/open-npm")