Датасет · open-index
Полный архив Hacker News с 2006 года
open-index/hacker-news
Все истории, комментарии, Ask HN, Show HN, вакансии и опросы Hacker News на английском.
Что внутри
Датасет содержит полный архив Hacker News: каждую историю, комментарий, Ask HN, Show HN, вакансию и опрос, когда-либо отправленные на сайт. Материалы на английском, архив обновляется каждые 5 минут. В метаданных указаны задачи text-generation, feature-extraction, text-classification и question-answering.
Что можно сделать
- Дообучение языковой модели на технических дискуссиях
- Классификация тем и типов постов Hacker News
- Поиск ответов по архиву обсуждений
- Задачи
- Генерация текста, Эмбеддинги, Классификация текста, Вопрос-ответ
- Языки
- Английский
- Размер
- 10M–100M записей
- Скачиваний за месяц
- 468 тыс.
- Лайков
- 575
Модели, обученные на нём
- Therealsickonechase-bit/rabbit-2.2.8-ML-AUTO-ADAPT-OS-VIRTUAL-AI-COMMUNITY-DISCORD-LLM-ENHANCED-CLI 0
- ENDCOSMOSDEV/ENDCOSMOS 0
- ArielCezarManansala/CMD14 0
- commanderrobot14/Afroman197 0
- pragatiparijat/pragatingpimage text to video 0
- IFthisisrealitynbds/MODEL1Генерация текста 0
- tekwhisperer/Hemppimp 0
- bloggy/checkitpro 0
Как загрузить
from datasets import load_dataset
ds = load_dataset("open-index/hacker-news")