Датасет · aoiandroid
Мультиязычный архив статей и транскриптов Android Times
aoiandroid/android-times-articles
Синтезированные и обработанные статьи с метаданными на 5 языках для задач генерации, перевода и саммаризации текста.
Что внутри
В репозитории собрано от 1000 до 10 000 записей, представляющих собой архив статей, скриптов, метаданных и редакционных материалов издания Android Times. Материалы сгенерированы и обработаны, а затем структурированы по языковым локалям, включая английский (США, Австралия, Китай), японский, китайский, хинди и испанский. Поддерживаются текстовая и визуальная модальности.
Что можно сделать
- Обучение и проверка моделей машинного перевода и локализации текстов на 5 языков
- Файнтюнинг LLM (SFT) для генерации и краткого пересказа (summarization) новостных статей
- Задачи
- Генерация текста, Суммаризация, Перевод
- Языки
- Английский, Японский, Китайский, Хинди, Испанский
- Размер
- 1K–10K записей
- Скачиваний за месяц
- 213,9 тыс.
- Лайков
- 1
Как загрузить
from datasets import load_dataset
ds = load_dataset("aoiandroid/android-times-articles")