Датасет · allenai
Научные утверждения с доказательствами из статей
allenai/scifact
Бенчмарк на 1,4 тысячи научных тезисов и аннотаций для проверки фактчекинга и поиска обоснований.
Что внутри
Набор данных от AllenAI содержит 1 400 научных утверждений на английском языке, составленных экспертами. Каждое утверждение связано с аннотациями научных статей, содержащими доказательства, а также снабжено метками истинности и текстовыми обоснованиями.
Что можно сделать
- Оценка точности RAG-систем и моделей фактчекинга в научной сфере
- Обучение классификаторов для проверки гипотез по научным текстам
- Задачи
- Классификация текста
- Языки
- Английский
- Размер
- 1K–10K записей
- Скачиваний за месяц
- 3,4 тыс.
- Лайков
- 34
Модели, обученные на нём
- nikolamilosevic/SCIFACT_xlm_roberta_largeКлассификация текста 38,9 тыс.
- mradermacher/Aitana-7B-S-Instruct-i1-GGUFГенерация текста 2,8 тыс.
- gplsi/Aitana-7B-S-InstructГенерация текста 1,2 тыс.
- gplsi/Aitana-2B-S-InstructГенерация текста 976
- mradermacher/Aitana-7B-S-Instruct-v0.1-i1-GGUFГенерация текста 770
- mradermacher/Aitana-7B-S-Instruct-GGUFГенерация текста 523
- mradermacher/Aitana-2B-S-Instruct-IP-1.0-GGUFГенерация текста 340
- mradermacher/Aitana-2B-S-tourism-Instruct-1.0-GGUFГенерация текста 293
Как загрузить
from datasets import load_dataset
ds = load_dataset("allenai/scifact")