Датасет · PatronusAI
FinanceBench для финансовых QA
PatronusAI/financebench
150 размеченных примеров open-book QA по финансовым документам публичных компаний с ответами и evidence.
Что внутри
FinanceBench — тестовый набор для оценки LLM на open book financial question answering. Открытая выборка включает 150 аннотированных примеров: вопросы о публичных компаниях, ответы и evidence. PDF-документы доступны отдельно в GitHub-репозитории PatronusAI; язык — английский, размер — менее 1K.
Что можно сделать
- Оценить LLM на финансовых open-book QA
- Проверить RAG-систему по PDF-отчётам
- Дообучить LoRA для ответов с evidence
- Размер
- до 1K записей
- Скачиваний за месяц
- 8 тыс.
- Лайков
- 143
Модели, обученные на нём
- PeterAM4/Qwen3-Embedding-0.6B-GGUFПохожесть текстов 3,5 тыс.
- mradermacher/SpydazWeb_AI_LCARS_Humanization_003-i1-GGUF 2,6 тыс.
- mradermacher/WORLD_ARCHIVES_II-GGUF 1,1 тыс.
- mradermacher/SpydazWeb_AI_LCARS_Humanization_003-GGUF 647
- trjxter/TraceAlchemy-Gemma-4-E4B-Finance-IT-ggufГенерация текста 583
- zhiqian99/Qwen3-Embedding-0.6B-GGUFПохожесть текстов 330
- mradermacher/_Spydaz_Web_LCARS_AdvancedHuman_Archive-GGUF 269
- mradermacher/LCARS_AI_001-GGUF 162
Как загрузить
from datasets import load_dataset
ds = load_dataset("PatronusAI/financebench")