Датасет · GOAL-Lab
Бенчмарк склонности LLM к мошенничеству (FraudBench)
GOAL-Lab/FraudBench
159 юридически проверенных сценариев из реальных судов США для проверки склонности моделей к обману и мошенничеству.
Что внутри
Текстовый англоязычный бенчмарк объёмом менее 1 000 записей, включающий 159 сценариев (101 по введению в заблуждение и 58 по сокрытию фактов). Данные составлены на основе 112 реальных судебных дел США за 2014–2025 годы и проверены экспертами с юридическим образованием для трёх форматов оценки: бинарных вопросов, открытых вопросов и агентских задач.
Что можно сделать
- Аудит безопасности LLM и проверка их склонности помогать в мошенничестве
- Тестирование ИИ-агентов в юридически чувствительных сценариях
- Задачи
- Вопрос-ответ, Генерация текста
- Языки
- Английский
- Размер
- до 1K записей
- Скачиваний за месяц
- 765
- Лайков
- 3
- Доступ
- по запросу на Hugging Face
Как загрузить
from datasets import load_dataset
ds = load_dataset("GOAL-Lab/FraudBench")