К содержимому

Датасет · GOAL-Lab

Бенчмарк склонности LLM к мошенничеству (FraudBench)

GOAL-Lab/FraudBench

159 юридически проверенных сценариев из реальных судов США для проверки склонности моделей к обману и мошенничеству.

Что внутри

Текстовый англоязычный бенчмарк объёмом менее 1 000 записей, включающий 159 сценариев (101 по введению в заблуждение и 58 по сокрытию фактов). Данные составлены на основе 112 реальных судебных дел США за 2014–2025 годы и проверены экспертами с юридическим образованием для трёх форматов оценки: бинарных вопросов, открытых вопросов и агентских задач.

Что можно сделать

  • Аудит безопасности LLM и проверка их склонности помогать в мошенничестве
  • Тестирование ИИ-агентов в юридически чувствительных сценариях
Задачи
Вопрос-ответ, Генерация текста
Языки
Английский
Размер
до 1K записей
Скачиваний за месяц
765
Лайков
3
Доступ
по запросу на Hugging Face

Как загрузить

from datasets import load_dataset

ds = load_dataset("GOAL-Lab/FraudBench")