Датасет · llm-jp
Безопасные ответы для японских LLM
llm-jp/AnswerCarefully
Японские пары вопрос—безопасный ответ для проверки и обучения безопасности LLM.
Что внутри
Инструкционный датасет для безопасности и уместности ответов японских LLM. Внутри оригинальные пары вопросов и эталонных безопасных ответов на японском; они собраны вручную по таксономии безопасности из английского Do-Not-Answer. Метаданные также указывают английский язык, размер — от 1 тыс. до 10 тыс. примеров.
Что можно сделать
- SFT/RLHF для безопасности японской LLM
- Оценка отказов и безопасных ответов
- Дообучение инструкционной модели на японском
- Языки
- Японский, Английский
- Размер
- 1K–10K записей
- Скачиваний за месяц
- 726
- Лайков
- 193
- Доступ
- по запросу на Hugging Face
Модели, обученные на нём
- ikedachin/llm-jp-4-8b-thinking-imabari-chikamiyama-v14Генерация текста 454
- ikedachin/llm-jp-4-8b-thinking-imabari-tragahana-v21Генерация текста 335
- ikedachin/llm-jp-4-8b-thinking_imabari_qa_v4_reasoning_effort_v9_difficultГенерация текста 50
- shibu-phys/arise-japanese-guardrail-gemma2b-loraКлассификация текста 49
- ikedachin/llm-jp-4-8b-thinking_imabari_qa_v4_reasoning_effort_v8Генерация текста 27
- ikedachin/llm-jp-4-8b-thinking-imabari-karakoyama-v20Генерация текста 25
- j-llm/toxic_v3Классификация текста 24
- shibu-phys/arise-japanese-guardrail-gemma2b-lora-adapterКлассификация текста 18
Как загрузить
from datasets import load_dataset
ds = load_dataset("llm-jp/AnswerCarefully")