cl-nagoya/auto-wiki-qa
AutoWikiQA 東工大が公開しているSwallow-MXを用いて、Wikipedia中のテキストを入力として「質問(query)」と「回答(answer)」を生成し、生成された質問と回答についてフィルタリングを行ったデータセットです。日本語のフリーなQAデータセットとしては2024年4月現在で最大規模となっています。 また、データの生成にはテンプレートなどのルールベース処理を入れていないため、既存データセットと比較して質問・回答の出力・形式が多様であることが特徴です。モデルに知識を教えるためのQAデータセットとしての利用や、検索拡張生成(Retrieval Augmented Generation: RAG)のための検索・埋め込みモデル開発への利用を想定しています。 Usage import datasets as ds dataset: ds.Dataset = ds.load_dataset("cl-nagoya/auto-wiki-qa", split="train") print(dataset) #… See the full description on the dataset page: https://huggingface.co/datasets/cl-nagoya/auto-wiki-qa.
| Author / organization | cl-nagoya |
|---|---|
| License (as declared) | cc-by-sa-4.0 |
| Downloads | 187 (as reported by Hugging Face) |
| Likes | 24 |
| Created | 28 March 2024 |
| Last updated at source | 13 September 2024 |
Popularity, last 3 days
187 now (-2 since 2026-10-16). Counts as reported by the source, snapshotted daily by Silytics.
Connected in the knowledge graph
- sbintuitions/sarashina-embedding-v1-1bModel · used to train
More from cl-nagoya
Silytics shows public metadata from Hugging Face and links to the original. Information may be incomplete or out of date. Last refreshed 18 October 2026. Licenses and terms of the original apply to the work itself. Not financial, legal or professional advice.