ベンチマーク

TriviaQA

原文:TriviaQA

難しい雑学問題と、根拠となる文書を組にした、オープンドメインの質問応答ベンチマーク。

TriviaQAの得点の推移点は各モデルの得点(113件)。破線はその時点までの最高得点。点にマウスを乗せるとモデル名と得点を表示その時点の最高得点Meta AIOpenAIDeepMindMosaicMLTechnology Innovation InstituteMicrosoftAnthropicその他0%20%40%60%80%2022202320242025得点モデルの公開日出典:Epoch AI(CC BY 4.0)・作図:AGI Hub

2026年10月1日時点のデータ。最新の得点は原文へ。

概要

TriviaQAは、問題とその裏づけとなるウェブやWikipediaの文書を組み合わせたもので、正確な答えを抜き出したり生成したりするには、検索と読解が必要になる。扱う範囲が広く、問いの言い回しも多様なので、知識がどこまで及んでいるか、言い換えに強いかを調べるのに適している。

性能は通常、完全一致(exact match)とF1スコアで報告される。そのため、TriviaQAはモデルの報告書で、オープンドメインの質問応答システムや検索拡張生成(RAG)を評価するのに広く使われている。

← ベンチマーク一覧へ

非公式の日本語訳公式ページ(英語):epoch.ai/benchmarks/trivia-qa