ベンチマーク
OpenBookQA
原文：OpenBookQA
小規模な「教科書持ち込み可」の科学QAベンチマーク。中核となる事実に常識を組み合わせて4択問題に答える必要がある。
2026年10月1日時点のデータ。最新の得点は原文へ。
概要
OpenBookQAは、初等科学の文の集まり（「持ち込みの教科書」）と、その中核となる事実だけでは答えられない問題を中心に作られている。正解するには、与えられた事実を日常の知識や補助的な情報と組み合わせて、紛らわしい選択肢を除外する必要があることが多い。
規模は大きくないが、OpenBookQAは明示的な知識と暗黙の知識を橋渡しできるモデルを高く評価する。これは、科学QAで安定した性能を出すうえで中心となる能力である。