ベンチマーク
PIQA
原文：PIQA
物理的な常識のベンチマーク。日常の問題に対して、より実現しやすい解決策をモデルに選ばせる。
2026年10月1日時点のデータ。最新の得点は原文へ。
概要
PIQAは短い場面設定と、実用性がわずかに異なる2つの解決策の候補を示す。正解できるかどうかは、直観的な物理の理解、物がどう使えるかの理解、手順の知識（家庭の道具の使い方や、簡単な作業を安全に行う方法など）にかかっている。
選択肢のもっともらしさが意図的に近づけてあるため、PIQAは表面的な手がかりでは解きにくく、現実に根ざした常識に焦点を絞って調べられる。