ベンチマーク
GPQAとは？
別名: Graduate-Level Google-Proof QA
ググっても答えが出ない博士課程レベルの理系難問集。推論モデルの真価が問われる難所。
⚡ 30秒でわかる
GPQA の主なポイント
- 1 物理・化学・生物の博士課程レベルの問題で、ネット検索しても答えが出ないように設計されたベンチマークです。
- 2 推論モデルの真価が問われる難所として、各社が点数を競っています。
📖 詳しく
GPQA とは
物理・化学・生物の博士課程レベルの問題で、ネット検索しても答えが出ないように設計されたベンチマークです。
推論モデルの真価が問われる難所として、各社が点数を競っています。
❓ FAQ
よくある質問
- Q. GPQA とは何ですか？
- A. ググっても答えが出ない博士課程レベルの理系難問集。推論モデルの真価が問われる難所。 物理・化学・生物の博士課程レベルの問題で、ネット検索しても答えが出ないように設計されたベンチマークです。
- Q. GPQA の主な特徴は？
- A. 物理・化学・生物の博士課程レベルの問題で、ネット検索しても答えが出ないように設計されたベンチマークです。 推論モデルの真価が問われる難所として、各社が点数を競っています。
- Q. GPQA に関連する用語は？
- A. 「MMLU」、「推論モデル」などが関連しています。
- Q. GPQA の別名は？
- A. Graduate-Level Google-Proof QA とも呼ばれます。