ベンチマーク / Terminal-Bench Science 0.1
Terminal-Bench Science 0.1
科学・数学・高いほど良い
このベンチマークとは
データ解析・シミュレーション・モデルのフィッティングなど、科学研究のワークフローをコードとターミナルで遂行できるかを測る。
研究実務に近いエージェント評価。標準誤差が±3.5〜5ptと大きいため、近い値の優劣は断定できない。
*=開発元の自社発表。 出典(表)ごとに分けています。同じ表の値どうしは同じ条件で比べられます。
Anthropic の表
Anthropic: Introducing Claude Opus 5.5 ↗Opus 5.5 は max effort(Terminal-Bench は xhigh)。本番セーフガード有効のため一部で不利。
- 1
Claude Opus 5.558.7%*Anthropic・max
- 2
Claude Fable 5.152.6%*Anthropic・max
- 3
Claude Opus 5 過去の版29%*Anthropic・max
OpenAI の表
OpenAI: GPT-6 Astra 発表(比較表・脚注) ↗比較表の他社モデル数値は OpenAI が掲載したもの。各社最大 effort の値。
- 1
GPT-6 Astra64.6%*OpenAI・最大effort
- 2
Claude Fable 5.152.6%OpenAI(比較表に掲載)・最大effort
- 3
Claude Opus 5 過去の版30%OpenAI(比較表に掲載)・最大effort
- 4
GPT-5.6 Sol 過去の版22.4%*OpenAI・最大effort
- 5
Claude Fable 5 過去の版21.4%OpenAI(比較表に掲載)・最大effort
Google DeepMind の表
Google DeepMind: Gemini 4 Argon モデルカード ↗2026年10月時点。比較表の他社数値は Google が掲載したもの。
- 1
GPT-6 Astra68.1%Google(比較表に掲載)・Google の測定
- 2
Claude Opus 5.563.3%Google(比較表に掲載)・Google の掲載値
- 3
Gemini 4 Argon57.6%*Google