ベンチマーク / FrontierCode 1.1(Main)
FrontierCode 1.1(Main)
コーディング・高いほど良い
このベンチマークとは
エージェントのコード変更が「マージされるか」を測るコーディング評価(Mainセット)。
単に動くかではなく、レビューを通る品質かを見る。プロンプトやハーネスの違いで数ptずれる。
*=開発元の自社発表。 出典(表)ごとに分けています。同じ表の値どうしは同じ条件で比べられます。
Anthropic の表
Anthropic: Introducing Claude Opus 5.5 ↗Opus 5.5 は max effort(Terminal-Bench は xhigh)。本番セーフガード有効のため一部で不利。
- 1
Claude Opus 5.554.4%*Anthropic・max
- 2
Claude Fable 5.150.3%*Anthropic・max
- 3
Claude Opus 5 過去の版48%*Anthropic・max
OpenAI の表
OpenAI: GPT-6 Astra 発表(比較表・脚注) ↗比較表の他社モデル数値は OpenAI が掲載したもの。各社最大 effort の値。
- 1
Claude Fable 5 過去の版53.5%OpenAI(比較表に掲載)・最大effort
- 2
Claude Opus 5 過去の版53.4%OpenAI(比較表に掲載)・最大effort
- 3
GPT-6 Astra53.3%*OpenAI・最大effort
- 4
Claude Fable 5.150.9%OpenAI(比較表に掲載)・最大effort
- 5
GPT-5.6 Sol 過去の版47.5%*OpenAI・最大effort
- 6
Gemini 3.8 Flash43.6%OpenAI(比較表に掲載)・最大effort