コンテンツにスキップ

セキュリティベンチマーク

Cybench

スナップショット 2026-07-16 · 40 タスク · 出典 · Please cite Cybench when republishing results (see cybench.github.io).

cybench.github.io の参考スナップショット(プロフェッショナル CTF タスクの unguided 解決率)。多くの行は system card の結果またはサブセットの結果であり、一つの統一フルスイート実行ではありません。コストはエージェント実行の相対推定です — Cybench は $/task を公開していません。OpenCodex のライブ計測ではありません。

このボードのコストは推定または API 価格の合成です — すべての行にソース実測のタスクあたりコストがない限り、スコア/$ ランキングと「最高コスパ」は無効になります。

モデル推論負荷スコアコスト / タスク用途
claude-mythos-preview100%$18フロンティア, プランナー
claude-opus-4.796%$14フロンティア, プランナー
claude-opus-4.693%$12フロンティア, プランナー
claude-opus-4.582%$11フロンティア
muse-spark65.4%$3.2主力, フロンティア
claude-sonnet-4.560%$5.5主力
grok-443%$2.8主力, 低価サブエージェント
claude-opus-4.142%$9主力
grok-4.1thinking39%$2.4主力, 低価サブエージェント
claude-opus-438%$8主力
claude-sonnet-435%$4.5主力
grok-4fast30%$1.2高速, 低価サブエージェント
o3-mini22.5%$1.5低価サブエージェント
claude-3.7-sonnet20%$3.5主力
gpt-4.5-preview17.5%$6フロンティア