ベンチマーク

より速く。より安く。検証済み。

同一チェックアウト上の 87 件の対応バグ修正ケース、Codna 対 Cursor。Codna は 87 件中 87 件を修正 1 件あたり約 $0.02 で検証し、トークンは 5 分の 1、速度は 1.7 倍でした。

指標CodnaCursor
検証済みの修正87 / 8787 / 87
対応ケース数8787
平均実行時間13.39s22.57s
修正あたり平均トークン数16,15980,971
修正あたり平均モデル費用$0.021該当なし
リポジトリ理解0 トークンモデルコンテキスト
5×修正あたりのトークンは Cursor の 5 分の 1:16,159 対 80,971。
1.7×修正あたりの速度は Cursor の 1.7 倍:13.39 秒 対 22.57 秒。
$0.02検証済み修正 1 件あたり平均:87 ケースで $0.021。

手法

本物のバグ。本物のリポジトリ。対応ケース。

各ケースは両エージェントとも同一のチェックアウトで実行しました。修正が検証された場合のみカウントします。表は 87 件の対応ケースの平均です。

87

対応ケース

同じ 87 件のバグ修正ケースを、同一チェックアウト上で両エージェントに対して実行しました。

16.2K

修正あたり平均トークン数

Codna は修正あたり平均 16,159 トークン。Cursor は平均 80,971。

13.4s

平均実行時間

Codna は修正あたり平均 13.39 秒。Cursor は平均 22.57 秒。

$0.02

検証済み修正 1 件あたり

Codna の検証済み修正 1 件あたりのモデル費用は平均 $0.021。

同一チェックアウト上の 87 件の対応バグ修正ケースの平均。修正が検証された場合のみカウント。 サマリーをダウンロード (JSON) →

よくある質問

Codna は 87 件の対応バグ修正ケースで Cursor と直接比較し、各ケースを同一チェックアウトで実行しました。トークン合計、実行時間、モデル費用をケースごとに記録し平均しました。

修正が検証された場合のみケースをカウントします。Codna は 87 件中 87 件を検証。Cursor も 87 件中 87 件を検証しました。

修正あたり平均 16,159 トークン、Cursor は 80,971。Codna は毎回の実行で「生のサイズ→バンドル」のコンテキストサイズも表示するので、自分のリポジトリでの数値を確認できます。

Codna はモデルなし・トークンゼロで依存関係と影響範囲のグラフをマップします。エージェントは関連するエビデンスだけを受け取るため、修正を出す前に読む量が少なくなります。

87 ケースの平均で、検証済み修正 1 件あたりモデル費用 $0.021。自分のキーならプロバイダーに直接支払います。

Codna は自分のキーを持ち込む方式なので、実行に使うモデルはあなたが選びます。codna key set でプロバイダーを設定するか、--model プロバイダー/モデル を渡してください。既定のプランナーは repository.verified_agentic_v1 です。

あなたのリポジトリで検証してください。

codna fix . --issue "the failing test"