対応ケース
同じ 87 件のバグ修正ケースを、同一チェックアウト上で両エージェントに対して実行しました。
同一チェックアウト上の 87 件の対応バグ修正ケース、Codna 対 Cursor。Codna は 87 件中 87 件を修正 1 件あたり約 $0.02 で検証し、トークンは 5 分の 1、速度は 1.7 倍でした。
| 指標 | Codna | Cursor |
|---|---|---|
| 検証済みの修正 | 87 / 87 | 87 / 87 |
| 対応ケース数 | 87 | 87 |
| 平均実行時間 | 13.39s | 22.57s |
| 修正あたり平均トークン数 | 16,159 | 80,971 |
| 修正あたり平均モデル費用 | $0.021 | 該当なし |
| リポジトリ理解 | 0 トークン | モデルコンテキスト |
手法
各ケースは両エージェントとも同一のチェックアウトで実行しました。修正が検証された場合のみカウントします。表は 87 件の対応ケースの平均です。
同じ 87 件のバグ修正ケースを、同一チェックアウト上で両エージェントに対して実行しました。
Codna は修正あたり平均 16,159 トークン。Cursor は平均 80,971。
Codna は修正あたり平均 13.39 秒。Cursor は平均 22.57 秒。
Codna の検証済み修正 1 件あたりのモデル費用は平均 $0.021。
同一チェックアウト上の 87 件の対応バグ修正ケースの平均。修正が検証された場合のみカウント。 サマリーをダウンロード (JSON) →
Codna は 87 件の対応バグ修正ケースで Cursor と直接比較し、各ケースを同一チェックアウトで実行しました。トークン合計、実行時間、モデル費用をケースごとに記録し平均しました。
修正が検証された場合のみケースをカウントします。Codna は 87 件中 87 件を検証。Cursor も 87 件中 87 件を検証しました。
修正あたり平均 16,159 トークン、Cursor は 80,971。Codna は毎回の実行で「生のサイズ→バンドル」のコンテキストサイズも表示するので、自分のリポジトリでの数値を確認できます。
Codna はモデルなし・トークンゼロで依存関係と影響範囲のグラフをマップします。エージェントは関連するエビデンスだけを受け取るため、修正を出す前に読む量が少なくなります。
87 ケースの平均で、検証済み修正 1 件あたりモデル費用 $0.021。自分のキーならプロバイダーに直接支払います。
Codna は自分のキーを持ち込む方式なので、実行に使うモデルはあなたが選びます。codna key set でプロバイダーを設定するか、--model プロバイダー/モデル を渡してください。既定のプランナーは repository.verified_agentic_v1 です。
codna fix . --issue "the failing test"