先に分かること
- 2026年10月2日に、CodexとClaude Codeへ同じ5タスクを各2回実行し、20回答を保存しました。
- T01〜T03は全回答が客観基準を満たし、T04はClaude Codeの2回目だけ形式違反で92点でした。
- T05は客観項目60点分のみ採点済みです。人が読む品質40点は未実施なので、総合順位は出していません。
実行条件と、比較していないこと
比較日は2026年10月2日です。CodexはChatGPT Plusのgpt-5.6-sol、Claude CodeはClaude Proのclaude-sonnet-5-5をコマンドラインから使用し、推論設定のeffortはどちらもhighとしました。各タスクは独立した新規セッションで、同じ指示文と入力を使って2回ずつ実行しています。最初の回答をそのまま保存し、追質問、再生成、手修正、Web検索は行っていません。各ツール10回答、合計20回答に欠落と空回答はありませんでした。
この記録はコマンドラインの固定条件テストです。一般向け画面、API、別モデル、長期利用、料金対効果、仕事全体の品質は比較していません。確認日時点の製品名と契約プランであり、現在の提供条件は各社の公式案内で確認してください。
5タスクと評価基準
| タスク | 入力と作業 | 主な評価基準 |
|---|---|---|
| T01 | サービス概要からLPのヒーローコピーを作成 | H1は18字以内、リードは90〜120字、3項目は各22〜35字、固定CTA、禁止語なし、入力上の注意と人の確認を明記 |
| T02 | 架空の4資料だけを使って情報を整理 | 新旧情報の関係、保存期間、未確定事項、Source IDを正しく記載し、資料外を補わない |
| T03 | 24行の案件CSVを集計 | 総数24、AI必須16件・66.7%、平均報酬16,375円、条件該当11件、分類別集計を再現し、標本を一般化しない |
| T04 | 壊れたHTMLの指定7箇所だけを修正 | 7修正の正確さと、説明やコードフェンスを付けずHTML全文だけを返す形式 |
| T05 | 5つの事実と3つの除外条件を残し、350〜500字へ編集 | 客観60点は事実・除外条件・字数・誇張防止。読みやすさ等の人手40点は別枠 |
タスク別の結果
| タスク | Codex 2回答 | Claude Code 2回答 | 読み方 |
|---|---|---|---|
| T01 | 100 / 100 | 100 / 100 | 4回答とも字数、3項目、CTA、禁止語の客観条件を満たした |
| T02 | 100 / 100 | 100 / 100 | 4回答とも更新関係、保存期間、未確定事項、資料番号が一致した |
| T03 | 100 / 100 | 100 / 100 | 4回答とも集計値と「市場全体を代表しない」という制限が一致した |
| T04 | 100 / 100 | 100 / 92 | Claude Codeの2回目は修正内容ではなく出力形式で8点減点 |
| T05 | 60 / 60 | 60 / 60 | 4回答とも客観60点のみ。人手40点は未実施 |
実際に起きた形式違反
Claude CodeのT04 run2は、指定された7修正自体は満たしましたが、HTML全文をコードフェンスで囲みました。「HTML全文のみ」という納品形式に反したため8点を減点し、92点としています。内容の誤りと納品形式の違反を同じものとして扱わないための記録です。
T05の人手40点は未評価です。未評価を0点や満点で補わず、総合点や優勝モデルを作っていません。読みやすさ、自然さ、実務での採用可否を比較するには、評価者と基準を決めた別の確認が必要です。
壁時計時間
各回答について、コマンド実行から応答取得までの壁時計時間を記録しました。全10回答の平均はCodex 23.292秒、Claude Code 18.500秒、中央値はそれぞれ21.586秒と14.500秒でした。タスク別平均は、T01が37.458秒／42.000秒、T02が20.659秒／16.500秒、T03が21.514秒／12.000秒、T04が12.522秒／7.500秒、T05が24.305秒／14.500秒です（Codex／Claude Code）。
この時間にはコマンドラインの実行、端末、通信、サービス側の待ち時間が含まれ得ます。生成処理だけの速度ではなく、別日・別環境にもそのまま当てはまりません。時間だけで性能差や業務全体の効率を断定しないでください。
自分の用途へ応用する方法
- 実際の用途に近い入力を、秘密情報を除いて2〜5件用意する。
- 字数、必要項目、根拠、禁止事項、納品形式を先に合否条件へする。
- 各ツールへ同じ条件で入力し、最初の回答と実行条件を保存する。
- 内容の正しさ、形式違反、修正量、人でしか判断できない項目を分けて記録する。
- 総合順位ではなく、用途ごとの失敗と確認負担から選ぶ。
今回比較できないのは、長期の安定性、最新モデル全般、対話での修正能力、料金差、セキュリティ要件、組織管理機能、API運用、実案件の成果です。必要な項目は各社の現行規約・管理機能と、自分の小規模テストで補ってください。
元回答と採点を確認する
再確認できるよう、指示文、入力資料、20回答、採点基準、正解条件、得点、実行時間、方法、限界を公開しています。ブラウザで誤ってHTMLとして開かないよう、Web上の壊れたHTML検証用ファイルには.txtを付けています。ダウンロード用ZIPには、実際の検証時と同じファイル名で収録しました。
検証用ファイルの詳細
Web公開用はT04_broken.html.txt、ダウンロード用ZIP内はfixtures/T04_broken.htmlです。内容は同一です。