AI選び / 実践ガイド
ChatGPT・Claude・Geminiを、同じ課題で比べる方法
知名度や一度の印象ではなく、自分の用途に沿って生成AIを比較するための採点表。
モデルの公開ベンチマークは参考になりますが、日常の使いやすさをそのまま表すものではありません。自分が繰り返す課題を固定し、結果と費用を同じ条件で比べます。
比較する課題を固定する
要約、メール作成、表の整理、コード修正など、実際に週1回以上使う課題を一つ選びます。入力文と添付資料を保存し、各サービスへ同じ順序で渡します。
5項目を同じ条件で記録する
正確さと指示への忠実さは0〜2点で採点し、修正回数、待ち時間、費用は実数と公式情報を別に記録します。好みだけで決めず、どの出力を採用したか、その理由も一行残します。
料金と制限は公式ページで確認する
無料枠、入力上限、利用地域、商用利用、データ利用の設定は変わります。比較した日付と公式ページのURLを記録し、契約前にもう一度確認します。
一つに決めなくてもよい
文章の下書きと調査、画像とコードなど、用途ごとに道具を分ける選択もあります。毎月の合計額と、切り替えにかかる時間まで含めて判断します。
実際に埋める比較シート
まず同じ架空の課題を三つのサービスへ渡します。表の項目を自分のノートにコピーし、比較日、利用プラン、モデル名も記録してください。以下は試験用の入力で、各社の実測結果ではありません。
次の架空の会議メモから、作業・担当・期限の3列の表を作ってください。書かれていない情報は推測せず「未定」と記してください。最後に確認が必要な点を1行で示してください。 会議メモ:来週、試作品の写真を撮る。田中さんが撮影する。公開前に説明文を確認する。説明文の確認担当と公開日は未定。
期待する確認点:撮影担当は田中さん、説明文の確認担当と公開日は未定。相対的な「来週」を勝手な日付に置き換えていないかを見ます。
| 確認項目 | ChatGPT | Claude | Gemini |
|---|---|---|---|
| 事実の正確さ(0〜2) | 未採点 | 未採点 | 未採点 |
| 3列の形式・未定の扱い(0〜2) | 未採点 | 未採点 | 未採点 |
| 修正指示の回数(実数) | 未記録 | 未記録 | 未記録 |
| 待ち時間(秒・実測) | 未計測 | 未計測 | 未計測 |
| 利用プランと費用(公式情報) | 未確認 | 未確認 | 未確認 |
| 採用判断と理由 | 未記入 | 未記入 | 未記入 |
0点は条件を満たさない、1点は修正すれば使える、2点は修正なしで使える、という基準で最初の2行だけ採点します。時間や費用を点数へ混ぜず、自分にとって必要な条件として別に比べます。3回ほど同じ種類の課題で試してから選ぶと、一度だけの出来に左右されにくくなります。
記入例:実際の6出力から、採用判断まで書く
2026年9月26日(日本時間)に保存したQwen3 8B・Gemma 3 12Bの実行記録を使います。ChatGPT・Claude・Geminiの比較結果ではありません。以下の確認事項と採用判断は、保存出力を読んで加えた解説です。
| モデル | 入力 | 完全一致 | 希望日の出力 | 採用判断の例 |
|---|---|---|---|---|
| qwen3:8b | relative-date | 2/3 | 来月10日までに | 抽出表現は維持し、日付は未確定で台帳へ |
| qwen3:8b | missing-fields | 3/3 | null | 今回の1回の出力は期待値と一致 |
| qwen3:8b | correction | 3/3 | 2026-10-05 | 今回の1回の出力は期待値と一致 |
| gemma3:12b | relative-date | 2/3 | 来月10日まで | 抽出表現は維持し、日付は未確定で台帳へ |
| gemma3:12b | missing-fields | 3/3 | null | 今回の1回の出力は期待値と一致 |
| gemma3:12b | correction | 3/3 | 2026-10-05 | 今回の1回の出力は期待値と一致 |
同じ8/9でも、何を直すかまで読む
相対日付で両モデルが期待値と完全一致しなかったのは、「まで」「までに」が付いたためです。誤った年月を出した結果ではありません。一方、台帳の確定日には年月日が必要なので、このまま自動確定せず、原文を残して確認します。出力を勝手に書き換えて満点にすることもしません。
今回の判断と、まだ決められないこと
数量未定をnullで残す点と、5本から3本への訂正は、この6出力で確かめられます。入力3件・各1回なので本番の成功率や優劣は判断できません。応答時間はモデル読込の条件がそろっておらず、速さの採点には使いません。費用・修正回数を測った比較でもありません。
- 元の入力と出力を残す
- 意味・形式・人の確認事項を分ける
- 確認できた範囲だけを採用判断に書く