AI NEWS

AI選び / 実践ガイド

ChatGPT・Claude・Geminiを、同じ課題で比べる方法

知名度や一度の印象ではなく、自分の用途に沿って生成AIを比較するための採点表。

モデルの公開ベンチマークは参考になりますが、日常の使いやすさをそのまま表すものではありません。自分が繰り返す課題を固定し、結果と費用を同じ条件で比べます。

比較する課題を固定する

要約、メール作成、表の整理、コード修正など、実際に週1回以上使う課題を一つ選びます。入力文と添付資料を保存し、各サービスへ同じ順序で渡します。

5項目を同じ条件で記録する

正確さと指示への忠実さは0〜2点で採点し、修正回数、待ち時間、費用は実数と公式情報を別に記録します。好みだけで決めず、どの出力を採用したか、その理由も一行残します。

料金と制限は公式ページで確認する

無料枠、入力上限、利用地域、商用利用、データ利用の設定は変わります。比較した日付と公式ページのURLを記録し、契約前にもう一度確認します。

一つに決めなくてもよい

文章の下書きと調査、画像とコードなど、用途ごとに道具を分ける選択もあります。毎月の合計額と、切り替えにかかる時間まで含めて判断します。

実際に埋める比較シート

まず同じ架空の課題を三つのサービスへ渡します。表の項目を自分のノートにコピーし、比較日、利用プラン、モデル名も記録してください。以下は試験用の入力で、各社の実測結果ではありません。

次の架空の会議メモから、作業・担当・期限の3列の表を作ってください。書かれていない情報は推測せず「未定」と記してください。最後に確認が必要な点を1行で示してください。

会議メモ:来週、試作品の写真を撮る。田中さんが撮影する。公開前に説明文を確認する。説明文の確認担当と公開日は未定。

期待する確認点:撮影担当は田中さん、説明文の確認担当と公開日は未定。相対的な「来週」を勝手な日付に置き換えていないかを見ます。

自分の結果を記入する表(未採点)
確認項目ChatGPTClaudeGemini
事実の正確さ(0〜2)未採点未採点未採点
3列の形式・未定の扱い(0〜2)未採点未採点未採点
修正指示の回数(実数)未記録未記録未記録
待ち時間(秒・実測)未計測未計測未計測
利用プランと費用(公式情報)未確認未確認未確認
採用判断と理由未記入未記入未記入

0点は条件を満たさない、1点は修正すれば使える、2点は修正なしで使える、という基準で最初の2行だけ採点します。時間や費用を点数へ混ぜず、自分にとって必要な条件として別に比べます。3回ほど同じ種類の課題で試してから選ぶと、一度だけの出来に左右されにくくなります。

記入例:実際の6出力から、採用判断まで書く

2026年9月26日(日本時間)に保存したQwen3 8B・Gemma 3 12Bの実行記録を使います。ChatGPT・Claude・Geminiの比較結果ではありません。以下の確認事項と採用判断は、保存出力を読んで加えた解説です。

同じ3件を各モデルへ1回ずつ。総合順位は付けません。
モデル入力完全一致希望日の出力採用判断の例
qwen3:8brelative-date2/3来月10日までに抽出表現は維持し、日付は未確定で台帳へ
qwen3:8bmissing-fields3/3null今回の1回の出力は期待値と一致
qwen3:8bcorrection3/32026-10-05今回の1回の出力は期待値と一致
gemma3:12brelative-date2/3来月10日まで抽出表現は維持し、日付は未確定で台帳へ
gemma3:12bmissing-fields3/3null今回の1回の出力は期待値と一致
gemma3:12bcorrection3/32026-10-05今回の1回の出力は期待値と一致

同じ8/9でも、何を直すかまで読む

相対日付で両モデルが期待値と完全一致しなかったのは、「まで」「までに」が付いたためです。誤った年月を出した結果ではありません。一方、台帳の確定日には年月日が必要なので、このまま自動確定せず、原文を残して確認します。出力を勝手に書き換えて満点にすることもしません。

今回の判断と、まだ決められないこと

数量未定をnullで残す点と、5本から3本への訂正は、この6出力で確かめられます。入力3件・各1回なので本番の成功率や優劣は判断できません。応答時間はモデル読込の条件がそろっておらず、速さの採点には使いません。費用・修正回数を測った比較でもありません。

  1. 元の入力と出力を残す
  2. 意味・形式・人の確認事項を分ける
  3. 確認できた範囲だけを採用判断に書く

この記入例をCSVで保存 · 自分で試す比較シートをCSVで保存

実行条件と出力原文を確認する · 確認を残せる受付台帳を試す

次に読むガイド

実践ガイドAIは進化した。仕事の任せ方は、前のままになっていないか実践ガイドローカルAIを3件で実測:完全一致の採点が見落としたこと実践ガイドAIの候補をそのまま保存しない:問い合わせ確認台帳を作る