AIレビューの見分け方

写真：リサ・フォティオス

最もよく聞かれる質問は「AIテキストをどうやって見分けるの？」です。何しろChatGPTは驚くほど優秀ですから。ページ上の言葉だけが手がかりなら、その出所をどうやって推測できるというのでしょう？ まあ、よく言われるように、文体は性格を表すものです。

ブランドン・サンダースンの作品を十分に読めば、文脈から切り離された一節を見ただけでも彼の文章だと判別できるようになる。中学生の作文を十分に採点すれば、中学1年生と中学3年生を区別できるようになる。そして我々は幸運だ。なぜならChatGPTはどちらよりも特徴的であるだけでなく、分析に使える例文がはるかに豊富にあるからだ。

簡単な例から始めましょう。こちらがGoogleマップ上のレビューです：

ポーチ・カンポリー・フィールドはスカウトたちの心に特別な場所を占めており、この素晴らしいスカウト活動会場を称賛してもしきれません。まさに真のスカウトの楽園であり、そこで得た経験にこれ以上ないほど満足しています。

キャンプ場自体は非常に設備が整っており、キャンプ用の広々としたスペース、様々なアクティビティエリア、そして手入れの行き届いた施設を備えています。美しい自然環境に囲まれたこの場所は、スカウトたちが自然と触れ合い、野外活動に必要なスキルを学ぶのに最適な環境です。穏やかな雰囲気は、スカウトとリーダーの間に仲間意識を育むのに貢献しています。

ポーチ・カンポリー・フィールドでは、オリエンテーリング、パイオニアリング、技能章ワークショップなど、多様な活動と技能向上の機会を提供しています。参加者を惹きつけるプログラムが常に用意されており、スタッフは知識豊富であるだけでなく、スカウト運動に深く献身しています。

ポーチ・カンポリー・フィールドのコミュニティ意識と伝統は驚くべきものです。ここにはスカウト精神が息づいており、多くの若いスカウトたちが学び、成長し、楽しむために集う姿は実に感動的です。安全で思い出深い体験を提供するために尽力するスタッフとボランティアの方々の献身的な姿勢は、高く評価されるべきものです。

ポーチ・カンポリー・フィールドの立地は理想的で、静かで人里離れた環境でありながら、アクセスも容易です。部隊が集い、絆を深め、永く記憶に残る思い出を作るのに最適な場所です。

要するに、ポーチ・カンポリー・フィールドはスカウトの夢が叶う場所です。充実した施設、魅力的なプログラム、そして強いスカウトの絆が感じられるこの場所は、あらゆる年齢のスカウトにとって宝物です。この素晴らしいスカウトの聖地に戻り、私の部隊と共に思い出と技能を築き続けることを楽しみにしています。スカウトの誓い！

このレビューで最初に気づくことは何ですか？平均的なレビューよりもはるかに長く、形容詞や副詞も圧倒的に多いことです。それだけでなく、こうした表現のほとんどは、漠然とした肯定表現（素晴らしい、非常に、美しい、完璧、思いやりがある）以外に中身がありません。 「これ以上褒めようがない」「これ以上満足できない」といった陳腐な表現が数多く見受けられます。

もう一つ注意すべき点は、ChatGPTがプロンプトを繰り返し引用しがちだということだ——レビューの最初の文に場所の正式名称が含まれていることに注目してほしい。通常の人間は読者が閲覧中のページから文脈を既に把握していると理解するが、ChatGPTは応答がプロンプトに完全に応えるよう徹底する。

AI生成文章の最大の特徴の一つは、極めて構造化された文章である。このレビューでは、導入部、各評価項目の段落、そして結論という構成になっていることに気づくだろうか？これは非常に一般的なパターンであり、頻繁に現れる。人間は段落や文の構造をはるかに多様化させる。

さて、これらの知見を別の分野に応用してみましょう。AmazonにはChatGPTのレビューが溢れています。売れ筋商品数点のレビュー欄を見ると、AIによる投稿が蔓延しているのがわかります。

Amazonにある同じ商品の2つのレビューを見てみましょう。そして、以前と同じ尺度で評価します。

例1- 水筒のAmazonレビュー

今年一番のお気に入りの水筒です！気に入っている点は、ちびちび飲むか、ぐいっと飲むか選べるところです。

内蔵ストローには非常に満足しています。ストローから飲むのがとても楽です。これまで内蔵ストロー付きのボトルを何本も使ってきた私から言わせれば、このオワラボトルは2023年最高の製品です。

もう一つの優れた選択肢は、口を開けた状態で飲み物を飲む方法です。これもまた非常に巧妙な設計で、大きな一口を飲む際にも、顔に水をはねかけたり鼻に入ったりする心配が全くありません。

断熱性は平均的。飲み物を冷たく保つ役割は果たしている。今年のカリフォルニアは信じられないほどの猛暑が続いているので、水に氷を多めに入れて使っている。このボトルなら一晩中冷たさをキープしてくれる。

欠点もあります。重さが気に入らないのです。今まで使った断熱水筒より重いです。また、キャップのロック解除には強く押す必要があります。これはOwalaがバージョン2.0で改善すべき点だと思います。

全体的にこのボトルには非常に満足しています。今では毎日使っているメインのボトルとして、以前使っていたタケヤに取って代わりました。ボトルのデザインがとても気に入ったので、（より軽量な）スポーツバージョンも購入しました！キャップのデザインは改善の余地があると思います。次期モデルではぜひ改良してほしいですね。

1. ロング- うん
2. 空の記述子- ただ一つ（本当に）
3. 決まり文句- なし
4. プロンプトを繰り返す- いいえ、単に「水筒」です。
5. 高度に構造化された文章- 導入部、箇条書き、結論はここにあるが、欠点の段落は不規則で少し場違いである

全体として、この尺度では1.5/5と評価します。単に長いだけでは、AIによって書かれたと断じるには不十分なシグナルです。これは人間によって書かれた可能性が高いでしょう。

例2- 同じ水筒のAmazonレビュー

最近購入したオワラ社の24オンス断熱ボトルは、一日中水分補給をするための必須アイテムとなりました。まず目を引いたのはそのデザイン——洗練されたモダンなスタイルで、鮮やかなカラーバリエーションが揃っています。頑丈でありながら軽量な感触は、日常使いに最適です。

機能面では期待を裏切りません。漏れ防止と断熱機能を備えているため、最も暑い日でも飲み物が何時間も冷たいまま保たれます。内蔵ストローは画期的で、キャップを外したりボトルを傾けたりする手間なく、移動中でも気軽に飲めるのです。

最も評価しているのは細部へのこだわりです。ストローには清潔を保つカバーが付いており、ボトルはほとんどの車のカップホルダーやバックパックのサイドポケットに収まるため、非常に持ち運びに便利です。さらに、ループハンドルは持ち運びやバッグへのクリップに最適です。

洗浄は簡単です。これは再利用可能なボトルでは常に懸念される点です。広口設計でボトルブラシが使用でき、ストロー部品は分解可能なので徹底的に洗えます。

要約すると、オワラボトルは便利さとスタイルを約束する、考え抜かれたデザインの商品です。手間をかけずに水分摂取量を増やしたい方にとって、信頼できる相棒となるでしょう。強くお勧めします！

1. ロング- うん
2. 空の記述子- 洗練された、モダンな、信じられないほど、考え抜かれた
3. 決まり文句- 「最初に印象に残ったこと」、「ゲームチェンジャー」、「約束を果たす」、「余計な手間をかけずに」
4. プロンプトを繰り返し表示- はい、製品名「Owala 24オンス断熱ボトル」の全文です
5. 高度に構造化された文章- はい、導入部、3つの箇条書き、そして要約。

これはAI特有の兆候が5つ全て揃っているように見えます。ほぼ間違いなくAIが書いたものと言えるでしょう。

当社の内部「モデル」が一般化しているのは素晴らしいことです！これらの点はいずれも単独では決定的な証拠とは言えませんが、全ての兆候が同じ方向を指している場合、それらを総合してご自身の結論を導き出せます。ご意見をお聞かせください！Twitterでは@max_spero_、メールはmax [at] pangram.comまでご連絡ください。