如何识别AI生成的评论

照片由丽莎·福蒂奥斯拍摄。

我最常被问到的问题是：“你究竟怎么能检测出AI生成的文本？”毕竟ChatGPT表现得如此出色。当你唯一的线索只是页面上的文字时，又该如何判断其来源呢？正如人们常说的，风格即性格。

读够布兰登·桑德森的作品，你就能从脱离上下文的片段中辨认出他的文风。批改足够多的初中生作文，你就能区分出七年级和九年级的学生。而我们很幸运，因为ChatGPT不仅比这两者都更具辨识度，我们还能参考大量样本进行训练。

我们先从一个简单的例子开始——这里是谷歌地图上的一条评论：

袋营地露营场在童子军心中占据着特殊的位置，我对这个绝佳的童子军活动场地赞不绝口。这里堪称真正的童子军天堂，我在那里的体验令我无比欣喜。

营地设施极为完善，拥有充足的露营空间、多样化的活动区域以及维护良好的配套设施。优美的自然环境使其成为童子军亲近自然、学习户外生存技能的理想场所。这里氛围宁静祥和，能有效促进童子军与领队之间的团队精神。

袋营地提供丰富多样的活动与技能培养机会。无论是定向越野、先锋技能还是荣誉徽章工作坊，总有引人入胜的项目可供参与。各项活动经过精心策划，工作人员不仅知识渊博，更对童子军运动怀有深厚的热忱。

普奇露营场的社区归属感与传统底蕴令人惊叹。童子军精神在此蓬勃生机，目睹众多年轻童子军齐聚一堂学习成长、快乐相聚的场景，实在令人振奋。工作人员与志愿者们为确保活动安全且令人难忘所付出的奉献精神，值得高度赞扬。

普奇露营地的地理位置得天独厚，既能提供宁静幽静的环境，又交通便利。这里是各童子军队伍齐聚一堂、增进情谊、缔造永恒回忆的绝佳场所。

总而言之，普奇露营地是童子军梦想成真的地方。这里设施完善、活动丰富、童子军情谊浓厚，堪称各年龄段童子军的宝藏之地。我期待重返这片卓越的童子军圣地，与我的童子军小队继续创造美好回忆、磨砺技能。童子军誓！

你注意到这篇评论的第一点是什么？篇幅远超普通评论，形容词和副词的使用也远超普通评论。不仅如此，这些描述词大多除了泛泛的积极评价（精彩、非凡、美丽、完美、周到）外，缺乏实质内容。 我注意到大量陈词滥调，比如"赞不绝口"和"再满意不过"。

另一件需要注意的是，ChatGPT常常喜欢重复提示内容——请注意评论的第一句就写了该场所的全名。普通人知道读者通过当前页面已掌握背景信息，但ChatGPT会确保回复完全覆盖提示要求。

人工智能生成文本最明显的特征之一就是高度结构化的写作模式。注意这篇评论的结构：开篇引言，随后每个评论维度对应一个段落，最后收尾总结？这种模式频繁出现——而人类的段落与句子结构则会呈现出更多变化。

现在，让我们尝试将这些经验应用到另一个领域。亚马逊上充斥着ChatGPT生成的评论——看看几款畅销产品，你会发现它们的评论区里到处都是人工智能的痕迹。

让我们看看亚马逊上同一产品的两条评论，并按照之前的标准进行评分。

示例1- 亚马逊水瓶评论。

这是我今年最爱的水壶！我喜欢它能让我随心选择：小口啜饮或大口畅饮。

我对这款水瓶的内置吸管非常满意，通过吸管啜饮水非常顺畅。作为用过多款内置吸管水瓶的人，我认为这款Owalla水瓶是2023年最出色的产品。

另一个绝佳的设计是开放式饮口。再次彰显巧思——即使大口啜饮时，我也完全不必担心水会溅到脸上或灌进鼻子里。

保温效果中等。它能保持饮料冰凉。今年加州天气异常炎热，所以我往水里加了更多冰块。这款水壶能让冰块彻夜保持冰凉。

缺点是重量不太理想，比我用过的其他保温水壶都重。而且按压式瓶盖需要用力按压才能闭合。我觉得Owala在2.0版本中应该改进这点。

总体而言，我对这款水壶非常满意。它现在已成为我的日常主力，取代了原先使用的Takeya水壶。我特别喜欢它的设计，甚至又入手了（更轻便的）运动款！不过瓶盖设计还有改进空间，希望下一代产品能优化这点。

1. Long- 是的
2. 空描述符——仅此一个（真的）
3. 陈词滥调- 无
4. 重复提示内容- 不，只需“水瓶”。
5. 高度结构化的写作——引言、要点和结论部分完整，但缺点段落结构不规则且略显突兀。

总体而言，我会在该评分体系中给出1.5/5的评分。仅凭篇幅冗长不足以构成判断其为AI所作的依据。极有可能是人类撰写的文本。

示例2- 亚马逊上同一款水瓶的评论。

最近我入手了Owala这款24盎司保温瓶，它迅速成为我全天补水的首选。最先吸引我的是其设计——流线型外观时尚现代，配色鲜亮夺目。瓶身兼具耐用性与轻盈感，堪称日常使用的完美之选。

功能性方面，它确实令人满意。防漏保温设计让饮品在炎炎夏日也能保持数小时冰凉。内置吸管堪称革命性设计，行走途中无需拧开瓶盖或倾斜瓶身，轻松畅饮。

最让我欣赏的是其对细节的关注。吸管配有防尘盖保持清洁，水瓶能适配大多数汽车杯架和背包侧袋，极具便携性。此外，环形提手设计既便于手提，又能轻松挂在包上。

清洁工作轻而易举，这向来是可重复使用水瓶的痛点。宽口设计便于使用瓶刷，吸管部件可拆卸以便彻底清洗。

总而言之，Owala水瓶是一款设计周到的产品，真正实现了便捷与时尚的双重承诺。对于希望轻松提升饮水量的人来说，它堪称可靠的随行伙伴。强烈推荐！

1. Long- 是的
2. 空描述符- 时尚、现代、令人难以置信、深思熟虑
3. 陈词滥调——“最先吸引我的是”、“颠覆性的”、“兑现承诺”、“不啰嗦”
4. 重复提示内容- 是，完整产品名称为“Owala 24盎司保温瓶”
5. 高度结构化的写作——是的，包含引言、三个要点和总结。

这看起来像是5个AI特征全中。我敢说这几乎肯定是AI写出来的。

很高兴看到我们的内部"模型"已形成普遍共识！这些迹象单独来看都不足以成为确凿证据，但当所有信号指向同一方向时，便可综合判断得出结论。欢迎分享您的见解！您可通过推特@max_spero_或邮箱max@pangram.com联系我。