宣布与Proofig建立全新合作伙伴关系!了解更多

人工智能检测能否识别克劳德的写作风格?

马克斯·斯佩罗
2024年12月6日

图像:人类中心论

11月Anthropic公司为Claude.ai发布了更新,允许用户选择助手的回应语气。除默认语气外,用户可从预设菜单中选择"简洁型"、"说明型"和"正式型"三种模式。此外还提供自定义写作风格功能——用户可输入特定文档或指令,系统将据此生成专属写作风格。

预设选项基本一目了然。"简洁"模式通常以要点或列表形式回应,"详解"模式则生成更长的回答。"正式"模式会省略克劳德标志性的"这是个好问题",并采用相当专业的行文风格。不过根据我的体验,这些模式下的回答听起来依然带有克劳德的个人风格——本质上与直接向助手提问并要求简洁/详解/正式回答并无二致。

但我们真正想测试的是人工智能检测功能。我要求每种Claude写作风格各撰写一篇250字的罗马帝国衰落主题文章。现在让我们看看结果。

标准克劳德输出 简洁的克劳德输出 解释性克劳德输出 正式的克劳德输出

这些听起来都和克劳德的常规写作风格相当接近。它们似乎与在提示中直接要求"简洁"或"正式"的输出并无太大区别。

让我们试试用自定义写作风格能否做得更好。这个界面相当酷炫,基本操作就是复制一段文本,它就会为你生成完整的提示词。我根据自己的博客文章创建了一个自定义风格,Claude给它命名为"科技故事讲述者"。我还从Slate Star Codex博客文章中创建了另一个风格,Claude将其命名为"学术怀疑论者"。 该功能似乎通过大型语言模型生成约三句写作风格说明。另设有用户示例板块,但令人惊讶的是,提供给模型的示例竟完全由系统生成,与原始范例相比显得相当泛泛。

科技故事讲述者提示 科技故事讲述者克劳德输出 学术怀疑论者提示 学术怀疑论者克劳德的输出

这些内容仍明显带有AI写作的痕迹,Pangram的检测模型依然能识别出来。

鉴于我注意到AI生成的用户示例可能存在不足,我手动修改了写作风格提示,转而纳入原始示例:我的博客文章以及Slate Star Codex的帖子。

更新后的科技故事讲述者克劳德输出 更新后的学术怀疑论者克劳德输出

仍明显可辨为AI写作。是更自然还是更像AI了?倒也未必,尽管Tech Storyteller中去掉了极具AI特征的标题,算是朝正确方向迈进了一步。我注意到写作风格指南提到要呈现"复杂信息"或"承认复杂性",这似乎导致AI写作中"复杂"一词的使用频率远高于其他文章。 这并非我们要求的写作风格。

最后需要说明的是,我使用了Pangram仪表盘来分析这些文章究竟哪些特征暴露了它们是AI生成的。其中许多短语在AI写作中出现的频率远高于正常人类写作。

全字母表仪表板

例如,我们的模型发现,在AI生成的文本中,"复杂且多面的"一词的使用频率是人类写作的700倍;"错综复杂的互动"的使用频率高出100倍;"发挥了关键作用"的出现频率则高出70倍。这些短语虽能让我们凭直觉识别AI文本,但模型采用的是整体分析法,会综合考量文档的完整语境。

总而言之,克劳德的写作风格功能对那些不想在每个提示语后都加上"别唠叨"的人来说是个贴心设计,但它并非让AI输出难以辨识的工具。

订阅我们的电子报
我们每月分享人工智能检测研究的最新进展。
订阅
以获取我们的最新动态
随时掌握我们的最新资讯与优惠活动。
© 2025 Pangram。保留所有权利。