新指标"Slop Index"测量AI写作的"机器味"
一眼就能认出的"AI腔"
读多了AI生成的文字,很多人都能一眼认出那种套路:开头总要先"铺垫"一句,内容爱分成"三点",或者动不动就说"这不仅仅是X,更是Y"。这种写法在网上被戏称为"AI slop"(AI水文),意思是像流水线批量生产、缺乏真实感的文字。
横向比较18个AI模型
根据Reddit上一篇帖子介绍,有开发者不满足于吐槽,而是做了一个开源的量化基准,叫"Slop Index"（网址theslopindex.com）。方法是先收集一批真实人类写的文字作为基准语料,涵盖邮件、社交媒体、聊天和文章等不同类型。然后让18个不同的AI模型分别写作,再对比它们的用词和句式与人类基准的差距，并打出分数。
为什么值得关注
随着网络上AI生成文字越来越多,哪些模型写得"像AI"、哪些更接近自然的人类表达,成了不少写作者和读者关心的问题。这个基准由个人开发者独立制作并公开,排名结果尚未经过独立验证,但它是把"AI腔"变成可量化数据的早期尝试之一。
有人做了个工具,给AI写作的"机器味"打分
AI写文章常常有种说不出的感觉。现在有工具能把它量化了。
💡 一句话总结
- AI写作常常重复相同的套路和用词
- 有人做了个叫Slop Index的工具来测量这个
- 它比较了18个AI模型,看谁写得更像人
AI写东西的时候,经常用差不多的开头,或者喜欢把内容分成"三点"。大家把这种现象叫"AI slop"。这是因为AI模型学习了海量文字,记住了很多常见的写法,所以容易一直重复用这些套路。
为了验证这件事,一位开发者做了个工具。他先收集了真人写的邮件、社交媒体帖子、聊天记录和文章,把它们当作对比的基准。然后拿18个不同的AI模型写的文字来比较,算出每个模型用了多少"AI套路"。这个工具是公开免费的,大家都可以用它来看看哪个AI写得更像人。
一个能检查机器人写作习惯的工具
会写字的机器人,也有自己的小习惯。
机器人会写故事。 但它总用差不多的话。 比如"首先,这很重要"。 大家叫这个"AI水文"。
有人做了个检查工具。 先看真人写的字。 再看机器人写的字。 比较了十八个机器人。 就能知道谁写得最像人。