盲测实验:1682人无法区分AI和人类作者
2026年8月,一项发表在《判断与决策》(Judgment and Decision Making)期刊上的研究颠覆了人们对AI写作能力的认知。研究人员邀请1682名成年人阅读6篇短篇小说——其中3篇由人类创作,3篇由ChatGPT创作。每篇AI小说围绕与人类作品相似的主题展开。关键设计是:研究人员告诉参与者每篇故事的作者身份,但这个信息并不总是准确的。
结果显示,阅读AI生成故事的参与者认为这些故事"更加引人入胜",整体质量评分高于人类创作的故事。然而,当参与者被告知某篇故事是由"人类创作"时,他们反而给出更高的评价——即便这篇故事实际上是AI写的。这种"标签效应"揭示了人们对AI创作的深层偏见。
AI系统已经能够创作短篇故事,而且人们认为这些故事至少不逊于人类创作的作品,甚至可能更好。我们应该据此重新认识AI的能力。
仅40%的人猜对:判断力低于随机水平
在后续实验中,905名参与者需要判断两篇同主题故事中哪篇是人类写的、哪篇是AI生成的。令人震惊的是,在其中一个实验中,仅约40%的参与者猜对了——甚至低于随机猜测(50%)的准确率。另一项实验的正确率也仅为52%。研究人员明确指出:"没有普遍证据表明参与者能够区分人类创作的故事和AI生成的故事。"
研究还发现,参与者自称的阅读或写作经验与判断准确度没有明显关系,但对AI系统越熟悉的人,判断准确率越高。这说明"识别AI写作风格"是一种可以通过练习获得的技能,就像学会辨认不同人类作者的独特风格一样。
这一切值得吗?AI写作引发的深层思考
维拉诺瓦大学的Deena Skolnick Weisberg博士(该研究主要作者,同时也是一名创作者)强调,这并不意味着写作应该交给AI。"人类写作是为了进行创造性的自我表达,是为了挑战自己,也是为了理解和梳理自己的经历。AI能够生成类似人类创作的故事,并不会改变这些事情。"
英国伯明翰大学电影与创意写作教授Luke Kennard则持更尖锐的立场:"因为我们倾向于把AI拟人化,把它想象成某种发光的机器人,但实际上它只是基于海量被盗写作数据库运行的预测代码。AI并不是普通的工具,而是一种生存层面的威胁。我们真正应该问的问题是:这一切值得吗?"