研究发现AI小说因“愚蠢且糟糕”而易于检测
马里兰大学与Google DeepMind的研究表明，AI生成的小说在叙事结构上存在明显缺陷，如过度解释主题、缺乏支线情节和生硬的说教，使其易于被检测。研究人员开发了StoryScope检测器，通过分析叙事特征来区分人机写作，并测试了多个AI模型。研究使用了争议性的Books3数据集，但未公开发布。
近年来，人工智能生成的小说数量激增，但其质量常常令人失望。马里兰大学与Google DeepMind的一项最新预印本研究证实，AI生成的小说在叙事结构上存在明显漏洞，使其极易被检测。研究团队分析了超过5万篇AI生成的短篇故事，发现AI作品普遍存在过度解释主题、缺乏支线情节、生硬说教等问题。
研究团队开发了一款名为StoryScope的检测工具，与传统方法不同，它不依赖词汇标记（如滥用破折号或“delve”等词），而是专注于分析叙事结构要素，包括情节发展、人物描写、场景设定和时间结构。通过对比人类作品，该系统能准确识别AI生成文本。
研究揭示了不同AI模型的独特“文风”：GPT倾向于大量使用梦境序列，Gemini默认采用外部人物描述，而Claude生成的事件发展则显得异常平坦。AI对话中，59%服务于哲学辩论，而人类作品中仅为34%。此外，AI故事很少运用时间跳跃或倒叙，人物和场景数量也远少于人类作品。
然而，该研究使用的数据源——Books3数据集——存在版权争议。该数据集包含18.3万本盗版电子书，已被多起诉讼涉及。研究人员承认版权问题，并强调数据集仅用于学术目的，不向公众发布。值得注意的是，研究团队在撰写论文时也使用了AI辅助，包括Claude Code和Codex等编码代理，这一做法得到了作者主动披露，旨在推动学术诚信。
研究作者之一Jenna Russell表示，这项工作的意义在于超越简单的文本检测，转向识别“叙事特征”差异。她认为，了解AI在叙事层面的固有缺陷，有助于教师和读者判断作品背后的创造力是否真正源于人类。