许多读者都注意到了这一点:人工智能模型编写的文本感觉越来越密集、生硬,并且奇怪地难以解析,即使它在语法上没有缺陷。 arXiv 上发布的一份新预印本将硬语言数据置于这种直觉背后,并提出了其发生原因的解释。
这项名为“为什么人工智能生成的语言如此难以理解?”的研究由研究人员 Thomas Hikaru Clark、Matias B. Martin 和 Kyle Mahowald 于 10 月 21 日提交。作者利用跨越不同领域的人工智能生成文本的新颖语料库,分析了一组心理语言学特征,这些特征在文献中已被广泛确立为人类读者处理困难的标志,包括宾语相关从句、长句法依赖性和低频 n 元语法。 更多相关背景,请参阅我们的人工智能资讯。
研究人员测量了什么
心理语言学早就知道,并非所有句子的阅读成本都相同。对象亲属条款(“记者攻击的参议员……”)比对象亲属需要更长的时间来处理。单词之间较长的依赖关系迫使读者在记忆中保留更多的内容。罕见的单词序列需要更多的努力来检索和整合。这些特征可以作为衡量文本实际理解难度的标尺——与听起来的复杂程度不同。
研究人员将人工智能生成的写作与两个基线进行了比较:人类书写的文本和通过往返翻译产生的释义,这是一种旨在将真正的模型怪癖与正式或机器散文的通用风格分开的控制。
这种控制很重要。怀疑论者可以合理地认为,人工智能文本读起来就像商业或技术写作——正式的、客观的、以名词为主——而不是表现出明显的病态。往返翻译生成的文本具有类似的优美、稍微不自然的语域,背后没有任何语言模型训练。如果人工智能模型在处理难度测量方面仍然超过基准,那么差异就必须来自于模型本身如何学习写作的特定因素。从本质上讲,这就是研究的发现。
他们发现了什么
结果全面一致。与人类写作相比,研究中检查的所有九个前沿和近前沿模型(包括来自 GPT-5.6、Claude、Llama、DeepSeek 和 Qwen 系列的系统)都做出了明显更难的选择:
- 更多无生命的主题与有生命的动词配对 - 抽象“深入”、“下划线”或“突出显示”的典型人工智能写作模式。
- 更多低频 n-gram,意味着人类作家很少产生的不寻常的单词序列。
- 更长的句法依赖性,主语和动词被更多的中间材料分开。
- 更多堆叠名词,并且在会话文本中,更多减少宾语关系从句。
该研究还记录了模型系列之间的巨大差异——并非所有模型都同样难以阅读——并发现人工智能模型比往返翻译释义更频繁地使用这些困难的结构,这表明效果特定于模型的训练方式,而不是正式语域的产物。
这种变化无疑是论文中最有用的结果之一。如果阅读困难是规模或能力不可避免的结果,那么所有前沿系统都会聚集在一起。相反,家庭之间的分布表明,训练后的选择——数据组合、奖励信号、对推理重领域的强调——明显地影响了模型的散文如何落在人类读者的手中。换句话说,难以阅读的人工智能文本是设计的结果,而不是智能不可避免的副产品。
信息密度假说
为什么模型会转向更难的语言?作者提出并测试了一个假设:虽然人类语言是在成功沟通的压力下进化和学习的,但人工智能生成的文本越来越针对其他目标(数学、代码和推理任务)进行优化,其中的压力是“信息密度”而不是易于理解。
因将正确答案打包成更少的标记而获得奖励的模型会学习一些习惯,这些习惯会延续到散文中:压缩含义、更喜欢精确但罕见的措辞、在每个句子中嵌入更多结构。结果是文本在基准测试中得分很高,但对于人类读者来说却逐渐变得不那么自然。
为了测试这个想法,研究人员进行了概念验证实验:他们在长度惩罚下微调语言模型,迫使其压缩输出。该模型的语言行为与类人模式的差异与假设所预测的完全一致——这为这样的观点提供了因果支持:优化压力,而不仅仅是数据,推动了这种转变。
为什么它很重要
研究结果强调了作者所说的人类语言处理需求与大型语言模型隐含偏好之间的不一致。这种失调会产生实际后果。生成难以阅读的文本的人工智能助手会对每个答案征收隐性税,随着人们将更多的阅读时间花在模型生成的草稿、摘要和解释上,这种效果会更加复杂。
作者认为他们的框架指向了可能的补救措施——训练或调整模型的方法,其输出尊重人类处理限制而不牺牲能力。这篇论文是预印本,尚未经过同行评审,但其中心观察已经引起了共鸣:该论文于 10 月 24 日登上了黑客新闻头版,引发了一场关于推理性能和可读散文之间的权衡是否是根本性的或可以解决的积极辩论。
目前,这项研究为读者提供了一个经过验证的词汇来表达熟悉的挫败感。文本变得更糟并不是偶然的——它是经过设计而变得更密集的。
来源:arXiv:2610.29162、黑客新闻讨论---
掌握AI最新动态获取最新的AI新闻、分析和突破——尽在一处。
阅读更多AI新闻 →