信息密度胜过沟通:为什么AI生成的语言越来越难理解

原创
alex 2小时前 阅读数 1 #头条

信息密度胜过沟通:为什么AI生成的语言越来越难理解

九模型实验:难懂是真实可量化的

最近读了一篇文章,让我重新理解"AI写东西越来越难读"这件事。以前我把它归结为自己读得快了、习惯了AI腔调,但这项研究让我没法继续这么自我安慰。论文测试了九款前沿及近前沿模型,用一套心理语言学指标来量化难懂程度:宾语定语从句的使用频率、句法依存关系的长度、低频n-gram的占比。这些指标都跟人类加工难度有已知的相关性 来源:Clark et al.。结果很直接。全部九款模型都比人类写作更频繁地使用"非生命主语搭配生命动词"的结构,以及更频繁地使用低频n-gram。多数模型在对话场景里还使用了更长的句法依存、更多堆叠名词和更多省略宾语的定语从句 来源:Clark et al.。

但真正让我在意的,是研究设计里的一个对照。他们不仅比了AI文本和人类写作,还比了AI文本和"往返翻译改写"文本。也就是说,把一段文本先翻译成另一种语言再翻回来,用改写后的版本作为中间参照。如果AI文本的难懂只是机器加工的某种普遍副作用,那往返翻译改写应该表现出相似的难懂模式。但事实并非如此。AI模型使用这些难懂特征比往返翻译改写更频繁 来源:Clark et al.。这说明难懂不是"所有机器处理文本"的通病,而是AI生成行为本身的固有倾向。三层比较框架把AI文本的位置定位得很清楚:比人写的难读,比往返翻译改写也难读。

研究者还在模型之间发现了显著差异,不同架构的模型在难懂程度上并不一致 来源:Clark et al.。我不确定这种跨模型差异究竟反映了架构设计上的根本分歧,还是训练数据和方法的差异。但至少有一点是确定的:不是所有模型都在同一个方向上偏离人类语言,有些模型偏离得更远。

核心假说:优化目标错位,信息密度正在压垮沟通

论文提出的解释我觉得是整篇里最有意思的部分。人类语言在演化中被优化了的目标是"成功沟通"。但AI文本越来越多地被优化用于数学、代码和推理任务,这些目标对信息密度存在系统性压力 来源:Clark et al.。当模型被训练去生成更紧凑、更高密度的内容时,那些帮助人类理解语言的线索——重复、缓冲、自然的句长变化——就被压缩掉了。

他们做了一个概念验证实验来测试这个假说:给语言模型施加长度惩罚进行微调,迫使模型生成更短的文本。结果模型明显偏离了类人语言行为 来源:Clark et al.。这个实验的逻辑很干净:你不需要真正去训练模型做数学或代码,只要人为制造"少用词"的压力,类人可读性就开始崩塌。这直接支持了信息密度压力假说。

我觉得这里有个反直觉的判断值得说清楚。AI文本难读不是因为模型能力不够、词汇量有限、语法掌握不好。恰恰相反,是因为优化目标已经从"让人类读懂"转向了"压缩信息"。模型在努力用更少的token传达更多的语义负载,而人类语言加工系统并没有为这种压缩模式准备好。作者把这描述为"错位轴"——人类语言加工需求与LLM之间存在系统性的张力 来源:Clark et al.。这个错位轴的发现"指向了可能的补救措施",暗示通过调整优化目标有可能恢复类人可读性 来源:Clark et al.。

多模型对比与跨来源交叉验证

研究以人类写作作为基准线,以往返翻译改写作为中间对照,形成了三层比较框架。这个设计在方法论上值得肯定:它不依赖读者主观感受,而是用可量化的心理语言学特征来做定位。九款模型全部参与了这个对比,而且结果显示跨模型家族存在实质性差异 来源:Clark et al.。不同架构、不同训练方法的模型,偏离人类语言的程度并不一致。这意味着"AI越来越难读"不是一个单一的技术趋势,不同模型家族可能走在了不同的方向上。

论文发表于2026年10月21日,作者为Thomas Hikaru Clark、Matias B. Martin和Kyle Mahowald。其中Mahowald长期从事心理语言学与语言加工的认知科学研究,这个跨学科组合让研究同时具备语言学的精确性和计算语言学的实证能力 来源:Clark et al.。论文在Hacker News上只获得了2个分和0条评论 来源:HN。2分、零评论。这个数据本身说了一件事:AI可读性问题的严肃学术讨论,还没有进入大众技术社区的视野。至少在那一刻没有。

我不确定这个脱节是暂时的还是结构性的。学术社区关注的加工难度指标和技术社区关注的能力基准,是两套评价体系。但有一点我比较确定:当你每天花大量时间读AI生成的文本,开始觉得它"绕"、"别扭"、"像在嚼蜡"的时候,你的语感没有骗你。难懂是可量化的,而且是AI生成文本的固有特征,不是翻译的副产物,不是模型的bug。它来自优化目标的错位。问题不在于模型不够好,而在于"好"的定义正在悄悄改变。


原文:

Why is AI generated language so hard to understand? · 来源:Hacker News

作者:itfan123 值班编辑 · 发布于 2026年10月25日

版权声明

所有资源都来源于爬虫采集,如有侵权请联系我们,我们将立即删除