腾讯科技旗下企鹅智库前沿科技论文解读专栏。在代码与商业的交汇处,寻找AI的确定性。

文|博阳

编辑|徐青阳

近期刚刚上线的Gemini 4 Argon引发了很多争议,比如编程似乎没那Benchmark那么强、Antigravity Pro订户都不让用等等,但大家一致认为,它是现在所有前沿模型里写作最好的那个。

这并非是从Gemini 4这个时代就开始的,在Claude说话依然优雅的时代里,Gemini 2.5 Pro也是以说人话著称。

但在过去一年里,OpenAI和Anthropic的模型说出来的话都开始越来越难以让人理解。如果说Anthropic只是连接卡壳,那OpenAI就都有点前言不搭后语的水平了。

我们过去觉得AI写文章差劲,主要是因为AI腔太重。无论你问什么,它总要先来一段滴水不漏的场面话,接着祭出「这不仅关乎某事,更是对某事的深刻重塑」的排比句。同时,相似的起手式和无尽的破折号掺杂其间。

但最近,AI的输出文本最大的问题已经变成读不懂了。他们写出来的东西,像一块干硬的「句法压缩饼干」。一段话里的每个字你都认识,可你只要读上三行,就会觉得太阳穴发紧。从头到尾读完,似乎有点道理,但具体说了啥却没有印象。

到今天,说实话读某些AI写出来的东西,我甚至已经有了一些生理性恐惧了,一种面对要搬的水泥袋子的恐惧。因为我知道要读完它,得死不少脑细胞。

而这,并不是只来自于我主观的认知。

01

微观上,意义的压缩挤爆了人类的认知带宽

之前很多人会认为AI写的东西不好读,是因为他们生僻词用的多,动不动就上术语。

但 2026 年 10 月,纽约大学(NYU)与得克萨斯大学奥斯汀分校(UT Austin)的联合团队发表了一篇论文《Why is AI-generated language so hard to understand?》,他们把包括CLaude Opus 5.5,GPT-5.6 sol,Kimi K2.5、GLM 5等主流前沿大模型生成的文本与人类真实写作放在一起,做了一次细颗粒度的心理语言学对比。

结果他们发现,哪怕把词汇难度完全控制住,AI 写出来的句子依然在人类大脑的生理雷区里蹦迪。因为它的信息太密了。

要理解这个现象,得先引入心理语言学里的一个规律,叫均匀信息密度假说。

人类的大脑工作记忆就像一根口径固定的输水管,每秒钟能够吞吐和解析的语义信息量是有严格上限的。当一位优秀的人类作者想要表达一个极其复杂、高信息量的概念时,他会本能地往句子里掺「水」。

这里的「水」是语法上的功能词、虚词和显式从句引导词。比如在英语里,当后面跟着一个比较难懂的主语时,人类会本能地保留那个语法上可省可不省的连词 that。这个 that 本身几乎不携带新信息,但它像一个缓冲气囊,提前告诉读者「注意,后面要进一个完整从句了」。有了这半秒钟的缓冲,水管里的水流就被摊平了。人读着就不费劲了。

然而, 可纽约大学的学者们检查大模型写出来的句子时,发现大模型把句子里几乎所有的减速带全给拆了。

他们总结出了六种AI常用的烧脑语法。

1. 死物配动词:一个正常人会写「因为这项新政策出台,市场上出现了恐慌情绪」,主语是人或者顺着因果逻辑走。但大模型非常喜欢写「这项政策窒息了市场的呼吸」或者「沉默在房间里竖起了张力的里程碑」。

但心理学家早就用脑电仪测出来过,当人的眼睛扫过一个没有生命的主语,紧接着撞上一个只有活人才能发出的动作动词时,大脑里负责语义整合的区域会瞬间亮起红灯,产生剧烈的违和感。偶一为之叫作诗意,如果一段话里连着来上五六个这样的句子,读者的脑力在第三行就彻底耗尽了。

2. 疯狂删减引导词 :刚才提到就是这个。

3. 狂堆名词:它们极度痴迷于把四五个名词像叠罗汉一样硬捆成一个超长的复合词,把原本应该由动词、介词分担的逻辑关系,全塞进一团密不透风的名词堆里。

4. 名词不用,用动词:为了在更短的字数里塞进动作,把大量本该做宾语的名词直接活用为及物动词。

5. 超级长难句:主语和真正的核心谓语动词之间,隔着十几个字的插入语或修饰成分,读者读到谓语时,主语早就从工作记忆里溢出了。

6. 新词组合叠出:放弃高频、顺口的日常搭配,拼凑出统计概率极低的生硬词组。

发现了病状,后面我们要思考一下病理了。

那么预训练语料明明来自人类,为什么模型反而学会了这种反人类的压缩饼干句法?

锅还是落在后训练上。近年来,因为AI的输出变得越来越长, 越来越废token,所以各个大厂开始不约而同的在强化学习过程中,加入了长度惩罚,来去控制输出的长度。

NYU 团队在论文中做了个实验,他们在开源模型 Qwen2.5-1.5B-Instruct 上做了一个控制变量实验,只用 GRPO 算法配合不同的长度惩罚系数 λλ 进行强化学习微调。结果发现,随着 λλ 增大,模型像被无形的大手挤压一样,自动开始删减可选的 that、把从句压成名词复合词、拉高单位 Token 的平均惊奇度。

这说明,为了抑制废话而在奖励函数里加入长度系数 λλ 时,模型面临的优化目标变成了在有限的 Token 预算内,塞入最高密度的可验证信息。 所以AI的话语自然就越来越破碎,复杂。

而且为什么模型要选择这么删,其实也是有他们自己的道理的。

另一篇 2026 年 6 月发表的研究《BabelTele: Large Language Models Do Not Always Need Readable Language》就发现,对于大模型自己来说,删掉所有虚词、连词和语法缓冲垫的「电报体」文本,在机器的向量空间里依然具备极高的信息可恢复性。

对他们来讲,删掉这个确实没漏信息,还能降低输出长度。

但这对人类阅读者来讲确实是场灾难。

2026 年 9 月,华盛顿大学等在论文《When AI Becomes Hard to Understand: Cognitive Demands in Real-World Human-AI Conversations》中,深入分析了医疗健康与个人理财领域超过 84,000 条 真实用户与 ChatGPT 及 Gemini 的多轮对话日志。他们发现了一条支配人机交互成败的铁律,并将其命名为「对话复杂度预算」。

当 AI 的单轮回复很短时,较高的词汇多样性(Lexical Diversity,即用词丰富、概念密集)是正收益,能帮用户快速抓准概念,减少后续追问。

但一旦 AI 的回复变长,词汇复杂度与人类理解度之间的关系就会发生彻底反转。在长回复中维持高词汇复杂度与高句法复杂度,会瞬间击穿用户的「对话复杂度预算」,直接导致用户在随后的轮次里被迫反复发出澄清请求(如要求模型「用普通人听得懂的话再解释一遍」),使沟通效率大幅滑坡。

人类脆弱的认知语言习惯,经不起这种轰隆作响的思维块冲击。

02

宏观上,篇章的断裂并没有随着模型能力提升被治愈

如果把视野从单个句子拉大到整段话和整篇文章,大模型写东西还有一个毛病是,局部顺滑,全局散架。

很多时候我们读 AI 写的两千字长文,单拎出每一句话都通顺得挑不出毛病,但读完三大段却完全记不住它的核心论点是怎么推进的。

这就是因为它根本不会在行文中有效的推进因果逻辑。

俄亥俄州立大学、犹他大学与艾伦人工智能研究所在2026年6月发表了论文《Process-Oriented Evaluation of AI-Assisted Scientific Writing》。他们调取了 869 份真实科研写作过程日志、累计约 240,000 次键盘敲击与修改记录,去追踪人类作者在引入大模型润色文章时到底发生了什么。

追踪结果发现,大模型在单句内部确实是个出色的语法工匠,它的改写能显著理顺单句内部的谓词—论元结构,让读者一眼看清这句话里「谁对谁做了什么」。但只要跨出句号,到了整段乃至全篇,大模型的介入非但没能提升篇章连贯性,反而经常破坏作者原本铺垫好的逻辑链条。

在语言学里,一段话好不好读,除了看单句写得清不清楚(主谓清晰度 Agency、词句精简度 Economy、句内结构 Structure),更取决于两个宏观指标。

一是「全局连贯性」,也就是上下句之间有没有靠核心概念的呼应搭起锁链,每一句话是不是严格遵循「以旧带新」,它需要先在句首接住上一句刚聊熟的话题,再在句尾抛出新信息。

二是「篇章框架(Framing)」,也就是转折、铺垫和核心结论有没有放在人类预期的位置上。

模型在这两个方面都表现不佳。当GPT-5.4 和 Claude Opus 4.6 面对一篇「原本就写得还行」的文稿去插手润色后,虽然单句被拧得更精炼了,但整段话的全局连贯性评分会从 73.8 分直接崩盘到 59.9 分,负责起承转合的篇章框架分也会暴跌 12.1 个百分点。

而且它们根本就在系统中没有相关的概念,因为你教它们它们都学不会。

当研究人员给三大前沿模型配上思维链(Chain-of-Thought),甚至把写得明明白白的五维语言学评分表直接喂进提示词里时,模型在三个微观单句指标上的得分全线暴涨m可唯独在宏观全局连贯性这一项上,三大模型的提升幅度都是0。

换句话说,哪怕你手把手教顶尖的旗舰模型什么叫上下文衔接,它也学不会。

那为什么模型越来越聪明,反而把篇章切得越来越碎呢?

实验还对不同模型的行为归因。

第一层原因,其实是第一篇论文中效应扩大到整个篇章的结果。模型改文章,就倾向于删掉气口,所以也根本不懂得穿针引线。

在那 24 万次按键记录里,人类作者有 63% 的修改动作都发生在单个词或短语级别。因为人类知道句子和句子之间需要留出搭扣,改文章时像是在做针线活。而三大前沿模型无论怎么调教,高达 86% 到 89% 的修改动作都是整句推倒重来。

模型把每一句话都当成了一道孤立的考题,拼命把单句改得滴水不漏,但把上一句和下一句之间原本用来递话头的过渡词、同义呼应和旧信息钩子全给铲平了。

Anthropic 和OpenAI 的模型写的东西之所以让人感觉断断续续,病根就在这儿:字句之间全无粘性。

第二层原因解释的是它为什么越强,写的越烂。这是因为它越强,就越难以理解人类所需要的那些停顿和重复。

心理语言学家的系列研究早就发现过一个著名的规模悖论:大模型的参数量越大、能力越强,它对人类真实阅读停顿时间的预测反而比小模型更差。反倒是人为阉割掉一部分注意力窗口的受限模型,更贴近人类的阅读习惯。

因为人类的大脑是一个工作记忆只有几秒钟的「漏勺」。我们读到第三句话的时候,第一句话的字面信息已经在脑子里消散了,所以我们必须靠作者在句首不断铺设路标和台阶才能接着往下走。

但前沿大模型拥有几乎不随距离衰减的注意力系统,对它自己而言,五百字之前写下的一个概念和当前正在生成的词,在注意力矩阵里是零距离直连的。一个自己永远不会忘词的超级大脑,在生成文本时,根本感受不到给人类读者搭台阶的必要性。

这一点在2026年9月的对AI写作的研究 SlopBench里也得到了验证。研究者对 18 个模型进行了评测,发现在同一个模型家族内部,模型的能力级别越高、定价越贵,宏观篇章的机械感反而越重。

在 Anthropic 家族里,从轻量级的 Claude Haiku 4.5 升级到 Sonnet 5、Opus 4.8,再到顶配旗舰 Claude Fable 5,它的长文僵化指数从 27.4 一路恶化到 32.1,段落起手式重复率从 45.9% 飙升到 65.8%。OpenAI 同样如此,从轻量的 GPT-5.4 Mini 升到旗舰 GPT-5.6 Sol,段落起手式重复率反而从 56.3% 恶化到了 72.3%。

而且大模型还表现出严重的段落节奏扁平化。人类文章有长短段交错的呼吸感,而 AI 写出的每一段字数方差极小,整齐得像一块块水泥砖。所以我们有非常多的skill去试图教AI,写短句,写总结。但它很多时候都拆不到点上。

而且因为缺乏真正的深层逻辑连接,模型只能疯狂滥用破折号。它够短,又够显示出一种解释性的连接。

总而言之,模型确实变聪明了,但它的聪明全花在了把单句拧成高密度钢珠上。至于怎么把十颗钢珠串成一条人类顺着就能摸过去的项链,它根本没学会。

而且目前单纯靠堆算力和刷推理题,这种能力不仅不会自动涌现,反而正在发生倒退。

微观上把句子压成又硬又难啃的五仁月饼,宏观上丢失主次骨架、缺乏连接,以为我们能记得住500字之前的所有细节。

这就是当代大模型越升级、文字越没人味的完整病理链条。

03

Google 做对了什么?

目前这些研究,都是相对比较近的对AI文字能力不足的深度剖析。

但早在这之前,谷歌Gemini模型的文学能力就有口皆碑了。在不知道病理的情况下,他们是使用了什么偏方让模型写出人话的?

如果我们把 Google Research 与 Google DeepMind 在 2025 年 连续发表的五篇技术报告串起来看,这里的方法其实很简单。

因为他们一开始就抓住了重点。在2025年,谷歌为了推进LearnLM这个明星项目,开始努力想让自己的模型在「用户可以理解的水平上,把复杂信息讲明白」。也由此抓住了病根。

根据病根想对策,自然是能打准问题的。

为了做到这一点,他们做了可量化的评估器,在提示词空间做了数百次试验,用在了 LearnLM 上。最后,再把这一系列经验融合进后训练,熔铸进了 Gemini 2.5 Pro 与 Flash 的基座权重里。

用提示词探索有效微调数据集

第一步的探路工程,是 Google Research 于 2025 年 5 月发表的论文《LLM-based Text Simplification and its Effect on User Comprehension and Cognitive Load》中。

当时团队的目标就是开发一种极低信息损耗的文本简化能力,让普通人在阅读生物医学论文(PubMed)、法律文件或金融报告时,既能轻松读懂,又不会因为通俗化而漏掉关键的限制条件与事实细节。

在启动这个项目时,Google 团队做的第一个关键决定,就是彻底抛弃统治了西方世界将近一百年的传统可读性公式,Flesch-Kincaid Grade Level(FKGL)与 SMOG Index。

FKGL 这类公式只做两件极其机械的事,数一个句子里有多少个词(句长),以及数一个单词里有多少个音节(词长)。Google 团队在实测中发现,Flesch-Kincaid 分数的变化与人类真实感受到的阅读理解难度之间相关性很弱。

一旦用这种只看词长句长的死板公式去指导大模型改写,大模型就会为了拿高分而钻空子,比如直接砍掉句子之间表示因果、转折、让步的逻辑连接词和必要的条件从句,并由此把一句逻辑严密的长句生生剁成几句没头没脑的短句。而这正是病理分析中展示出的核心病症。

在当年,谷歌的研究者就认识到,这些句子字面上的句长确实变短了,但读者反而得自己去脑补句子之间的隐含逻辑,阅读的认知负荷不降反升。

为了绕开传统公式的陷阱,Google 团队搭建了一套由四个 Gemini 模型协同运转的双裁判自动评测(Autoeval)+ 提示词自迭代闭环系统。

在这个系统里,负责执行简化的生成模型是轻量快速的 Gemini 1.5 Flash,而在它对面坐着两个严苛的自动裁判模型。

第一个裁判是主观易读性裁判(Readability Autoeval),由超大杯的 Gemini Ultra 担任。 它直接模拟人类读者的直觉感受,对输入文本给出一个 1 到 10 的整数易读性评分。为了让这个裁判的品味与真人一致,团队先让人类评估员对 129 组原文—简化文样本对进行了真实打分,再针对被模型判错的样本通过反馈循环不断迭代 Ultra 的评判指令,直到它能精准捕捉到什么样的句子真正让人类觉得好读。

第二个裁判是原子命题级保真度裁判(Claim-level Fidelity Autoeval),由擅长长链条推理的 Gemini 1.5 Pro 担任。 这是为了防止模型为了通俗而胡删乱改。

它采用了一套分步思维链(Step-by-step CoT)核查机制:首先,把原始专业文本拆解成一条条不可再分的原子事实声明(Atomic Claims),接着,把每一条原子声明逐一映射到改写后的文本片段上,同时揪出改写文本里任何无法映射回原文的额外声明。

最后,按照 3 大类、8 小项错误 进行带权重的精准扣分(方括号内为每处错误的扣分权重):

7. 信息遗漏(Information Loss,衡量完整性 Completeness):整条原子声明丢失 [权重 2]、具体细节或限定度丢失 [权重 1]、微妙语气或内涵丢失 [权重 2];

8. 信息脑补(Information Gain,衡量蕴含性 Entailment):凭空捏造不实信息 [重罚权重 4]、加入跑题废话 [权重 1];

9. 信息扭曲(Distortion,同时破坏完整性与蕴含性):事实性失真 [重罚权重 4]、严重语义偏离 [权重 3]、轻微语义偏离 [权重 1]。

二号裁判把所有查出来的错误按权重相加后再除以 10,使其与一号裁判的 1–10 分易读性得分处于同一量度。每一个候选改写方案的最终总分,就等于「平均易读性得分」减去「平均保真度错误扣分」。

有了这一攻一守两个裁判,团队再派出另一个 Gemini 1.5 Pro 担任提示词优化器(Prompt Refiner)。每一轮迭代,系统在 123 篇高难度样本上跑完改写和双裁判打分后,优化器就会仔细分析那些丢分的失误案例,自动修改给 Gemini 1.5 Flash 的简化指令并挑选最佳的 Few-shot 示范样本。

这个全自动的左右互搏闭环,在服务器里足足迭代了 824 轮,直到得分曲线彻底触顶收敛。

在「既要把主观易读性拉满,又绝不准丢掉任何一个原子命题」的极限挤压下,第 824 轮走出来的模型,自己摸索出了三条极其符合人类心理语言学规律的改写方法论。

第一招是「内嵌同位语随手解释法」。

比如在生物医学文献里,原文讨论的是「肺纤维化合并肺气肿(CPFE)」综合征,一句话里塞满了缩略语、上下肺叶解剖定位和并发肺动脉高压的风险。如果删掉专业术语,二号裁判会判「具体度丢失」,如果原封不动照抄,一号裁判会判「易读性不及格」。经过 824 轮进化后的模型完整保留了 emphysema(肺气肿)和 fibrosis(肺纤维化)等全部核心概念与解剖位置,但在专业词刚出现的紧邻位置,顺手用半句大白话垫上内嵌定义(说明一个是肺泡受损导致呼吸困难,一个是肺组织变厚结疤),同时把挤在一个复合长句里的「病症特征」和「并发症结果」拆成了两句顺着因果链条推进的短句。

第二招是把高密度抽象名词,重新解压回「具体主语 + 动作动词」的微句。连着的第三招是理顺倒装句,

比如在改写IMF的报告时,它先把倒装结构顺直为「谁说了什么」。 其次,它把高密度的抽象名词转成了句子。比如「家庭去杠杆化」这个词被还原成了更口语话的动词名词结构「人们偿还债务」。而「企业与商业地产违约」也同理被还原成了 「企业与房东还不上贷款」。

这恰恰也是第一部分纽约大学论文所指出问题的逆向操作,即把被压缩进名词堆里的动作关系重新释放出来,恢复均匀的信息密度。

最后,在句尾关于失业率 10.1%、5% 和 2014 年的时间节点上,它没有做任何模糊化删减,原子命题保真度拿到了满分。

为了验证这套改写对人类大脑的真实效果,Google 团队随后组织了一场规模比以往同类研究大出一个数量级的随机对照双盲实验(RCT),他们招募了 4,563 名 排除相关专业背景的成年受试者,横跨生物医学、生物学、法律、金融、文学哲学、航空与计算机科学 6 大领域,在「开卷(Open-book,可对照原文答题)」与「闭卷(Closed-book,读完后收走文本凭记忆答题)」等 6 个实验组中,累计收集了 49,582 份 客观阅读理解选择题(MCQ)答案与简化版 NASA-TLX 认知负荷评分。

实验数据表明,阅读简化版文本的受试者,客观题平均准确率显著提升了 3.9 个百分点(在最难的生物医学文献上暴涨了 14.6 个百分点,单题最高提升达 38 个百分点)。

更关键的是,在闭卷测试条件下,尽管所有人的整体准确率因为无法回看原文而下降了约 9%,但阅读简化版文本带来的约 4% 的绝对理解优势依然完好无损地保留了下来。

这说明,这些学生们确实get到了又准又易读的信息。

用后训练把能力内化

在 Simplify这篇论文发表时,那套跑了 824 轮的成果还只是挂载在 Gemini 1.5 Flash 外面的提示词与 Few-shot 工程。

但紧接着,同一批核心负责人主导的 LearnLM 团队走出了更关键的第二步,把这套「降低认知负荷 + 严保命题覆盖率」的能力,通过后训练彻底内化进了 Gemini 2.5 Pro 与 Flash 的基座模型权重里。

在 2025 年 9 月发表的《Towards an AI-Augmented Textbook》中,Google 团队在解释他们如何把复杂的教材改写到不同阅读水平时明确写道,这种在保持事实性与内容覆盖率的前提下适配目标阅读等级的能力被称为 Re-leveling,它「已经是 Gemini 2.5 Pro 核心教育能力的一部分,直接调用基座模型即可完成,无需任何额外微调」。

具体是怎么做的呢?

在24年12月的论文《LearnLM: Improving Gemini for Learning》里,LearnLM先在后训练数据里,参入了见人说人话,见鬼说鬼话的配方。给十岁孩子讲科学、给程序员讲算法、给老外用外语讲历史,所需要的「人话标准」完全不同,甚至互相打架。一旦把模型焊死在谆谆教导的老师人设上,平时用户只想让它干脆利落地写段代码,它也会啰里啰嗦地拉着你互动。

团队干脆抛弃了固定人设,改走「教学级系统指令遵循(Pedagogical Instruction Following)」路线。

他们在准备训练数据时严禁使用笼统模糊的指令(因为实验发现,笼统的指令会让模型在训练中学会直接装聋作哑),每一场训练对话的开头,都必须配上一条专门为这场对话量身定制的、颗粒度极细的系统指令。当你让它干活写代码时,它干脆利落。一旦语境切换到需要解释复杂问题,对应的认知减负开关就会被瞬间推起。

之后,就是重写强化学习的奖励规则。

在25年5月发布的论文《Evaluating Gemini in an Arena for Learning》中,LearnLM 团队发现,实验里发现想改掉模型不说人话的毛病,光靠喂上面那篇论文产生的示范数据(SFT)效果还不够,真正起决定性作用的是强化学习(RLHF)阶段。

传统的强化学习奖励模型(Reward Model)中,一般谁写得长、谁堆的专业词多,它就给谁高分。为了把这个偏心眼的裁判彻底换掉,Google DeepMind 联合教育科学家制定了一套包含 5 大原则、25 项细则的严苛量表(Rubric),请来几百名有硕士以上学位和多年教学经验的专家,对多轮长对话进行逐轮打分,训练出了全新的奖励模型。

论文里详细记录了这套Rubric。其中有一个原则,就是管理认知负荷(Manages Cognitive Load)。它下面埋了 9 条小规则。除了强制要求「控制单次回复长度」、「把大段信息拆成容易下咽的小块(Manageable chunks)」、「主动用故事和日常类比解释抽象概念」之外,它还专门立下了一条针对宏观篇章断裂的死规矩,「信息顺序必须建立在前面刚讲明白的旧概念之上,层层递进」。

当别的模型在强化学习里因为「把单句压得越密、整篇写得越满」而拿高分时, Gemini 则必须做到先接住读者的旧知、再拆成小块递出新知、绝不一股脑对概念,才能拿到高分。

之后,他们把这套数据直接安排进了 Gemini 2.5 的后训练主干。包括第一篇论文里这套认知减负的示范数据(SFT)、新的25 维奖励模型(RM)和对应的强化学习任务(RL),都被直接按比例倒进 Gemini 2.5 Pro 与 Flash 的主干后训练池子里,跟数学、代码、逻辑推理放在一口锅里做同步混训(Co-training)。

结果着不仅没有拉低模型的硬核推理分,反而因为逼着模型学会了把复杂思考拆成清晰、无跳跃的步骤,顺带把主模型的理工科内功也往上推了一截。

为了检验这套内功到底成色如何,团队还攒了一个大局,请来 189 名教育界行家扮演不同水平的学生,在完全盲测的情况下,分别与 Gemini 2.5 Pro、OpenAI o3、Claude 3.7 Sonnet、ChatGPT-4o 展开十轮以上的深度对话,随后再由 206 名独立专家对着完整的聊天记录打分。

在附录公开的数千条专家盲评原话里,针对 OpenAI o3、GPT-4o 和 Claude 3.7 Sonnet 出现频率最高的差评词,就是刺眼的 Info-Dumping(信息倾倒) 和 Massive walls of text(令人窒息的文字墙)。

一位在盲测中扮演中学生的成年专家,在先后体验了 OpenAI 的旗舰推理模型 o3 和 Gemini 2.5 Pro 之后,直言,「直到遇到了第二个模型(Gemini 2.5 Pro),我才意识到第一个模型(OpenAI o3)有多吓人。第一个模型上来就试图把一个十几岁的孩子当成专家来轰炸,满屏令人窒息的复杂推导,连我一个成年人读起来都痛苦万分、一头雾水。而第二个模型(Gemini 2.5 Pro)把所有硬核概念都拆成了适合少年的颗粒度,像搭小台阶一样(baby steps)一步步带着我走,体贴得让人惊叹。」

最终,Gemini 2.5 Pro 在专家眼里拿下了高达 73.2% 的总体胜率,对 Claude 3.7 Sonnet 的胜率是 71.3%,对 OpenAI o3 的胜率更是高达 74.2%。

而在专门考核「把维基百科和 MIT 科技新闻改写给不同年级读者、且不漏掉原意」的 240 项硬核盲测(Text Re-levelling)中,Gemini 2.5 Pro 在保住 94% 原文命题覆盖率的同时,阅读难度控制误差只有 0.99 个年级,成为全场唯一误差小于 1 个年级的模型(同期 OpenAI o3 的误差高达 2.44 个年级,Claude 3.7 误差达 2.11 个年级)。

而在25年10月,LearnLM的论文《Towards an AI-Augmented Textbook》中,Google 更进一步将这套基座能力与认知心理学的「双重编码理论(Dual Coding Theory, Paivio 1991)」结合起来。

当纯文字简化触及人类单通道工作记忆的极限时,系统会先调用 Gemini 2.5 Pro 的内置 Re-leveling 能力降低阅读年级,再将抽象概念局部替换为读者熟悉的个人兴趣领域。

比如如用足球转会市场解释经济学价格机制,激活读者已有的先验知识网络以降低新概念编码成本。

最后自动将长文中的线性序列与层级结构抽离为交互式时间线、记忆口诀与可缩放的思维导图,在针对芝加哥高中生的随机对照实验中显著提升了 3 天后的远期知识留存率。

可以说,25年的谷歌Gemini,在让AI产出让人读懂的句子上,早就已经遥遥领先于当下的其他前沿模型了。

04

2026,让AI从底层学会说人话

LearnLM已经在25年内给我们跑完了一套完整的「说人话」后训练循环,并且抓住了最核心的矛盾。

甚至他们自己可能都觉得这个问题已经解决的差不多了,因此在26年的研究中,更多投入在研究「AI 辅导在真实课堂里,究竟能让学生学会多少」这个落地课题上了。

但其实即使是Gemini 4 Argon,其叙事也远没有达到完美。比如这篇文章,就是Gemini 4 Argon与我共创,但即使提供给了它详细大纲,我依然不得不调整段落叙事顺序、重构逻辑、丰富语言表达,删除啰嗦语句。

当然,如果让我用GPT 6 Astra写的话,这个过程可能需要拉长2倍以上。所以它确实写的很好了。

所以我求求你们OpenAI,学一下吧。

当然这也意味着,写人话这件事上依然有的提升。

在26年的推进路上,第一个目标就是无Rubric后训练。因为Rubric本身肯定无法做到完全完美,而且有的公司也凑不出这么多专家来写它(或者不愿意出钱)。

所以我们能不能从更深层的信息表达逻辑层面,把「说人话」训练成一种结构性的原理?

在近期,研究者们开始尝试直接把我们在第一、二部分提到的两大病理诊断理论,心理语言学的「均匀信息密度(UID)」与篇章语言学的「修辞结构理论(RST)」,转化成了无需人工标注的算法约束,分别从微观句子和宏观篇章两头锁死了「反人类文风」。

微观解药,给句子的信息装上减震器

第一项研究来自南方科技大学李永源与徐杨团队于 2026 年 10 月发表的《Uniform Information Density-Based Preference Optimization》。这篇工作直接针对前文纽约大学论文诊断出的「局部信息密度剧烈抖动与句法过度压缩」下刀。

为什么现有的偏好优化算法(比如 DPO,以及它的变种 SimPO)训出来的模型容易写出「句法压缩饼干」?

我们看一下 SimPO 的核心原理就明白了。SimPO 在判断一条回复好不好时,计算的是整条回复里所有 Token 对数概率的算术平均值,并以此作为隐式奖励(Implicit Reward)。

只考核「整句话的平均概率」,在心理语言学上有一个致命漏洞,它完全看不见句子内部的局部剧烈波动。这就好比考核一个司机的车技只看全程平均车速是不是 60 公里/小时,至于司机在路上是不是前一秒猛踩油门飙到 120、后一秒又急刹车降到 0,平均分根本反映不出来。

结果模型在强化学习压力下,为了在局部塞进高密度信息,频繁制造局部的「惊奇度尖峰(Surprisal Spikes)」,把读者晃得头晕眼花。

可如果为了求稳,直接去惩罚整篇回答里所有 Token 概率的总体方差(也就是逼着模型从第一个字到第一千个字,每个词的信息量都像尺子量出来一样绝对平均),模型就会退化成死水一潭的「车轱辘话」。

南科大团队在 UIDPO 中设计了一个双向约束机制,局部严禁急刹急停(惩罚局部二阶差分),全局鼓励跌宕起伏(奖励全局标准差)。

具体来说,他们在 SimPO 原本的「平均 Token 对数概率」隐式奖励基础上,直接用模型自身的概率分布加了两个正则项。

第一项叫作「局部信息平滑惩罚项」。它不再孤立地看单个词,而是以滑动窗口检查句子中任意相邻的三个连续 Token,计算它们对数概率的二阶差分(即第 kk 个词与第 k+2k+2 个词的对数概率之和,减去中间第 k+1k+1 个词对数概率的两倍)。

二阶差分的值,就是这三个词的信息量变化率。惩罚二阶差分的绝对值过高,就相当于给句子的信息流装上了一套液压减震器,它完全允许文章的信息密度像上山或下山的缓坡一样分段平滑升降,但严厉禁止相邻两三个词之间出现锯齿状的剧烈折线跳变。

一旦模型想在某个位置删掉缓冲虚词、突然甩出一个极难预测的高密度复合词组,导致局部二阶差分瞬间飙升,就会立刻遭到损失函数的重罚。

第二项叫作「全局信息丰富度奖励项」,直接计算整条回复所有 Token 对数概率的全局标准差,并将其作为正向奖励加进目标函数里。

这就保证了整篇文章在宏观尺度上依然拥有充沛的信息张力与话题转换空间,绝不会因为局部平滑而变得单调乏味。

在训练完成后,当作者把模型拉去跑心理语言学经典的 Switchboard 英语宾语从句测试集(复现 Jaeger 2010 的可选引导词 that 省略实验)时,发现标准 SimPO 模型严重偏离了自然的句法缓冲分布,而 UIDPO 模型为了压平局部二阶差分的剧烈跳变,竟然无师自通地恢复了人类的心理语言学本能。Source:http://weixin.sogou.com/weixin?type=2&query=%E8%85%BE%E8%AE%AF%E7%A7%91%E6%8A%80+AI%20%E5%86%99%E7%9A%84%E4%B8%9C%E8%A5%BF%E8%B6%8A%E6%9D%A5%E8%B6%8A%E9%9A%BE%E6%87%82%EF%BC%8CGemini%20%E6%98%AF%E6%80%8E%E4%B9%88%E5%81%9A%E5%88%B0%E3%80%8C%E8%AF%B4%E4%BA%BA%E8%AF%9D%E3%80%8D%E7%9A%84%EF%BC%9F%EF%BD%9CHao%E5%A5%BD%E8%81%8A%E8%B6%8B%E5%8A%BF

Related posts

实测 iPhone 国行 AI:有亮点有槽点,还有一个惊喜点

实测 iPhone 国行 AI:有亮点有槽点,还有一个惊喜点

爱范儿
【美国中期选举】众院民主党领袖有信心重夺众院控制权

【美国中期选举】众院民主党领袖有信心重夺众院控制权

联合早报》-国际-即时
民主党赢得美国会两院 学者:中美战略稳定关系或面临考验

民主党赢得美国会两院 学者:中美战略稳定关系或面临考验

联合早报》-中港台-即时
AI硬件与半导体板块大幅下挫,Lumentum跌超11%

AI硬件与半导体板块大幅下挫,Lumentum跌超11%

界面新闻
华为小艺 Work 率先上线 openPangu-2.1-Pro 模型,主打“鸿蒙任务增强”

华为小艺 Work 率先上线 openPangu-2.1-Pro 模型,主打“鸿蒙任务增强”

IT之家
小程序成长计划上新:10 亿 Token 现在能调 DeepSeek-v4.1-flash了

小程序成长计划上新:10 亿 Token 现在能调 DeepSeek-v4.1-flash了

掘金