尧图网络 高端网站定制 · 原创设计
免费咨询热线
400-888-6620
免费获取方案
别再“多喂信息“了——你以为的认真,正在让 AI 变蠢
导语很多人有个本能给 AI 喂得越多越安心。但 Anthropic 的研究告诉我们这恰恰是 AI 在长任务后半程犯迷糊的元凶。你有没有过这种体验一个长任务你把所有可能相关的资料、历史对话、背景说明一股脑全塞进去生怕漏了哪条它就答偏。结果呢对话拉长到后半程它反而开始犯迷糊——前面说好的约束忘了之前否掉的方案又拐回来了明明资料就在上下文里它却像没看见一样。你以为问题是提示词没写好于是改了又改加了更多规则、更多请注意。越改越长越长越糊。Anthropic 给这种现象起了个名字context rot上下文腐化。腐化的不是信息是用信息的能力请注意腐化这个词的精确含义——这非常重要信息没有消失它还好好待在上下文里。腐化的是模型用它的可靠性。这不是存储失败是调取失败。你的上下文窗口明明还空着一大半信息明明一个字没少但模型就是想不起来该用哪条。这不是容量问题是注意力问题。所有模型都有这个毛病只是退化得平缓些或陡些没有谁能幸免。为什么会这样两层原因第一层注意力是有预算的。就像人的工作记忆容量有限模型也有一份注意力预算。你每往上下文里加一个 token就从这份预算里扣掉一点。所以每个 token 都有成本——问题从来不是这条信息相不相关而是它带来的价值够不够抵它消耗的注意力。你塞进去的那些也许用得上的资料大多数时候带来的价值抵不上它消耗的注意力预算。净亏。第二层架构天生如此。现在的大模型基于 Transformer它的特点是每个 token 都要去关注其他所有 token。于是 n 个 token就要处理大约 n² 量级的两两关系。token 一多模型分给每条关系的精细度就被摊薄了。这就是覆盖更多内容和保持注意力集中之间天然的矛盾。再加上训练数据里短序列比长序列常见得多模型对跨越整个长上下文的远距离依赖练得就少。“等窗口更大就好了”想多了有人指望技术进步能解决——位置编码插值这类技术确实能让模型吃下更长的序列但文章泼了盆冷水代价是模型对 token 位置的理解会有损耗。性能下降是渐进的不是到某个长度突然崩掉。它会一边语言依旧流畅一边悄悄把事实召回和长程推理的精度往下调。这种温水煮青蛙式的退化恰恰最难发现——因为输出看起来依然通顺、依然自信只是悄悄地答错了。关键认知在可预见的将来任何尺寸的窗口都逃不过上下文污染和相关性问题只要你追求最强表现。那该怎么办把这句话刻进脑子上下文是一种珍贵而有限的资源边际收益递减。衡量它的标准不是能装下多少而是能可靠地用上多少。具体来说三件事追求最小充分而非最全。目标是能最大化正确结果概率的、最小的高信号 token 集合。少了会跑偏多了制造冗余。能现找的就别提前全喂。上下文里只放轻量引用文件路径、查询、链接运行时按需加载。长任务用三板斧压缩、结构化笔记、子 Agent 架构。这套思路不只对 AI 成立文章最后那句特别打动我。我们自己也管理知识、管理注意力——真正的问题从来不是我知道得够不够多而是此刻我有没有把有限的注意力放在最值得处理的那件事上。给机器做上下文工程读着读着像是在提醒我们给自己也做一次。小结真正厉害的 Agent不是历史记得最全的那个而是每一步都只让模型看见此刻最该看见的东西的那个。从今天起别再无脑多喂了——你以为的认真可能正是让 AI 变蠢的原因。
RELATED

相关推荐

矩阵遍历算法:面试必备的四种范式与优化技巧

矩阵遍历算法:面试必备的四种范式与优化技巧

1. 矩阵遍历在算法面试中的核心地位 作为算法面试中最基础也最高频的考察点之一,矩阵遍历能力直接决定了候选人能否顺利解决二维数组相关的各类变种题目。我在面试候选人时发现,超过60%的数组类题目最终都会转化为某种形式的矩阵遍历问题。比如经典的岛屿…

📅 2026/10/21 8:09:10
新手必看:示波器从开箱到实战测量PWM波全指南

新手必看:示波器从开箱到实战测量PWM波全指南

1. 从“一脸懵”到“心里有谱”:新手示波器开箱指南 第一次把示波器从箱子里搬出来,面对前面板密密麻麻的旋钮、按钮和一堆探头线,是不是感觉头都大了?别慌,这种感觉每个电子工程师、硬件爱好者甚至维修师傅都经历过。…

📅 2026/10/21 8:09:36
嵌入式开发避坑指南:从内存管理到并发编程的七项核心实践

嵌入式开发避坑指南:从内存管理到并发编程的七项核心实践

1. 项目概述:嵌入式开发的“七宗罪”与避坑指南 干了十几年嵌入式,从8位单片机玩到多核Cortex-A,代码写了上百万行,板子焊了不计其数,也踩遍了能踩的坑。今天不聊高深算法,也不讲前沿框架,就想跟…

📅 2026/10/7 6:47:40
MORE NEWS

更多资讯

📰

PostgreSQL 查询全部函数信息:从 pg_proc 到综合模板

1. 为什么需要把数据库里的函数全部查出来:几个真实场景先讲个实际例子。我接手过一个跑了三年的业务系统,里面几十个服务共用一个 PostgreSQL 实例。某天要做数据迁移前的合规盘点,DBA 要求把所有自定义函数、触发器和存储过程全部登记造册。…

📰

汽车推荐分析系统全链路实现:爬虫、线性回归与Flask可视化

本科阶段的计算机毕业设计里,“汽车推荐分析系统”几乎是长盛不衰的经典选题。但很多同学做出来的版本,往往停留在“爬了几百条数据 画两张图表 套一个线性回归模型”的层面,答辩时最怕老师追问两类问题:一是“你这些数据怎么来…

📰

平衡膳食指南文档解读:五大类食物与三大营养素供能比落地执行

简介:这是一份面向普通大众、营养学习者及健康管理从业者的科普文档,围绕平衡膳食的内涵、重要性与现代实践展开,帮助读者理解如何通过合理搭配食物满足人体近50种营养素的全面需求。文档共1个doc文件,压缩包约21KB,内…

📰

PL/0编译器添加运算符:词法、语法到P-code虚拟机的完整改动指南

简介:编译原理课程设计资料,面向计算机专业本科生,围绕PL/0编译器的修改扩充展开,重点集中在运算符扩展和循环语句实现。内容包含基本要求与选做内容:基本部分完成、-赋值运算以及Pascal FOR语句的TO/DOWNTO两种形式&a…

📰

arping 实战:链路层定位主机与回读 MAC 地址

简介:这是一份面向网络管理员、运维工程师及网络编程学习者的 arping 工具源码资源包,聚焦以太网环境下基于 ARP 协议探测主机在线状态并获取其 MAC 地址这一典型场景。资源共 19 个文件,以 cpp 与 h 源文件为主,辅以 vcxproj、vc…

📰

Python自然语言处理入门:从分词到深度学习完整指南

简介:这份资源面向希望系统掌握中文自然语言处理的Python开发者与初学者,围绕分词、词性标注、命名实体识别、情感分析、主题建模及深度学习模型等核心主题,提供从基础概念到实战案例的完整学习路径。压缩包共42个文件,约53.58MB&…

TODAY

今日更新

THIS WEEK

本周精选

THIS MONTH

本月热门

读完文章,想聊聊您的网站?

告诉我们您的行业与需求,资深顾问一对一梳理方案与报价,全程免费。

📞 💬