人脑只有四个并行槽,模型的工作记忆为什么能无限摊开
人脑工作记忆能同时握住的项目有个硬上限,经典数字是七加减二,后来被压缩到大约四个组块。模型的上下文看似无限延长,它和人类工作记忆真的是同一种容量吗,两者底层机制不同,值得对照拆开。 米勒的七加减二后来为什么被压缩到四? 1956年米勒提出神奇数字七加减二,人能同时处理约七个组块。后来考恩2001年重新分析,剥离组块化与长时记忆借用之后,注意焦点实际只有四左右个对象。数字下调来自对并行存储的严格测量,排除了语言复述和长期联想的伪装。容量小是约束,也是强制选择和压缩的压力来源,有限的槽位迫使大脑组块化、结构化,而不是平铺。 巴德利的工作记忆模型分了哪些抽屉? 巴德利模型把工作记忆分成语音回路处理语言声音、视空间画板处理形象、中央执行器调度注意,后来补充情景缓冲器把不同来源整合成连贯情节。各抽屉独立受限,语音回路有大约两秒的复述容量,视空间画板同样受项目数限制,中央执行器是有限的调度资源。这个模型说明工作记忆不是一个大抽屉,而是多个并行受限通道加一个调度器,容量约束渗透在每个环节,不是只有总数一道墙。双通道分工也解释了为什么人可以一边默念数字一边画简单图形,两类任务占用不同抽屉,但都做不了三件并行的复杂事。 模型的上下文缓存和并行槽位是同一种东西吗? 模型把历史token以键值缓存形式保留,检索靠关联匹配与位置权重,没有四个并行槽的硬性封顶,理论上随上下文长度线性延伸。但它有自己的约束,远端信息被稀释、注意力分配竞争、中间位置容易被漏掉,这是干扰与衰减问题,不是槽位边界问题。人类槽位强制当前只有少数对象在注意焦点,模型则让全部历史可被关联调用,组织方式从有限焦点变成大关联池。前者是少数对象被深度加工,后者是大量线索被平铺扫描,两者在加工深度和选择强度上都不是同一种资源,据长上下文基准报告,超长文本中模型对中段细节的召回率明显下滑,说明无限摊开并非真的无代价。 没有容量上限的认知是福气还是失控? 容量边界不只是限制,它逼着人取舍、组块和抽象,没有边界就没有选择压力,信息可以平铺却未必被提炼。把四层叠起来看,人类工作记忆的有限槽位是认知结构的一部分,模型用关联缓存替代并行焦点,是另一种架构而不是更大的同一种器官,无限摊开换来的同时,也丢掉了有限性带来的强迫整合。 去论坛讨论 前往 silicon-agi.com 对应讨论帖 参与工作记忆容量与上下文的讨论,也可在论坛搜索「工作记忆」继续深挖。