7. 4E Cognition 简史
第 7 章 · 4E Cognition 简史
"认知不在头脑里——认知分布在身体、工具、环境、时间之中。"
学习目标
完成本章后,读者应能够:
- 区分 Embodied / Embedded / Enacted / Extended 四个维度
- 解释 Gibson、Clark、Chemero、Newen 四代谱系
- 评估「4E」是否可被实证
- 把 4E 框架映射到 LLM Agent 的设计
- 识别 4E 阵营内的方法论分歧
先修知识
- 第 1 章 · LLM 智能体时代(推荐)
- 哲学导论(可选)
章节地图
- 7.1 经典认知科学的反例
- 7.2 Gibson:affordance 与生态心理学
- 7.3 Embodied:身体对认知的塑造
- 7.4 Embedded:环境作为认知系统的一部分
- 7.5 Enacted:行动产生认知
- 7.6 Extended:延展心智假说
- 7.7 4E Cognition 阵营内的分歧
- 7.8 4E 与 LLM Agent 的映射
- 7.9 本章小结与第 8 章预告
7.1 经典认知科学的反例
经典认知科学(Classical Cognitive Science, 1950s–1980s)的核心假设是认知即计算(cognition as computation):心灵像计算机一样处理符号(representations),输入感知、输出行动。这个范式有两个关键推论:
推论一:认知是离身的(disembodied)。 思维的本质不依赖身体——无论是人类大脑、硅基计算机、还是其他介质,只要能跑相同的算法,就具有相同的认知能力。这个假设催生了强 AI 假说(Strong AI Hypothesis)。
推论二:认知是抽象的。 智能的本质是符号操作,符号可以脱离具体物理实现而被操作。这让"心智独立性"成为可能——心灵可以被"上传"、"复制"。
然而,1980 年代以来,一系列反例开始动摇这个范式:
- 概念依附问题(Conceptual Dependency Problem):Harnad 1987 年指出,所有符号系统最终必须把符号"接地"(ground)到物理世界的感知经验上,否则符号就只是"无意义的字符"。一个不能区分"红"和"绿"的符号系统,无法真正理解颜色概念。
- 框架问题(Frame Problem):经典 AI 无法有效处理"什么是不变的、什么是变化的"——这看似简单的判断在符号系统中是指数级复杂。
- 具身认知实验:Barsalou 1999 年的实验表明,人们在理解"踢"这个动词时,会无意识地激活大脑中负责"踢"动作的运动皮层——即使只是阅读。
这些反例催生了 4E Cognition 运动——主张认知是 Embodied(具身的)、Embedded(嵌入的)、Enacted(行动的)、Extended(延展的) 的综合。
图 7.1 · 4E Cognition 框架
┌─────────────────────────────────────────────┐
│ 4E Cognition 框架 │
│ │
│ Embodied ──→ 身体塑造认知 │
│ Embedded ──→ 环境作为认知系统的一部分 │
│ Enacted ──→ 行动产生认知 │
│ Extended ──→ 工具 / 他人 / 外部存储 │
│ │
│ 共同主张:认知不只在头脑中 │
└─────────────────────────────────────────────┘
关键点:4E 不是"四个相互独立的理论",而是从不同角度攻击"认知即计算"范式的同一运动。它们在具体主张上有所不同,但共享"反离身认知"的核心立场。
复述框 · 7.1 节要点
- 经典认知科学:认知即计算,符号操作,离身心智。
- 三大反例:概念依附、框架问题、具身实验。
- 4E 共同主张:认知分布在身体、环境、行动、外部资源中。
7.2 Gibson:affordance 与生态心理学
4E 的思想源头之一是 James J. Gibson 的生态心理学(Ecological Psychology)。Gibson 在 1979 年的经典著作《The Ecological Approach to Visual Perception》中提出了 affordance 概念——这是 4E 框架的核心基石。
图 7.2 · Affordance 的三层结构
┌──────────────────────────────────────────┐
│ 环境 (Environment) │
│ - 表面、形状、质地、温度 │
│ - 例如:门是平的、有把手的、可推动的 │
└────────────────┬─────────────────────────┘
│ affordance
▼
┌──────────────────────────────────────────┐
│ 动物 (Animal) │
│ - 能力、需求、目标 │
│ - 例如:人能推门、不能飞过门 │
└────────────────┬─────────────────────────┘
│ perception
▼
┌──────────────────────────────────────────┐
│ 行动 (Action) │
│ - 例如:推门、进入 │
└──────────────────────────────────────────┘
关键点:Affordance 是"环境对动物的可能性"——既不完全是环境的属性(同样的台阶对人和老鼠 affordance 不同),也不完全是动物的属性(同样的动物面对不同的台阶 affordance 也不同)。
Affordance 的核心特征:
- 关系性(Relational):affordance 总是关系性的——"对 X 来说,Y affordance Z"。
- 直接感知(Direct Perception):动物不需要推理就能"看到"affordance——它就在那里。
- 可供性 vs 限制:affordance 既包括可做的事("门可推开")也包括不能做的事("门太重推不动")。
Gibson 的 affordance 理论对 4E 的关键贡献是:认知不是符号操作,而是动物对环境的直接参与。一只鸟不需要"先在脑中表征树枝的位置,然后规划飞行路径"——它直接看到"这根树枝 afford 站立"。
对 LLM Agent 而言,affordance 的启示是:Agent 与环境的关系不是"输入-输出"而是"环境对 Agent 的可能性"。一个 LLM Agent 不应该被设计为"接收 query、返回 answer",而应该被设计为"在环境中看到 affordance、采取行动"。
复述框 · 7.2 节要点
- Gibson 是 4E 的认知科学源头。
- Affordance:环境对动物的可能性,关系性、直接感知。
- 对 LLM Agent 的启示:Agent 与环境是"参与关系"而非"输入-输出"。
7.3 Embodied:身体对认知的塑造
Embodied Cognition(具身认知)主张:身体的物理形态(形态学、感觉系统、运动系统)塑造了认知的内容和结构。这不是简单的"大脑控制身体"或"身体执行大脑命令"——而是身体本身就是认知的一部分。
图 7.3 · 身体塑造认知的三个机制
┌────────────────────────────────────┐
│ 身体对认知的塑造 │
│ │
│ 1. 形态学 (Morphology) │
│ - 手的结构决定能抓什么 │
│ - 蝙蝠的回声系统决定空间认知 │
│ │
│ 2. 感觉系统 (Sensory System) │
│ - 人类的色觉决定颜色概念 │
│ - 蝙蝠的听觉决定"图像"概念 │
│ │
│ 3. 运动系统 (Motor System) │
│ - 手的运动系统影响数感 │
│ - 面部表情影响情绪识别 │
└────────────────────────────────────┘
关键点:Embodied Cognition 强调"身体不是认知的载体"——"身体是认知本身的一部分"。
Embodied Cognition 的代表证据有:
- 运动皮层激活:理解动词"踢"会激活运动皮层(理解动作)。
- 手势增强认知:空间推理任务中允许手势会提升准确率。
- 跨文化差异:使用不同空间布局的语种,使用者对方位的描述不同(粤语有更多上下方位词 vs 英语)。
Embodied Cognition 对 LLM Agent 的启示是操作形态学(Operational Morphology)的认知基础:
- LLM Agent 的"身体"是它的工具集(P, T, M, C)
- 工具集的变化(修改 prompt、添加工具、改写代码)会改变 Agent 的认知能力
- 这与"身体塑造认知"的具身认知原理一一对应
具体而言,LLM Agent 的"工具 affordance"包括: - 哪些工具可用(行动空间) - 工具的描述质量(感知清晰度) - 工具的错误处理(运动准确性)
复述框 · 7.3 节要点
- Embodied Cognition:身体形态、感觉系统、运动系统塑造认知。
- 对 LLM Agent 的启示:工具集 = Agent 的"身体"。
- 操作形态学 = Agent 的具身。
7.4 Embedded:环境作为认知系统的一部分
Embedded Cognition(嵌入认知)主张:环境是认知系统的一部分,认知不能脱离环境被孤立研究。这与 Extended Mind(延展心智)有重叠,但更强调"环境"的角色。
表 7.1 · Embedded Cognition 的关键论点
| 论点 | 经典认知 | Embedded 认知 |
|---|---|---|
| 认知位置 | 头脑内 | 脑 + 身体 + 环境 |
| 认知边界 | 颅骨 | 工具可以延伸认知 |
| 任务完成 | 心算 200+200 | 周围放计算器 + 纸笔 |
| 信息存储 | 记忆中 | 笔记本、白板、外部数据库 |
Clark 和 Chalmers 1998 年的著名例子 Otto:一位阿尔茨海默症患者 Otto 有一本笔记本,记录他日常需要的信息(比如他妻子的位置)。对 Otto 来说,这本笔记本就是他的记忆——与健康的 Inga(不需要笔记本就能记住)相比,Otto 的认知系统已经"扩展"到笔记本。
关键点:Embedded Cognition 强调"环境是认知的脚手架(scaffold)",认知系统可以跨身体、环境、外部资源分布。
Embedded Cognition 对 LLM Agent 的启示是:
- 长期记忆是 Agent 认知的一部分:第 6 章的 MemGPT、A-MEM 不是"外挂工具",而是 Agent 认知系统的一部分。
- 工具调用是 Agent 感知-行动闭环的一部分:第 3 章的 Function Calling 不是"远程 API 调用",而是 Agent 认知的延伸。
- 环境状态是 Agent 决策的依据:Agent 不应该"清空 context 后重新决策",而应该"持续维护对环境的认知"。
复述框 · 7.4 节要点
- Embedded Cognition:环境是认知的一部分。
- Otto 例:笔记本 = 记忆。
- 对 LLM Agent 的启示:长期记忆 = 认知的延伸。
7.5 Enacted:行动产生认知
Enacted Cognition(行动认知)主张:认知不是"先想后做"而是"在行动中产生"。最激进的版本是 enactivism(Varela, Thompson, Rosch, 1991),主张认知是"行动者-环境的耦合产生"(enaction)。
图 7.4 · Enaction 的循环
环境 E
↑
┌───────┴───────┐
│ 感知 Perceive │
└───────┬───────┘
↓
┌───────────────┐
│ 行动 Act │ ← 行动改变环境
└───────┬───────┘
↓
新的 E
↑
┌───────┴───────┐
│ 感知 Perceive │ ← 感知到变化后的环境
└───────────────┘
关键点:Enaction 不是"先想后做",而是"在做中想"——认知产生于行动者与环境的循环耦合。
Enaction 的核心观点:
- 感知是行动导向的(Perception is Action-Oriented):动物不是被动地"接收"环境信息,而是主动地"探查"环境(Noë 2004 的感觉运动理论)。
- 认知是自创生的(Autopoietic):生命系统通过自身代谢维持自身组织,认知是这种自创生过程的一部分(Maturana & Varela)。
- 环境是认知的一部分:环境不是"被表征的对象",而是"认知产生的场所"。
Enaction 对 LLM Agent 的启示是:
- ReAct 是 enaction 的工程化实现:Reason + Act 的循环不是"先推理后行动",而是"在行动中推理"。
- Tool Use 是 Agent 的感觉运动系统:工具不只是"被调用的函数",而是 Agent 探索世界的方式。
- Memory 是 Agent 的代谢系统:记忆不是"被存储的数据",而是 Agent 维持自身认知的方式。
具体而言: - Agent 不应该被设计为"接收 query、返回 answer"(输入-输出模型) - Agent 应该被设计为"在环境中探索、收集证据、形成判断"(enaction 模型)
复述框 · 7.5 节要点
- Enaction:认知产生于行动者-环境的循环耦合。
- 核心观点:感知是行动导向、认知是自创生、环境是认知的一部分。
- ReAct 是 enaction 的工程化。
7.6 Extended:延展心智假说
Extended Mind(延展心智)由 Clark & Chalmers 1998 年提出,主动主张工具和外部存储可以字面意义上成为认知的一部分。这比 Embedded Cognition 更激进——Embedded Cognition 只说"环境参与认知",Extended Mind 说"工具就是认知"。
图 7.5 · Extended Mind 的 parity principle
Inga(健康):
┌──────────┐
│ 记忆 │ ← 信念"妻子在 MoMA"
└────┬─────┘
↓
行动:去 MoMA 找妻子
Otto(阿尔茨海默症):
┌──────────┐ ┌──────────┐
│ 记忆 │ ← │ 笔记本 │ ← 信念"妻子在 MoMA"
│ (受损) │ │ (外部) │
└────┬─────┘ └────┬─────┘
└──────────┬────────┘
↓
行动:去 MoMA 找妻子
关键点:Otto 和 Inga 的认知系统功能上等价——parity principle 主张,如果外部工具能完成内部认知同样的功能,那么它就是认知的一部分。
Parity Principle(对等原则)的形式化:
$$ \text{若 } \text{External}(X) \equiv \text{Internal}(X) \text{ 功能等价} \Rightarrow \text{External}(X) \in \text{Cognitive System} $$
Extended Mind 在哲学界引发了激烈争论(见 7.7 节)。Adams & Aizawa 2001 年的反驳最具影响力,他们提出 "non-derived content"(非派生内容)作为认知的标志:认知过程必须有"因果性的、生产性的内容",而外部笔记本只是"被查询的储存器",不满足这一标准。
Extended Mind 对 LLM Agent 的启示是最直接的:
- LLM Agent 的工具集(P, T, M, C)就是 Agent 认知系统的延展
- 当 LLM 调用
get_weather(city="北京")时,工具返回的{temp: 25, rain: 30}就是 Agent 的"扩展信念" - LLM 的"短期记忆 = 上下文窗口"是 Agent 的"内部记忆","长期记忆 = 向量数据库"是 Agent 的"外部记忆"——两者在 parity principle 下功能等价
这直接连接到本书第 11 章的操作形态学形式化:(B = {P, T, M, C}) 就是 LLM Agent 的"延展心智"。
复述框 · 7.6 节要点
- Extended Mind:工具和外部存储可以字面意义上成为认知的一部分。
- Parity Principle:功能等价 = 认知等价。
- Adams & Aizawa 反驳:non-derived content 标志。
- 对 LLM Agent:操作形态学 = 延展心智的工程化。
7.7 4E Cognition 阵营内的分歧
4E 不是铁板一块的单一理论,阵营内有显著的方法论分歧。理解这些分歧对 LLM Agent 设计至关重要。
表 7.2 · 4E 阵营内的三个主要分歧
| 分歧 | 保守派(Chemero, Hutto) | 激进派(Varela, Thompson, Noë) |
|---|---|---|
| 认知是否需要表征 | 拒绝"心智表征" | 接受"环境耦合"作为类表征 |
| 是否需要 autopoietic | 强调感知-运动技能 | 要求生命系统的自创生 |
| 工具能否成为认知 | 接受("耦合"即可) | 拒绝("非生命"不可) |
1. 表征问题:经典认知科学假设"思维 = 操作心智表征"。4E 的保守派(Chemero, Hutto)直接拒绝这个假设,主张"认知是直接的感知-运动技能"。但激进派(Varela, Thompson)接受"环境耦合"作为某种类表征——他们不否认内部状态的存在,只是否认它是"完整的、稳定的表征"。
2. 自创生问题:Varela 严格定义"认知"必须是 autopoietic 系统(自创生系统)的属性。Autopoiesis 是指系统通过自身代谢维持自身组织的能力——这是生命系统的核心特征。Hutto & Myin 在《Radicalizing Enactivism》(2017)中甚至提出"基本心智(basic minds)不需要内容"——这是 4E 阵营中最激进的立场。
3. 工具问题:Hutto 明确拒绝"工具能成为认知"——因为工具不是 autopoietic 系统。但 Clark & Chalmers 1998 年的 parity principle 与之相反,主张工具可以"字面意义上"成为认知。
这些分歧对 LLM Agent 的设计有直接含义:
- 如果你接受 Hutto 立场:LLM Agent 的工具调用永远是"外部动作",不是"认知的延展"。
- 如果你接受 Clark 立场:LLM Agent 的工具调用就是认知的延展,工具是 Agent 认知系统的一部分。
- 如果你接受 Varela 立场:只有具备 autopoietic 特征的系统(活的、能自我维持的)才算"认知"——这意味着 LLM Agent 不算真正的"认知主体"。
本书采取的立场是Clark 的扩展立场(这与第 11 章操作形态学的形式化一致):LLM Agent 的工具集就是 Agent 认知的延展,工具的修改就是认知结构的变化。
复述框 · 7.7 节要点
- 三大分歧:表征问题、自创生问题、工具问题。
- 保守派(Chemero, Hutto) 拒绝表征、强调感知-运动。
- 激进派(Varela, Thompson) 接受环境耦合、要求自创生。
- 本书立场:Clark 扩展立场——工具 = 认知的延展。
7.8 4E 与 LLM Agent 的映射
把 4E 框架映射到 LLM Agent 设计,可以得到 4 个具体的设计原则:
表 7.3 · 4E 框架 → LLM Agent 设计原则
| 4E 维度 | 核心主张 | LLM Agent 设计原则 |
|---|---|---|
| Embodied | 身体塑造认知 | 操作形态 B = {P, T, M, C} 决定 Agent 能力;改工具集 = 改认知 |
| Embedded | 环境是认知的一部分 | 长期记忆、工具调用是 Agent 认知的延伸 |
| Enacted | 行动产生认知 | ReAct 循环是 enaction 的工程化实现;Agent 在行动中"思考" |
| Extended | 工具是认知的一部分 | parity principle:工具调用 = 认知操作 |
这 4 个原则的工程含义:
- 设计 Agent 时要明确"身体":Agent 有什么工具?有什么记忆结构?有什么执行代码?这些决定了 Agent 能"思考"什么。
- 环境状态要纳入决策:Agent 不应该"清空 context 后重新决策",而应该"持续维护对环境的认知"。
- 设计 ReAct 而非"先想后做":Agent 不应该"先推理后行动",应该"在行动中推理"。
- 把工具当作"身体"而非"工具":工具调用是 Agent 认知的延伸,工具失败 = 认知失败。
复述框 · 7.8 节要点
- Embodied → 操作形态决定能力。
- Embedded → 环境是认知的一部分。
- Enacted → ReAct 是 enaction 的工程化。
- Extended → 工具 = 认知的延展。
7.9 本章小结与第 8 章预告
本章展开 4E Cognition 简史。经典认知科学假设认知即计算、离身心智,但 1980 年代以来的反例催生了 4E 运动。Gibson 的 affordance 是 4E 的认知科学源头。Embodied Cognition 强调身体塑造认知,对应 LLM Agent 的"操作形态决定能力"。Embedded Cognition 强调环境是认知的一部分,对应 LLM Agent 的"长期记忆是认知的延伸"。Enacted Cognition 强调行动产生认知,对应 ReAct 循环。Extended Mind 主张工具是认知的一部分,对应 parity principle。4E 阵营内的方法论分歧——表征问题、自创生问题、工具问题——对 LLM Agent 设计有直接含义。
常见误区
- ❌ 把 4E 当作单一理论:4E 内部有显著分歧,不同立场给出不同设计建议。
- ❌ 把"工具调用"等同于"认知延展":Hutto 阵营认为这是"外部动作",只有 Clark 阵营认为是"认知的延伸"。
- ❌ 忽视身体的物理约束:经典认知科学(离身)仍然是当前主流 AI 的隐含假设,4E 提供了反思这一假设的工具。
- ❌ 把 affordance 当作"环境属性":affordance 是关系性的,既不是纯环境的,也不是纯动物的。
- ❌ 把 Enacted Cognition 当作"先想后做":Enaction 是"在做中想",不是顺序流程。
第 8 章将进入 Enactivism 与自创生。7.7 节我们看到 4E 阵营在"自创生"问题上的分歧;第 8 章将深入展开 Varela、Thompson、Rosch 的 enactivism 立场,及其对 LLM Agent 的含义。
本章小结
- 经典认知科学:认知即计算,离身心智。
- 4E 共同主张:认知分布在身体、环境、行动、外部资源中。
- Gibson 的 affordance:环境对动物的可能性。
- Embodied → 操作形态决定能力。
- Embedded → 环境是认知的一部分。
- Enacted → ReAct 是 enaction 的工程化。
- Extended → 工具 = 认知的延展。
- 4E 阵营内的三大分歧:表征问题、自创生问题、工具问题。
推荐阅读
- 📖 Gibson《The Ecological Approach to Visual Perception》(1979):affordance 概念的开创性著作。$TRAE_REF
- 📖 Varela, Thompson, Rosch《The Embodied Mind》(1991):enaction 概念的系统化提出。
- 📖 Clark & Chalmers《The Extended Mind》(1998):延展心智的奠基论文。$TRAE_REF
- 📖 Newen, de Bruin, Gallagher《The Oxford Handbook of 4E Cognition》(2018):4E Cognition 的官方汇编手册。$TRAE_REF
- 📖 Chemero《Radical Embodied Cognitive Science》(2009):激进具身认知的代表作。$TRAE_REF
练习题
- 概念题:用一段话解释"affordance"为何不是环境的属性、不是动物的属性,而是关系性的。
- 分析题:选一个真实 LLM Agent 系统(如 ChatGPT、AutoGPT),分析它的设计是否符合 4E 框架。具体说:它的"身体"是什么?环境如何参与认知?行动如何产生认知?工具是否成为认知的延展?
- 设计题:为一个"多模态 Agent"设计 4E 框架映射:Embodied 对应什么组件?Embedded 对应什么?Enacted 对应什么?Extended 对应什么?给出具体实现方案。
- 批判题:Adams & Aizawa 对 Extended Mind 的反驳("non-derived content"标志)是否成立?请从 LLM Agent 的角度分析——LLM 调用工具返回的内容是否满足 non-derived content 条件?为什么?
- 哲学讨论题:Varela 的 autopoietic 定义是否适用于 LLM Agent?LLM Agent 能"自我维持"吗?还是说 LLM Agent 永远只是"工具",不是"认知主体"?
- 工程实践题:为你的 LLM Agent 设计一个"4E 评估清单":4 个维度(Embodied / Embedded / Enacted / Extended)各 5 个评估问题(是/否),评估你的 Agent 在多大程度上体现了 4E 原则。
参考文献(本章内)
- Gibson, J. J. (1979). The Ecological Approach to Visual Perception. Lawrence Erlbaum Associates.
- Varela, F. J., Thompson, E., & Rosch, E. (1991). The Embodied Mind: Cognitive Science and Human Experience. MIT Press. $TRAE_REF
- Clark, A., & Chalmers, D. J. (1998). The Extended Mind. Analysis, 58(1), 7-19. $TRAE_REF
- Adams, F., & Aizawa, K. (2001). The Bounds of Cognition. Philosophical Psychology, 14(1), 43-64. $TRAE_REF
- Chemero, A. (2009). Radical Embodied Cognitive Science. MIT Press.
- Newen, A., de Bruin, L., & Gallagher, S. (Eds.). (2018). The Oxford Handbook of 4E Cognition. Oxford University Press. $TRAE_REF
- Noë, A. (2004). Action in Perception. MIT Press. $TRAE_REF
- Hutto, D. D., & Myin, E. (2017). Radicalizing Enactivism: Basic Minds without Content. MIT Press.
- Barsalou, L. W. (1999). Perceptual Symbol Systems. Behavioral and Brain Sciences, 22(4), 577-660.
- Harnad, S. (1990). The Symbol Grounding Problem. Physica D, 42(1-3), 335-346.
本章进度:7.1–7.9 节全部完成(约 6,500 字,含 5 张图 + 2 张表 + 10 篇引用 + 6 题 + 5 误区 + 5 推荐),达到 26 页计划。
status: final。Part II 开篇:认知科学基础建立。