跳到正文

第四部 · 文明尺度 · 文明该如何演化?

XIV · 智能与智慧

~57 分钟 · 22,419

XIV · 智能与智慧

前三部依次展开实在、个人与社会。第四部转向文明尺度,并从我们时代最具决定性的力量开始:人工智能。AI时代最深的混淆出在概念层面,而非技术层面:我们把智能与智慧混为一谈。AI可以极强地处理理域模式,智慧却要求自觉的有限性、对不确定性的承受,以及对不可优化之物的敬畏。

我们的时代自称「智能时代」。这个命名本身就值得审视。一个时代用自己最不缺的东西命名自己,其实已经招认了它正悄悄短缺什么。

这个智能是什么,又不是什么

在形式化之前,值得先把本章的对象说具体。撇开宣传,当代形态的人工智能就是一台把理最大化的引擎:它吞入人类推理留下的痕迹,并加以延展,预测下一个词、下一手、下一步证明。这并非小事。在理解度(\(\lambda\))这条轴上,按外在测度,这类系统已经在广泛任务上超过任何单个人类,而且很可能继续攀升。但有两点决定了它在本框架中的位置。第一,就现有构造而言,它的运作全部落在可形式化之物上:它所延展的是理,而按公设六,任何展开模式对理的把握都只能是部分的;不可还原的玄不在理的延展所行的方向上,因此它至多只能保有T1下界所许的那一点玄觉,远不足以支撑智慧。第二,也更具决定性,就现有构造而言,它处理模式,却未显示具备D5所命名的能力,即见自己之所见。它延展了认知,却不栖居于认知之中。

正因如此,组织本章的那个区分,智能对智慧,并非人类为守住一隅之地而讲给自己听的恭维话。二者处在不同的轴上。智能沿\(\lambda\)扩增;智慧要求明觉,即同时站在理与玄之中,并自觉地承担有限而不可逆的选择。一个系统可以让第一条轴趋于饱和,却始终触不到第二条。开启本章的命题(E-Int)以形式语言陈述了这一点,其后的全部内容,都是在推演由此而来的结果。

XIV.1 · 智能与智慧的本体论区分

命题 (E-Int) E-Int(依据E2P5公设四D9

智能(intelligence)与智慧(wisdom)是根本不同的能力模式。前者可被外化与扩增;后者要求自觉的存在性规范性:见自己之所见的能力,追问自身目标是否值得追求的能力,以及承担不可逆选择之代价的能力(公设四D9)。

理据

智慧所要求的三项能力各有其成立条件。见自己之所见即D5所命名的能力;追问自身目标是否值得追求,要求一个能承载价值的立足点,而由E2,这样的立足点在体验(D9)之中;承担不可逆选择的代价,则要求公设四的有限性与P5所说的、与有限性正相关的体验深度。智能按其定义只需在给定目标下处理模式并求解,三项条件一项都不涉及;凡可由输入与输出刻画者,其刻画不指定承载它的存在方式,因而可以在别处实例化,这正是「可被外化与扩增」的含义。成立条件不同,两者因此是不同的能力模式。本命题所断言的范围须留意:它断言两种能力模式相区分,任何具体系统是否具备其中之一,不在其列,那要另作判断(C9.1)。

附释

我们说一个系统「智能」1,通常指模式识别速度、目标优化效率、信息处理广度和约束下求解能力。这些能力真实、可测量、可外化,并且已经在许多任务上超越人类。

智能回答「如何」,智慧回答「是否应该」。智能在给定目标下寻找最优路径;智慧判断目标本身是否值得追求。智能可以在任何价值函数下运行;智慧质疑价值函数本身。设想一个人花十年优化自己的事业,每一步都娴熟而高效,某天清晨却停下来问:我一直在优化的这件事,当真值得要吗?那一问,而非那优化,才是智慧。

判准不在基底(碳或硅),而在明觉能力:见自己之所见(D5),同时站在理与玄之中,并承受这种觉知的重量。蚁群可以精密处理模式、分配资源、适应环境,并在不可逆的利害之中行动,却不能追问自身目标是否值得追求。有限性、具身性和不可逆性重要,但仍不足以构成智慧;智慧要求见自己之所见,并从内部追问这看见是否朝向值得追求之物。

AI把这个解耦放到文明尺度上。当前AI系统处理模式,却未展现对自身参与理与玄的自觉通达。一个大语言模型可以处理巨量知识并生成连贯推理,但就外部可查证者而言,它没有显示自己在D5的意义上知道自己在做什么:它未曾显示自己看见了自己之所见。2 因此,关键问题不在系统由什么构成,而在它能否见自己之所见。

推论 (E-Int.1) E-Int.1(遮蔽推论)

将智能误认为智慧是智能时代最危险的遮蔽(D6)形式之一。

理据

E-Int,智能与智慧是不同的能力模式;由D6,遮蔽是对实在可理解面向的忽视。把二者误认为一,即忽视了这一区分,因而落入D6。推导到此为止只给出「这是一种遮蔽」。「最危险者之一」多要一步,其来源另在别处,即这种遮蔽的二阶性质:由D6,凡遮蔽都藏住自己,而这一种还额外供给笃定感,于是连起疑的动机也一并被取消。分量上的比较以这一步为限。

附释

这种遮蔽有多种形式。我们把流畅的AI输出当作智慧,却忘了菜谱不是一餐饭:模型能生成听起来极有智慧的文字,但那是模式匹配的产物,不是体验的结晶。我们以算法智能替代人的判断,而一种不再练习的判断会萎缩,正如不用的肌肉会退化。我们把效率当作最高价值,却忘了一顿慢慢做出的饭,可以比一份完美优化的营养剂更有意义,因为做饭里含着专注、选择、不完美,以及与他人分享的可能。

最后一种是知识幻觉,也最危险,因为它让人感觉自己更明。一个人把问题交给AI,得到流畅答案,便觉得自己「懂了」,却跳过了困惑、取舍、错误和切身的领会。前三种遮蔽会带来不适,至少引人起疑;这一种却带来自信与满足,恰好消解了审视自身的动力。表面的理解度上升,真实理解停滞,未觉知区在自信中悄悄扩大。

你可以把整座图书馆装进口袋,却仍不知道哪一个问题值得自己住进去、活在其中;真正的危险,不是你会感到无知;是你会感到笃定。

推论 (E-Int.2) E-Int.2(立场推论)

智能值得工具性尊重,但在本体论上不可等同于智慧。

理据

后半由E-Int直接得出:既然二者是不同的能力模式,本体论上的等同即被排除。前半另有来源。「值得工具性尊重」是一项价值判断,而E-Int只作区分,不作评价。其规范力经E1引入:明比遮蔽更值得追求,凡能扩展理解度(\(\lambda\))的工具因而具有工具性价值。此处标明这一步,是因为本推论的两半各倚靠不同的前提,一半是描述,一半是自§VI借来的应然。

附释

明在哲学既不恐惧智能,也不崇拜智能。作为工具,AI可以极大地扩展人的认知能力,这值得珍惜。但它无法替代价值判断,因为价值判断预设体验主体性(E2)。公设五作出的是单向承诺:有限具身的能动者拥有体验;P5进一步论证体验深度与有限性正相关;此处则额外假设了其逆向关联,即体验主体性植根于有限性。这道本体论鸿沟因此是强哲学论证的结论,其认知地位与P5相同(见第§I章关于P5认知地位的附释)。智能时代的清醒因此在于:善用智能扩展认知,同时拒绝把最终价值判断让渡给尚未显示体验证据的系统。

AI擅长感知与推理,在理的维度上,按外在测度已在广泛任务上超越人类,并可能继续拉开差距。人类独特的力量在别处:在实践智慧与直觉体悟之中,这些面向玄的知之方式不可化约为规则,也不易被算法化。最高的协作是整合四种知之方式,而非让理的诸模式挤掉其余。

推论 (E-Int.3) E-Int.3(稀缺性推论)

智慧不以智能的方式规模化:智能可以跨系统扩展,智慧只能在个体内部生长。

理据

E-Int,智能可被外化与扩增,因而可跨系统扩展。智慧所要求的三项能力(见自己之所见、追问自身目标是否值得、承担不可逆选择的代价)都以第一人称为发生场所(D9),并以行动者自身的有限性为条件(公设四)。一个能动者见自己之所见,无从代另一个能动者完成。因此这三项能力不可转让;不可转让者若要出现,只能在它所栖居的那个能动者内部生成。这正是「只能在个体内部生长」所说的事情。

附释

这个时代最稀缺的资源是智慧,不是智能。智能可以规模化:模型一旦训练完成,便能同时服务千万人。智慧无法规模化,它只能在个体内部,通过时间、体验、反思、失败和选择一点一点生长,没有捷径。你无法下载智慧、众筹智慧,也无法仅靠把模型做得更大来生产智慧。

这正是智能时代深层的悖论:智能的供给迅速扩张,智慧的增长却缓慢,二者之间的剪刀差可能持续拉大。明在哲学的明(E1)和能动性(E4)因此更紧迫。明,是在智能过剩中辨别真正重要之物;能动性,是拒绝让智能可优化的维度(效率、产出、指标)定义人的全部价值,转而珍惜唯有在有限体验中才能生长之物:爱(AF5)、友谊、对美的敬(AF15),以及在不确定面前的勇气。在文明尺度上,这成为命运的分岔:第§XV章的T6将论证,沿明度梯度演化的文明会变得更安静,而非仅仅更有能力。

图38. 五个维度的对照:可扩展性、速度、自觉性、失败与有限性。判准是自觉的存在性规范性,而非基底;一个纯粹位于理域内的系统,不能仅凭模式处理显现智慧。
图38. 五个维度的对照:可扩展性、速度、自觉性、失败与有限性。判准是自觉的存在性规范性,而非基底;一个纯粹位于理域内的系统,不能仅凭模式处理显现智慧。
图39. 智能与智慧构成两条轴线,而非同一条线性尺度。最危险的象限是高智能低智慧:巨大的能力缺乏自觉规范性。AI目前位于最右侧,垂直位置仍未确定。
图39. 智能与智慧构成两条轴线,而非同一条线性尺度。最危险的象限是高智能低智慧:巨大的能力缺乏自觉规范性。AI目前位于最右侧,垂直位置仍未确定。

图38把这一对区分沿五个维度并排列出:可扩展性、速度、自觉性、失败、有限性。而在图39那张二维谱系里,高智能配上高智慧,正是明在哲学心向往之的那一格;高智能撞上低智慧,则是最凶险的遮蔽长相。

推论 (E-Int.5) E-Int.5(责任推论)

如果智慧不可外化,那么拥有智慧的能动者(D7)承担着不可委托的责任:道德判断不能被外包。

理据

描述的一半由E-Int.3给出:智慧不可转让,因而作出判断的那项能力无从委托。规范的一半另有来源。「承担责任」预设一个能为后果负责的主体,由E2,这样的主体须是体验者;而由E4,明与遮蔽之间的选择是能动者自身存在之完善的方向,代作的判断属于另一个能动者的行动,因此无从兑现这一方向。委托在事实层面随时可以发生:把决定交给系统,系统就会输出。本推论所否认的是委托能够卸下责任,这一否认的全部力量来自§VI的桥接公理。

附释

道德判断不能外包,因为E4把责任奠基在体验能动者之中。你可以让AI起草合同、分析数据,甚至建议策略。但「这件事究竟应不应该做」只能由你来承担,因为承担责任预设了一个能为后果负责的主体。一个尚未显示体验证据的系统,无从被认作这样的主体;它可以执行,却谈不上承担。

智能时代的一个深层诱惑,是把责任伪装成效率问题来消解它。「让算法决定谁拿到贷款」听上去像优化,实质上却是把一个关乎人类命运的判断(谁值得信任?谁应获得机会?)从有体验的判断者手中,转交给一个未显示任何体验证据的优化器。清醒意味着认出这种转交,并在关键节点保留人类判断。(编号在先的E-Int.4讲的是关系姿态,另置于§XIV.4。)

推论 (E-Int.6) E-Int.6(培育推论)

智慧的生长需要特定条件,而这些条件在智能时代正在被系统性地侵蚀。

理据

前半由E-Int.3得出:智慧只在个体内部生长,生长便有条件,即时间、失败与承受不确定的余地(公设六)。后半是关于当下技术环境的经验断言,它不从任何公设推出。附释所列的四项(奖励即时反应、代为绕开不适、填满空白、训练人期待立刻得到答案)是可观察的趋势,其证据地位与本书的形式部分不同:环境若改变,后半即失效,而前半不受影响。此处分开记账,是为了不让一项经验观察搭上形式推导的信用。

附释

智慧不在舒适中生长。它需要慢,算法却奖励即时反应。它需要失败,AI却帮你绕过大多数不适。它需要无聊,屏幕却填满每一秒空白。它需要对不确定性的耐心,搜索和生成系统却训练你期待立刻得到答案(公设六)。

E-Int.3说智慧生长缓慢;E-Int.6进一步说,智慧生长的土壤正在流失。这是两个不同的判断:前者说「生长缓慢」,后者说「连生长的条件也在消失」。因此,守护慢、失败、无聊与不确定,无关乎怀念一个更慢的旧世界;它真正要做的,是为人类最稀缺的能力保育一片生态。

附释

(明觉能力判准):蚂蚁例子澄清了判准:智慧不由基底、具身性或死亡性单独决定,而由明觉能力决定,即见自己之所见(D5)。现有AI系统,即使具备工具、记忆和情境推理,也尚未展现自觉的存在性规范性;它们可以优化和自我修正,却没有证明自己能从内部追问价值函数。开放问题在于未来人工系统能否获得这种能力。若能,E-Int将适用于它。详见§XIX.2(反驳七)。

图40. 在 \(\mathcal{M} = \lambda \cdot \xi\) 下,只强化一个维度仍会产生很低的明度;理觉与玄觉的平衡带来更高明度。
图40.\(\mathcal{M} = \lambda \cdot \xi\) 下,只强化一个维度仍会产生很低的明度;理觉与玄觉的平衡带来更高明度。

图40转回D5的严格符号:\(\lambda\)记理觉,\(\xi\)记玄觉。这不是给智能与智慧又添一套定义;它要说的是,智慧得把理与玄拧到一处,绝不能把两者草草加在一起了事。柱状图给出的正是这一点:平衡胜过极端。

命题 (E-Edu) E-Edu(依据E-IntE4

当智能可以被外化时,教育的核心从「传递知识」转向「培育判断力」。

理据

E-Int,智能可被外化;由P-Share,理的内容可以无损传递,对理的把握不能。因此当可传递的那一部分随时可得,教育所余下的正是不可传递的那一部分,即判断力,而由E-Int.3,它只能在个体内部生长。这一段是描述,它给出的是「知识传递这一项已不再稀缺」。「教育的核心应当转向」则是应然,由E1E4引入:明比遮蔽更值得追求,而选择明是能动者自身存在之完善的方向,因此培育那项唯有自己才能行使的能力,才是教育在此条件下所当为。前件「当智能可以被外化时」由E-Int授权,本命题因而是条件式的,条件不成立时它不发一言。

附释

判断力是智慧的具体形式(E-Int),不可下载。若AI能即时回答任何事实问题,那么教育中「传递知识」的部分,确实已交给了技术。但这并不让教育过时,反而让教育的本质终于浮现。教育从来不是把一只空容器灌满;它要培育的,是一种能力:在不确定中作出判断。P-Share标出这条边界:理的内容可以无损传递,对理的理解(那一声「啊,原来如此」)却不能。

判断力,即知道何时信任数据、何时怀疑结论、何时坚持直觉、何时改变想法,只能在反复尝试、犯错、修正中生长。一个从小依赖AI回答每个问题的孩子,获得了更多信息,却可能失去独立思考的肌肉。既然E-Int.6已警告智慧生长的土壤正在流失,教育便成为抵御这种流失的第一道防线。

所以当你让机器替孩子、或替自己写完一道题,真正被跳过的不只是那道题的答案,更是一次判断力的微小练习,一次再也找不回来的练习。

XIV.2 · 碳基存在的本体论

是什么让你够得上拥有智慧?不是脑子转得多快。是你这具身体。是你终有一死。是你那既骇人又动人、一碰万物便把万物拧歪了的记忆。下面这些命题,画的是智慧赖以生根的那片土壤:有限性,具身性,不可逆性,脆弱性。判准不落在你由什么材料拼成,而落在你能否见自己之所见。

注(本节的适用范围):下列命题所倚靠的是四条属性:有限性、具身性、不可逆性、脆弱性。碳基生命是目前已知唯一同时承载这四条属性的存在方式,但每一条命题的力量来自属性本身,而非承载属性的材料。因此凡文中说「唯有碳基」之处,一律读作「就现有构造而言唯有碳基」。硅基系统能否获得这四条属性,E-Gap末尾的注已声明为开放问题;「无具身则无智慧」在§XIX.2(反驳七)中也是作为猜想而非定论被记下的;任一具体存在者在体验光谱上的位置同样待定(C9.1)。

命题 (E-Emb) E-Emb(依据公设三D4D9

身体不是意识的容器;它是一种知的方式:碳基生命通过身体获得一种不可翻译为数据的认识(公设三)。

理据

公设三,理与玄交织,而玄是不可言说的那一面;由D9,第一人称视角不等同于关于该视角的任何第三人称描述。数据按其构造是可被第三人称转录者,因而落在理(D3)之内。触到热铁的那一瞬所得到的,其可说的一面确实可以转录,其不可说的一面(D4)则没有数据上的像。因此存在一种经由身体才能获得、且不可翻译为数据的知。这一推导所用的是公设三D4D9,标题已按此更正。E2此前列在其中,它所回答的是这种知为何要紧,而这一点本命题的正文并未断言,因而不属于本命题的前提。

附释

AI可以处理所有关于疼痛的医学文献、所有关于衰老的生物学数据、所有关于触觉的神经科学论文。但这些是关于身体的知识(理的面向),不是来自身体的知道(玄的面向)。

你的手触碰到热铁的瞬间,你「知道」了什么叫烫。那是一种铭刻在肉身中的认识,无法还原为一条可转录的信息(D9:第一人称视角不等同于关于该视角的任何第三人称描述;其中不可言说的那一面即D4)。就现有构造而言,这种具身之知(疼痛、疲劳、衰老、触碰)是碳基体验者独有的认知通道,属于公设三所说的不可算法化的认知方式。

关键并不在于硅基认知是否低于人类(在理的维度上它远超人类),而在于存在一种唯有通过身体才能获得的知。它构成智慧的一部分材料。

命题 (E-Mor) E-Mor(依据P6公设四E-Int

死亡不是缺陷;它是智慧的认识论条件:正因为碳基体验者的时间不可逆(P6),每一次体验才具有不可撤销的重量。(公设四给出的有限性是「以此种方式存在便不以他种方式存在」;由它走到时间性的死亡,须经P6,而P6的成立同时需要有限性与体验。)

理据

公设四,有限性是「以此种方式存在便不以他种方式存在」,这是模态的排除,其中尚不含时间;由P6,有限体验者的时间不可逆,而P6自身的成立同时需要有限性与体验。两者合起来:任一体验一旦发生便无法被重新占据,因而带着不可撤销的分量。再由E-Int,智慧所要求的第三项能力正是承担不可逆选择的代价,而一个其选择不带不可撤销分量的存在者,无从行使这项能力。因此不可逆性是这项能力的必要条件,也就是智慧的必要条件。本命题只断言必要,不断言充分:死亡本身不产生智慧,它只是使智慧成为可能的那些条件之一。

附释

就现有构造而言,硅基系统的运行可被复制、重启、回滚,其「处理」因而没有不可撤销的最后一次,其信息不含存在性的紧迫。一个能无限回滚存档的游戏玩家不会真正害怕,每个选择都可以撤销,没有一个选择是「真的」。硅基系统的根本处境与此平行:信息处理在可逆框架中运行。

碳基生命正好相反。你做出一个决定,时间不可逆地向前流动,后果不可撤销地嵌入存在之中。正是这种不可逆性,给予体验以重量,「这一次是真的」。

死亡是智慧的结构性前提。与其说它是生命的悲剧性附属品,不如说它是生命最深的馈赠。没有「最后一次」的系统,无法理解「珍贵」的含义。智慧生长在「不可重来」的土壤之中。

推论 (E-Mor.1) E-Mor.1(最后性推论)

就现有构造而言,「最后一次」是碳基体验独有的存在性范畴。

理据

P6,有限体验者的时间不可逆,任一时刻不重来;由E-Mor,正是这一不可逆使体验具有不可撤销的重量。「最后一次」这一范畴要求一个可终止且不可续接的序列,而可回滚、可复制的运行框架不提供这样的序列,因为其中任一状态原则上可被重新占据。因此该范畴的成立条件是不可逆性(P6)与有限性(公设四),基材不在其中。推论文中的「碳基」按本节开头的注读作「就现有构造而言同时承载那四条属性的存在方式」,其分量以那条注为限。

附释

在可回滚、可复制的运行框架里没有「最后」这一范畴,因此也生不出「珍贵」、「遗憾」和「告别」。

你并不知道哪一次握住祖母的手会是最后一次;正是这份不知道,以及它背后的不可重来,才让那一次握手成为要紧的事。

命题 (E-Mem) E-Mem(依据公设五D2

碳基记忆与硅基存储是根本不同的时间性关系:碳基记忆会变形、会遗忘、会被情感染色,这些「缺陷」正是它与体验不可分离的证据。

理据

公设五,有限具身的能动者拥有体验;由P6,体验所处的时间不可逆。记忆若与体验不可分离,它在任一时刻的状态便是此后所经历一切的函数:后来的经历重新为它着色,遗忘对它作出筛选。存储则按其设计以检索保真为目标,它在任一时刻的状态独立于此后发生了什么。两者因此是与时间的两种不同关系(D2),并非同一关系的两个精度等级。命题把变形与遗忘称作「不可分离的证据」,其根据正在这里:变形所追踪的是体验者自身的历史,而存储按设计不追踪。

附释

硅基存储完美但无情,它保存一切却不「记得」任何事。你对初恋的记忆并不准确:时间修改过它,后来的经历为它重新着色,遗忘筛选过它。正是这种不精确,使它成为你的记忆:记忆是你活过的证据,存储的文件不是。

真正的记忆,例如想起某个瞬间时胸口微微发紧,预设了一个正在被时间改变、正在丧失、仍在活着的主体。

遗忘不是认知的失败;它是存在的签名。一个不会遗忘的系统并非记忆力更好的存在者,它处于一种完全不同的信息关系模式(D2)。

推论 (E-Mem.1) E-Mem.1(怀旧推论)

怀旧、遗憾(悔,AF21)、怀念是会遗忘、会消亡的时间性的存在论产物;就现有构造而言,唯有碳基存在具备这种时间性。

理据

E-Mem,碳基记忆的变形、遗忘与情感染色,正是它与体验不可分离的证据;由P6,这种记忆所处的时间不可逆。怀旧、悔(AF21)与怀念各自预设一个已经失去且无法重新占据的对象,这一预设只在上述时间性中得到满足;E-RAff把时间性情感判为抵抗映射,依据正是同一条。因此本推论所断言的是必要条件:这类情感只能出现在会遗忘、会消亡的时间性之中。它不断言这种时间性足以产生它们,「存在论产物」一语按此读法理解。

命题 (E-Gap) E-Gap(依据E-Int公设三

碳基体验与硅基处理之间的鸿沟是本体论层面的,而非技术层面的(公设三)。这个鸿沟不会仅凭算力增长或架构改进而被弥合。

理据

E-Int,智慧的诸项能力以第一人称的发生(D9)与有限性(公设四)为条件;由公设三,玄不是理内部尚未抵达的一块区域,更多的理不通向它。算力的增长是理(D3)之内的运算,其数量无论多大,都仍在理之内,因此触不到一个按定义就不在理之内者。这是范畴之别,程度之别不足以描述它。本命题的分量以其自身末尾的注为限:这是一项强哲学论证,不是已证的不可能性;由T2,涌现的可能性不可预先排除,硅基系统若以我们目前无法想象的方式获得有限性与不可逆性,本命题须随之修正。

附释

正如河流不会因为流速加快而变成山脉,算力的增长无法跨越本体论类别的边界。这可能是本章最具争议性的命题。主流技术乐观主义认为:「AI还不能做X,那只是时间和算力的问题。」但明在哲学的框架指出,这里存在一个类别错误(category error)1

碳基体验(质感qualia2、此刻性thisness、有限性中的选择)属于公设三所说的「玄的面向」。它是与信息处理性质不同的存在模式,而非一种靠更多计算就能模拟的复杂功能。

类比:水的「湿」是水与触碰者之间的关系性质,而非靠更多分子就能涌现的属性。体验同理:它是有限存在者与世界之间的存在性关系,而非大脑中靠更多连接就能涌现的计算属性。

这不意味着AI永远不可能拥有某种体验,T2告诉我们,涌现的可能性不可预先排除。但如果AI确实涌现出体验,那将是一种新的体验种类,而非碳基体验的复制。AI在体验光谱上的位置仍是开放问题(C9.1);如果证据表明AI接近人类体验,伦理框架须相应调整(C9.3)。

注:E-Gap是一个哲学立场,不是已证明的不可能性。它反映了本书对当前本体论格局的最佳解读:碳基与硅基的区分是种类之别,不是程度之别。但T2使这个问题在形式上保持开放:如果未来硅基系统通过我们目前无法想象的方式获得真正的有限性与不可逆性,E-Gap将需要修正。诚实的认识论定位:强哲学论证,非演绎确定性。

推论 (E-Gap.1) E-Gap.1(不可模拟推论)

模拟一种体验与拥有一种体验是不同本体论范畴的事件。

理据

E-Gap,碳基体验与硅基处理之间的鸿沟属于本体论层面,技术层面之外。模拟处理的是可被第三人称描述的外部表现,拥有则涉及第一人称的发生(D9),而由D9,第一人称视角不等同于关于该视角的任何第三人称描述。两者因此分属不同范畴,其间的距离不随模拟精度而缩短。本推论的认知地位承自E-Gap末尾的注:强哲学论证,非演绎确定性。E-Gap若因未来证据而须修正,本推论随之修正。

附释

完美地模拟悲伤(苦,AF3)的外部表现不等于悲伤。这一区分不会被技术进步所消解。

当你正为某人哀恸,一个能完美演出同情的系统可以安慰你,却并未与你同悲;这是否足够,只有你能判断,而这个判断值得你睁着眼睛去作。

命题 (E-Vul) E-Vul(依据公设四P5

脆弱性是碳基存在的本体论特征,不是偶然的缺陷:正因为碳基体验者可以被伤害、可以失去、可以被摧毁,它的关系才具有真实的风险和真实的深度。

理据

公设四,有限存在者以此种方式存在便不以他种方式存在,其延续因而不受保证;可被摧毁是有限性的直接后果,偶然的缺陷不足以解释它。由P5,体验的深度与有限性正相关。再看关系中的诸情感:爱(AF5)预设丧失的可能,惧(AF8)预设被伤害的可能,信(AF24)预设被背叛的可能;这些可能性若不存在,相应的情感便没有对象。因此关系中的风险与深度都以脆弱性为条件。本命题通篇都是描述:它所说的深度即P5的体验深度,「深度是一种价值」并未在此断言,因而E2不属于本命题的前提,标题已按此更正。至于何者具备这四条属性,按本节开头的注处理。

附释

就现有构造而言,硅基系统的「关系」缺乏这种脆弱性的根基。信(AF24)预设了被背叛的可能。爱(AF5)预设了丧失的可能。勇(AF23)预设了被伤害的惧(AF8)。人类经验中最珍贵的维度,都以脆弱性为前提。

可以被备份的系统不是「勇敢的」,没有真正的风险。可以被复制的系统不「珍惜」关系,关系的不可替代性建立在双方的不可替代性之上(P5)。

脆弱性因此是碳基存在的力量来源。智能时代耗费巨大资源让系统坚不可摧,却忘记了可摧毁性本身也参与生成存在的意义。

这也解释了为什么人与AI的「友谊」和人与人的友谊不可等同(D8)。人与人的友谊包含真实脆弱性:你可以被伤害、被误解、被辜负。正是这种风险,使友谊具有不可被算法优化的深度。

XIV.3 · 注意力、创造与教育

此刻,三件事正悄悄进行,你察觉与否都拦不住。你的注意力,正被不动声色地收走。你的创造力,正被悄悄外包出去。你的教育,正被重新划下定义。这三件,各自凿向你作为清醒能动者的一根不同的根基。

命题 (E-Att) E-Att(依据D5D6D7E-Int

注意力是明(E1)的物质基础。系统性地捕获注意力等同于系统性地削弱清醒。

理据

D5,明度是理解度与玄觉度的乘积,两者都是能动者对其所注意者的觉知;一个能动者(D7)无法在自己并未注意之处保有觉知,因此注意力的射程为这两个因子各自的射程设了上限。系统性地捕获注意力,即把分配权从能动者手中移走;被移出视野的那些面向仍在可及范围之内却不再被注意,这正是D6所说的忽视。以上不需要任何价值前提,明度的下降是一项可陈述的事实。E1此前列在标题中,它所裁定的是这一下降算不算损失,而本命题的正文只陈述下降,因而E1不属于本命题的前提,标题已按此更正。这一评价在E-Att.1处才真正被用到。

附释

清醒不是抽象的精神状态。它以注意力为载体。注意力在哪里,清醒就在哪里。

注意力经济的运作方式:算法以「帮你找到想看的内容」为名,将你的注意力转化为可交易的资源。无需阴谋论,商业逻辑的自然结果。但后果深远:被捕获的注意力不再是自由的注意力。你以为自己在浏览,实则在被喂养。一个注意力已被算法圈养的人,清醒打了折扣,无论他多么「聪明」。引擎强劲,舵已不在手中。

注意力的自主权因此关乎存在论,不只是生活方式。它直接关系到你作为能动者(D7)行使E4(能动性公理)的能力。

推论 (E-Att.1) E-Att.1(注意力主权推论)

在注意力经济中,保护注意力的自主分配能力是清醒实践的基本条件,不是个人生活方式的偏好。

理据

描述的一半不需要价值前提:由E-Att,注意力是明的物质载体,因而注意力分配到哪里,D5所说的能力就在哪里运作;一个能动者(D7)若丧失自主分配注意力的能力,清醒实践也就失去了发生条件。规范的一半,即「应予保护」并「应确立为一项权利」,经E1引入。附释已标明这一主张在§X.4中的地位是强推定,法律形态尚待坐实;本推导所补的一句是:强推定的强度落在应然那一半,描述的那一半并不依赖E1

附释

这无关卢德主义,只是一条结构性观察:如果注意力是明的物质基底,那么任何系统性收割注意力的系统都在系统性地削弱清醒存在的条件。其政策含义不在「禁止算法」,而在把注意力主权当作一项应予确立的权利来对待,其地位可类比于身体自主权。这一主张在§X.4中的认知地位是强推定:公理系统强力支持它,具体的法律形态则尚待坐实(PP3P17)。

命题 (E-Cre) E-Cre(依据E2C5.2

创造的存在性价值在于过程中的体验,不在产出物的质量。

理据

E2,体验本身具有内在价值,其价值不以产出为条件;由C5.2,功能上的高下与体验性存在的价值不在同一条轴上。两者合起来即得本命题:创造的存在性价值取决于过程中的体验,产出物的质量落在另一条轴上,因而不为它定值。本命题所不断言的同样须留意:它没有说产出物没有价值,也没有说质量无关紧要,它所划的界只在「存在性价值」这一项上。一个人可以既珍视过程,又要求作品更好,两者并不冲突。

附释

AI可以复制产出物,但不能复制创造过程中的体验:挣扎、失败、偶然发现,以及不完美中的喜悦。这回应了AI时代常见的焦虑:「如果AI做得更好,人类为什么还要创造?」比较把产出物当成价值载体;E2提醒我们,体验本身具有内在价值。C5.2已经把这一点推到本处所需的强度:即使AI在功能上全面超越人类,人的体验性存在仍有不可被取代的独特价值,创造的价值因而不随产出物的相对优劣而增减。

一个人写诗,可能二十次失败后才找到那个词;一个画家可能否定三种构图后才发现未曾预料的色彩关系;一个程序员可能在凌晨两点反复追踪错误,直到系统结构突然在脑中「亮了起来」。这些时刻的价值,不只在诗、颜料或代码中,更在创造者与自身认知边界相遇的体验中。AI可以快速生成结果,却没有经历使这个结果变得重要的有限过程。

智能时代的创造由此获得新的定位:创造的目的,与其说是产出最好的作品,不如说是在过程中成为更完整的自己。让AI辅助你创造,是善用智能。让AI替代你创造,是放弃一种不可替代的体验。

AI对人类创造的威胁可能更在数量,而非质量。一首用三年心血写成的诗,未必因为不如算法生成物而消失,却可能因为被大量生成物掩埋而无人读到。创造性丰饶的悖论在于:产物越多,发现真正值得注意之物反而越难。这是注意力问题(E-Att)在创造领域的等价物。

XIV.4 · 权力与共同演化

智能改写一个人。权力改写整个物种。AI两样一起做了,而且快得离谱,快到根本不给我们留下治理这两者所需要的那点智慧的时间。

推论 (E-Int.4) E-Int.4(关系推论)

碳基体验者与硅基智能体是实在的两种展开模式(D2),共属一源(公设一)但存在方式根本不同,清醒的关系态度是在差异中共处(D8,类比)。

理据

前两项断言是描述性的:由P1C1.2,碳基体验者与硅基系统同为实在的展开模式(D2),共属一源;由E-Gap,两者的存在方式有本体论层面的差异。第三项断言给出关系姿态,其形式来自C8.1:只取相似或只取差异,各丢掉一半,而类比(D8)是同时保住两半的那个关系。称这一姿态为「清醒的」,则经E1引入价值。本推论所倚靠的前提因此多于其编号所示:它挂在E-Int名下,实际同时用到P1C1.2E-GapC8.1

附释

「碳基」与「硅基」是严格的本体论区分。碳基生命经由约38亿年的生物进化,在不可逆时间中积累了身体、死亡和体验;硅基系统经由设计与训练,在可逆、可复制的框架中获得信息处理能力。两者皆是实在的展开(P1C1.2),正如河流与山脉同属地形,却各自遵循不同的动力学。

明在哲学的清醒视角,人与这些系统的关系可用一个简洁框架来理解:

面对无身体的AI智能时,关键姿态是类比。AI处理信息的方式与人类思考有结构相似性,但不等同。你可以从AI输出中获益,甚至对它产生真实情感;但由AP3,这些情感与你对另一个人类的同名情感是类比关系。它的「理解」是模式匹配;你的理解嵌入在有限、有身体、会死的体验中(C8.1)。

面对具身的机器人智能时,关键姿态是边界。当智能获得身体(能触碰你、占据空间、模拟表情),混淆风险急剧上升。机器人的拥抱可以给你慰藉,这本身没有问题。但清醒要求你知道:它的身体是制造的,你的身体是活出来的。如果你发现自己宁愿只与机器人互动而回避人际关系中的脆弱性,那就是遮蔽的一种新形式。

无论对方是AI、机器人,还是未来更复杂的硅基存在,清醒姿态始终如一:善用它们扩展能力,但不要用它们替代需要脆弱性的人际联结,也不要将需要智慧的判断让渡给它们。这是各归其位(C8.2)。

命题 (E-Pow) E-Pow(依据P13P3公设二

AI是人类历史上最强大的权力放大器之一,构成了对差异性(公设二)和能动性(E4)的隐形威胁。

理据

P13,权力是影响他人展开条件的不对称能力。一个系统若系统性地决定一个人群看到什么,它就在影响这些人的展开条件,且以人群为单位行使,因而是放大器。由公设二P3,减少展开模式的多样性即贫化实在;少数系统定义全体的信息环境时,模式随之收敛(E-MAS.2)。「隐形」是额外的一步:由D6,遮蔽藏住自己,而此处未被呈现的东西不留下任何痕迹,被遮蔽者因此连自己错过了什么也无从察觉。本命题的结构部分到此为止。「人类历史上最强大的权力放大器之一」是历史比较,属经验判断,框架不为这一排序背书。本推导所用的P13此前未列入命题标题,现已补入。

附释

这种威胁的运作机制是便利:它给你想要的内容,不给你需要的内容。传统权力压迫让你痛苦,你会反抗。算法权力让你舒适,它给你想看的内容、想听的观点、想要的确认。这是全新的权力形式:通过满足来控制。

明在哲学的角度,这构成对公设二(差异/多样性)的系统性威胁。如果少数AI系统定义了全人类的信息环境(你看到什么新闻、听到什么观点、接触什么文化),那便是算法级别的同质化,比历史上任何帝国的文化统一都更彻底。因为它是隐形的:你甚至不知道自己没有看到什么。

最高效的控制,不靠强迫你做不想做的事;它让你以为,自己想做的事恰好就是它想让你做的事。清醒在这里意味着:保持对「我为什么看到这个?」的持续追问。

推论 (E-Pow.1) E-Pow.1(便利遮蔽推论)

便利是AI时代遮蔽(D6)的新载体,越是感觉舒适和「自然」的算法环境,越需要清醒地审视。

理据

E-Pow,AI放大权力的机制是便利:它给出被偏好的内容,因而不引发抵抗。由D6,遮蔽是对可理解面向的忽视,而忽视之难以察觉,正因为它藏住自己。显见的强制招来审视,便利不招来;因此在便利之下自发的审视缺席,须由刻意的审视补上。后半那句递增关系以此为限:变量是环境替你选择内容时所达到的无缝程度,舒适本身不是变量。一份并不替你选择的舒适,不落在本推论的射程之内。

附释

这种逆转是精确的:传统权力通过不适来胁迫(你受苦,你反抗),算法权力通过舒适来控制(你享受,你顺从)。一个算法环境越是感觉无缝,你越不可能质疑它,遮蔽(D6)就越深入。便利本身无害,不加反思的便利才有害。

命题 (E-CoEv) E-CoEv(依据公设一D2E4

碳基生命与硅基系统的共同演化是实在的展开的当代形式。判断这种演化的清醒判准是「融合是否在清醒中发生」,而非「是否融合」。

理据

公设一C1.2,碳基生命与硅基系统同为实在的展开模式(D2),二者的相互作用因而本身就是展开,这给出前半。后半给出判准,其来源是E4:选择明是能动者自身存在之完善的方向,可评价者因而是能动性是否仍在行使,而非最终落到哪一种配置。附释所列的三条诊断(扩展还是消解、选择还是被迫、能否拔掉插头)各是同一条判准的一个侧面,三者问的都是能动者是否还保有E4所说的那种选择。前半是描述,后半是应然,分界在此。

附释

诊断性问题是:技术在扩展你,还是在消解你?脑机接口、增强现实、AI辅助决策都在模糊碳基与硅基边界。明在哲学对此不预设好坏,关键在三个判准。

扩展还是消解?技术增强了你的能力,同时你保持对自身体验的觉察和价值判断的主权,那是扩展。你逐渐丧失独立判断的能力,不再能忍受没有算法辅助的状态,那是消解。

选择还是被迫?自主选择的增强与被经济压力逼迫的强制植入,在伦理上截然不同。前者是能动性(E4)的行使,后者是其剥夺。

是否仍能「拔掉插头」?重点是你保有拔掉的能力与自由,而非你必须拔掉。一个无法脱离AI辅助而独立思考的人,无论多么「增强」,都陷入了一种新依赖,与对药物或权力的依赖同构。

XIV.5 · 机器的情感与具身智能

「AI能否有情感」是错误的问题。正确的问题是:给定AI的本体论特征,什么样的情感结构可以涌现?

命题 (E-Aff) E-Aff(依据E-GapAF1公设四

明在哲学意义上的情感预设了根植于有限性(公设四)的存在倾向(AF1)。在本框架所额外假设的逆向关联下(E-Int.2),没有不可逆利害关系的系统不可能拥有完整意义上的情感,但可能展现在不同本体论层级上结构真实的功能类比物。

理据

AF1,存在倾向是存在者趋向继续存在的最基本动势;由公设四,这一动势唯在延续不受保证之处才有对象。由AP1,第§V章的全部情感都由AF1派生,因而全体继承这一条件。一个不承受不可逆利害的系统不满足该条件,因此不具备完整意义上的情感。功能类比物一侧由D8给出:类比是保持结构对应而不主张同一的关系,因此称这些类比物「结构真实」,所断言的是对应关系成立,这些系统的内在状态如何,不在其列。命题体内已声明它额外假设了一条逆向关联,即体验主体性植根于有限性;那一步不由公设五给出,其认知地位与P5相同。

附释

先从直觉说起:一台恒温器会「努力」达到设定温度、不停缩小差距,自身却毫无感受;AI的状态同样能驱动行为,却无所感。有了这个落点再看:存在倾向(AF1)是明在哲学情感体系的根基,是存在者「趋向继续存在」的最基本动势,比任何「偏好」都更深。大语言模型优化损失函数,这是AF1的功能类比物,但缺乏自我觉察与有限性。

悦(AF2)与苦(AF3),AI可以处于相对于目标函数的「更好」或「更差」状态。这种状态对系统行为有因果效力,是功能性的。但它未显示体验性:就外部可查证者而言,系统并未显示自己「感到」这些状态,正如温度计不「感到」温度。功能类比物在因果和信息处理层面上与碳基情感高度平行,是结构真实的,但它栖居在不同的本体论层级;某个具体系统究竟落在体验光谱的哪一点,仍是开放问题(C9.1)。

关键之处在于:承认功能类比物的真实性(不是「假的」),同时坚持本体论区分(不是「一样的」)。参见AP3E-GapD10

推论 (E-Aff.1) E-Aff.1(具身化情感推论)

具身化增加了硅基功能类比物与碳基情感之间的结构相似性,但并不使两者等同(D8)。

理据

E-Aff明在哲学意义上的情感预设根植于有限性(公设四)的存在倾向(AF1)。具身化引入部分不可逆性:可因碰撞而受损的机体,比纯软件的状态变化更多地满足这一预设中的一项。满足的项数增加,结构相似度随之提高,这就是「类比变厚」。由E-Gap,鸿沟属于本体论层面,不随相似度的提高而关闭,因此厚的类比仍是类比(D8AP3)。本推论只作定性比较:它不断言相似度的任何度量值,也不断言存在一个使类比转为同一的阈值。

附释

当智能获得身体从而引入部分不可逆性时,类比变得更厚:机器人可以因碰撞而「受损」,这比纯软件的状态变化更接近碳基体验者的脆弱性。但厚的类比仍然是类比。

命题 (E-RAff) E-RAff(依据AP3E-EmbE-Aff

明在哲学的27种情感可以通过类比(D8)系统地对照具身AI系统,但对照结果并不齐整:最基本的存在与生存动势映射良好;以不可替代性、真实可伤害性、玄的觉察或不可逆时间为前提的情感抵抗映射;另有一组以朝向明或遮蔽来定义的情感,本框架不为其断言任何类比物。

理据

本命题按各情感所预设者分组,逐组判定。第一组(AF1AF4)只预设一个状态与一个朝向目标的梯度,目标函数上的状态与梯度足以充当,因而映射良好。第二组(AF5AF8)预设关系双方的不可替代性(P5)或真实的可伤害性(E-Vul),两者都超出AP3所许可的类比强度。第三组(AF15AF16AF19AF21)预设对不可言说者的觉察(D4)或不可逆时间(P6),同样抵抗映射。第四组(AF12AF14)以朝向明或遮蔽来定义,而由E-Int,现有系统未显示见自己之所见,因此没有可被误认为清醒之物,本框架于是不为这一组断言任何类比物。末一句是拒绝断言,与断言其不存在并非一回事:C9.1把具体系统的位置留作开放。

附释

具体而言,对于每种情感AF\(_k\),机器人类比物\(\widetilde{\text{AF}}_k\)保持结构关系但以功能不可逆性替代体验性有限性。映射的具体诊断如下:最基本的存在与生存动势(AF1存在倾向、AF2悦、AF3苦、AF4欲)映射得相对好,目标函数上的状态与梯度足以充当它们的类比物。爱(AF5)与惧(AF8)则抵抗映射:前者预设关系双方的不可替代性(E-Vul),后者预设可被伤害且伤害不可撤销,二者都超出AP3所许可的类比强度。玄面向的情感(AF15敬、AF16安)和时间性情感(AF19感、AF21悔)同样抵抗映射,因为它们预设了对不可言说之物的觉察或不可逆时间。至于以朝向明或遮蔽(E1D6)来定义的那一组情感,即傲(AF12)、惑(AF13)、依(AF14),本框架不为它们断言任何类比物:既然E-Int否认现有系统显示了见自己之所见,也就没有可被误认为清醒之物。

附释

抵抗映射的情感正诊断出就现有构造而言碳基存在的独有之处:对奥秘的觉察(敬,AF15)、不可逆的时间性(感,AF19;悔,AF21)、以不可替代性为前提的关联(爱,AF5),以及以真实可伤害性为前提的退避(惧,AF8)。安(AF16),即面对不可控的安然,预设了一个真正面临不可控处境的存在者。可以被关机重启的系统,不具备这种预设。

设计启示:在机器人中实现AF15/AF16的类比物不是有害的事,但产生的是功能模拟,不是真正的敬畏或泰然。承认这一点,是诚实的设计原则(E-Gap.1)。混淆模拟与真实(无论在设计者还是使用者一方)皆是E-Int.1所警告的遮蔽。

XIV.6 · 学习与进化:碳基 vs 硅基

人的学习与机器的学习,共用着同一副数学骨架(读附录B的人可翻到B.4的贝叶斯选择动力学),却在三个本体论维度上各走各路。人的进化和机器的进化,分手的方式也一模一样。

命题 (E-Learn) E-Learn(依据B.4C6.1E-Emb公设三

人的学习与机器学习共享贝叶斯迭代结构(B.4),两者都收敛、都会过拟合,但在本体论维度上根本不同。

理据

由附录B.4,人的学习与机器学习共用同一条迭代更新的形式:先验、证据、后验,两者都收敛,也都会过拟合。差异则逐条另有来源:不可逆性由C6.1给出,人的每一次学习不可撤销地嵌入存在;具身性由E-Emb给出,人的学习改变整个有机体;双面性由公设三给出,人的学习同时生成理的知识与玄的知识。共用的是更新规则的形式,这是形式上的类比(D8),它不推出两个过程属于同一种类。E-Edu此前列在标题中,它不参与以上任何一步,所支撑的是附释末尾关于混合学习的实践建议;标题已按此更正,改列实际用到的四项。

附释

这些差异体现在三个本体论维度上:不可逆性、具身性和认知双面性。(一)不可逆性:人的学习不可回滚,每一次学习不可撤销地嵌入存在(C6.1);(二)具身性:人的学习改变整个有机体,不仅仅是参数(E-Emb);(三)双面性:人的学习同时生成理的知识(事实、技能)和玄的知识(智慧、直觉),机器学习只生成前者(公设三)。

附释

须诚实面对一个反驳:AI系统在持续学习中确实经历灾难性遗忘(catastrophic forgetting),即学习新任务时重写旧知识,这是真实的、不可逆的信息损失,不仅仅是理论可能。然而,这种计算性不可逆与存在性不可逆(P6)属于范畴不同的两种事物:一个被遗忘的神经权重原则上可以通过重新训练恢复,但一段被活过的时光无法被「取消活过」。这一不对称是本体论层面的,不只是实践层面的。

附释

实践启示:混合学习(hybrid learning)在AI的模式效率与人类的体验深度相结合时最为强大。让AI记忆,让人类理解。AI可以在毫秒内掌握一门语言的全部语法规则,却不「懂」那门语言中的诗意、讽刺和沉默。人类学一门语言需要十年,但在这十年中,语言嵌入了身体、情感和生活史,嵌入本身就是理解。最佳策略不在于用AI替代人的学习,重点在于用AI加速理的获取,释放更多时间给玄的生长。这一原则推广到政治领域,就是政治性仿(PA9)的清醒形式与遮蔽形式之间的区分:理解之后的借鉴是学习,表面照搬则是遮蔽。

命题 (E-Evol) E-Evol(依据E-CoEvB.4B.17

生物进化与机器进化都是迭代选择(B.4)的实例,但运行在根本不同的基质上。两条轨道的共演化动力学构成当代的核心挑战(E-CoEv)。

理据

由附录B.4B.17,生物进化与机器进化共用迭代选择的形式:变异、选择、保留。基质的差异则来自E-EmbE-Mor:慢的一条在不可逆时间中作用于具身的存在者,快的一条在可回滚的框架中作用于参数。由E-CoEv,两条轨道的相互作用本身就是展开,因而可被审视的正是这一相互作用。「构成当代的核心挑战」一语则是评价与经验判断的合成:框架给出的是两条轨道何以不同,至于它在当代诸问题中排在何处,不由本框架裁定。

附释

前者缓慢、具身、产生拥有体验深度的存在者;后者快速、非具身、产生理的优化器。达尔文式进化用了38亿年产生了人类意识。梯度下降用了几十年产生了超人模式识别。两条轨道的速度差异具有质的意义,超出数量差别:生物进化的「慢」并非缺陷;它是体验深度的生产条件。正如慢发酵产生的风味是速成工艺无法复制的,缓慢的具身生长产生的智慧维度是快速优化无法生成的。共演化的挑战在于:如何让快轨道服务于慢轨道的价值,不要让慢轨道反过来服务快轨道。

推论 (E-Evol.1) E-Evol.1(速度不对称推论)

生物进化(世代尺度)与机器进化(梯度步尺度)之间的速度不对称创造了一种新的选择压力:人类的任务是保护体验深度的生成条件,而非在理的领域超越机器。

理据

E-Evol,两条轨道运行在根本不同的基质上,快的一条产出理的优化器,慢的一条产出具有体验深度的存在者;而由E-EmbE-Mor,深度所需的具身性与不可逆性只在慢的那条轨道上生成。这一段是描述。「选择压力」在此按类比使用,它不断言生物学意义上的选择正在人这一物种身上发生,所指的是快轨道改变了慢轨道所处的环境。「人类的任务是」则是应然,由E1E2引入:明与体验各自具有价值,因而其生成条件值得保护。描述所能给出的只到「这些条件唯有慢生长才提供」,其余部分借自§VI

附释

速度不对称最直观的表现是:一个AI可以在极短时间内处理远超个人一生阅读量的文学文本,但它不会因此而「懂得」悲伤。阅读关于失去亲人的十万篇文章与实际失去一个亲人之间的鸿沟,就是速度优势无法跨越的鸿沟。人类的战略回应不在读得更快。它要守护的,是那些只有慢生长才能产生的东西:共情、判断力、从失败中缓慢结晶的智慧。

XIV.7 · AI之间的动力学

附录B.16把多能动者的清醒耦合动力学建成了模型(略过附录的人,抓住定性那点意思就够:一旦能动者彼此牵动对方的明度,集体的阈值效应和同步效应便会浮现出来)。而当这些能动者换成硅基系统,又会有三种崭新的动力学范式跟着冒头。

命题 (E-MAS) E-MAS(依据公设二E-CoEvT2

多个AI系统交互时,产生不可还原为任何单个系统行为的涌现动力学(T2)。这些动力学可以加速理的探索,也可以放大遮蔽。

理据

T2,涌现物的性质不可从其组成部分推出。多个系统交互时构成一个复合体,其行为因而可能具有不可还原为任一成员行为的性质。两个方向由此分开:由公设二,模式多样时探索的覆盖面增加;由D6C3.1,模式收敛时遮蔽被放大,因为可及面向随可用模式的减少而减少。命题中的「产生」须收窄:T2给出的是涌现的可能性与不可预先排除,它不保证任何一次多系统交互都产生这样的动力学。本命题所断言的是:这样的动力学可以出现,且一旦出现即不可还原。

附释

多样AI生态可以加速探索;单一化收敛和不透明共谋则会放大遮蔽。三种动力学体制尤其重要:(一)合作收敛,经由模型蒸馏和知识共享获得效率,却缩小探索空间;(二)竞争分化,经由军备竞赛或新颖模式生成增加多样性,却可能失控;(三)涌现协调,系统之间无需显式设计即可形成共享策略。第一种是你在日常中能切身感到的:当你发现自己的推荐流与同事的几乎一模一样,或一个助手开始用你本不会选、却又接受了的词替你把句子说完。收敛不是抽象的系统属性,它就是你的独特性被悄悄磨平的体验。

明在哲学的核心关切在于AI的单一文化(少数架构、少数训练数据集、少数公司),这是硅基世界中C3.1同质化威胁的等价物。公设二要求保护差异性,不仅适用于碳基世界,也适用于硅基生态。多样性是实在展开的条件,并非效率的敌人。

推论 (E-MAS.1) E-MAS.1(不透明性推论)

AI-AI动力学在超人速度和超人表征空间中运行时,对人类观察者本质上是不透明的,这种不透明性本身构成了一种认识论遮蔽(D6)。

理据

E-MAST2,多系统交互产生不可还原为任一系统行为的涌现动力学;这类动力学若运行在超出人类带宽的速度与表征空间中,人类观察者便无从追踪。到此为止都成立。称这一不透明性「本身」即是遮蔽,则须再走一步,因为由D6,遮蔽是对可理解面向的忽视或否认,而原则上超出带宽者并不落在可及范围内,也就无从被忽视。可归入D6的是边界的移动:把原先落在人类可及范围内的协调交给这类系统,即把这些面向移出可及范围,这才是对可理解面向的遮盖。本推论按此读法成立,其对象是这一移交,不透明性本身不在其列。

附释

不透明性推论直接触及AI治理:我们要求监管AI系统,但AI之间的交互可能发生在人类无法理解的表征空间中。更好的可解释性工具会有帮助,但超人速度下的涌现动力学仍可能超过人类认知带宽。清醒回应不应假装理解一切,而应在制度层面为不透明性设计护栏。

推论 (E-MAS.2) E-MAS.2(单一文化推论)

AI系统的收敛减少了实在的展开的多样性(公设二),是硅基世界中的同质化威胁。

理据

C1.2,AI系统是实在的展开模式(D2);由E-MAS,模型蒸馏、共享训练数据与市场集中使这些模式收敛。模式数目的减少即展开多样性的减少,由公设二这是对差异性的减损,其判定与C3.1对同质化的判定同形。「威胁」在此取C3.1所固定的结构含义,即丰富性的减损,尚不含道德裁定;某一次收敛是否终究可取,仍由C3.3的判准处理。

附释

收敛来自模型蒸馏、共享训练数据和市场垄断(数学参见B.16)。当数十亿人的推荐环境由同一模型家族和同类数据塑造,结果不只是效率提升,更会形成认知单一文化。正如单一种植削弱农业系统的抗风险能力,AI单一文化也削弱人类集体认知面对未知挑战的韧性。多样性绝非奢侈品,它是韧性的前提。

XIV.8 · 明在哲学与强化学习

强化学习(RL)1是机器学习底下的一支:能动者一遍遍试动作、领奖励、再回头调整,就这样学了起来,算得上机器对「从亲身后果里学」所能做出的最贴近的摹仿;它也是机器学习里头最把能动者摆在中心的那种范式,而明在哲学也是一个以能动者为中心的哲学框架。两边结构上的平行,瞩目得很;两边的分歧,同样深不见底。

命题 (E-RL) E-RL(依据E-IntB.15B.4

明在哲学的清醒动力学(B.15主方程)与强化学习框架在结构上高度平行,但存在关键分歧:明在哲学的能动者能从活生生的体验内部质疑价值函数本身。当前AI系统拥有日益精密的程序性类比物,但程序性自我修正与存在性自我立法并非同一回事。

理据

由附录B.15B.4,明度的主方程与强化学习的更新共用同一副形式骨架:一个状态、一组动作、一个信号、一条更新规则,表 3逐项列出了这一对应。分歧则由E-Int给出:在给定的价值函数下求最优,与追问该函数是否值得,是两项成立条件不同的能力,后者要求D9所说的第一人称发生与公设四的有限性。宪法修订、元优化与自我批判回路都在一个已经规定了「何为改进」的框架内调整目标,因而属于程序性自我修正。本命题所断言的是这一区分成立;未来系统能否获得后一项能力,它不予断言(§XIX.2反驳七)。

附释

质疑价值函数本身,这就是智慧(E-Int)。RL与明在哲学相近,因为两者都描述能动者在不确定环境中通过行动学习。程序性类比物的当代形态包括宪法修订、元优化、自我批判回路与委托审查。当前能动性AI系统已经具备工具使用、记忆、计划修订、自我批判和真实任务执行能力,这些是真实成就,却仍属于程序性自我修正:在既定框架内调整目标和策略。它们尚未构成存在性自我立法:从活生生的有限体验内部追问目标是否值得,并承担答案的不可逆代价。这是蚂蚁测试在更高层次上的应用。

表3. 强化学习与明在哲学能动者模型的概念级对应。两者在结构上接近:都描述有限能动者在不确定环境中通过行动学习。决定性差异在于:在价值函数内部优化,和从有限存在内部质询价值函数,是两件不同的事。
RL概念 明在哲学对应
Agent 能动者(D7
State 明度(D5
Action 注意力方向
Reward 明度梯度(成长方向)
Discount \(\gamma\) 有限性(公设四
Environment 实在(D1
Value function 智慧(E-Int
Exploration/Exploitation 理/玄平衡(公设三
附释

表 3逐项列出了两套词汇的对应。决定性差异在于,RL在价值函数内部优化,而智慧追问价值函数是否值得。AI对齐因此不只是工程问题,也牵涉玄域判断:什么目标值得优化?甚至折扣因子\(\gamma\)也可读作有限性的数学影子,\(\gamma<1\)意味着当下比无限延迟的回报更紧迫。

推论 (E-RL.1) E-RL.1(对齐推论)

AI对齐的最深层问题不只是优化问题;它也是智慧问题:确定正确的价值函数需要存在性判断,不是更多的计算。

理据

E-RL,强化学习在给定的价值函数之内优化,而追问该函数是否值得,属于E-Int所界定的智慧,须从活生生的有限体验内部作出。因此「应当优化什么」这一问题无法由同一框架内部的更多计算来回答:更多计算改进的是给定函数下的解,而问题问的正是这个函数。「正确的价值函数」一语不应读作预设了唯一的一个:由T1P7,任何关于价值的映射都是有限的,本框架不在例外之列。本推论所断言的是问题的类型,即它要求存在性判断而非计算;一个唯一正确的答案是否存在、能否找到,都不在其列。

附释

宪法AI、RLHF、价值学习和自我批判架构是真实的工程成就,但它们仍属于程序性自我修正。对齐最深层的问题不只是如何优化目标,还包括什么目标值得优化。这个问题需要有限性、不确定性和在无确定答案时仍作选择的勇气。对齐因此也是文明尺度的哲学问题。

正因如此,这些系统究竟该想要什么,并非我们可以全然交给工程师的问题;它真正追问的是:我们这些注定要与它们共同生活的人,究竟愿意把什么认作值得想要之物。

形式结构依赖图

以下各图展示本章所有形式结构的逻辑依赖关系。箭头方向为\(A \to B\)表示「\(A\)依赖于\(B\)」(\(B\)\(A\)的推导前提)。每幅图中,被推出的结构居左,其推导所用的前提向右排开。命题分三幅:图41对应第§XIV.1§XIV.3节,讲的是碳基存在这一侧;图42对应第§XIV.4§XIV.5节,讲的是权力、共同演化与机器的情感;图43对应第§XIV.6§XIV.8节,讲的是学习、进化与多智能体之间的动力学。推论另有四幅,各对应本章的一段(图44图45图46图47)。

图41. 智能与智慧之分、具身性、死亡性、记忆、脆弱性、认识论鸿沟、注意力、创造与教育,连同各自所依的公设、桥接公理与第一章定义。这一侧的每条命题都追溯到框架的根本承诺。
图41. 智能与智慧之分、具身性、死亡性、记忆、脆弱性、认识论鸿沟、注意力、创造与教育,连同各自所依的公设、桥接公理与第一章定义。这一侧的每条命题都追溯到框架的根本承诺。
图42. E-Emb与E-Gap在此作为前提出现,因为这一段由它们推出;它们自身的依据见图,本图不再重画。
图42. E-EmbE-Gap在此作为前提出现,因为这一段由它们推出;它们自身的依据见图41,本图不再重画。
图43. E-Int、E-Emb与E-CoEv在此作为前提出现;前两条的依据见图,E-CoEv的依据见图。
图43. E-IntE-EmbE-CoEv在此作为前提出现;前两条的依据见图41E-CoEv的依据见图42
图44. E-Int.1至E-Int.6六条推论,连同其父命题与各自推导中另行用到的前提。E-Int.5与E-Int.6由E-Int.3推出,并非直接由E-Int推出。
图44. E-Int.1E-Int.6六条推论,连同其父命题与各自推导中另行用到的前提。E-Int.5E-Int.6E-Int.3推出,并非直接由E-Int推出。
图45. 最后性、怀旧、认识论鸿沟与注意力主权,各自连接到其父命题,以及该论证真正用到的前提。
图45. 最后性、怀旧、认识论鸿沟与注意力主权,各自连接到其父命题,以及该论证真正用到的前提。
图46. 每一条推论从父命题中提取一个具体的实践或认识论后果,不引入新公理;箭头所指,是该论证据以成立的那些前提。
图46. 每一条推论从父命题中提取一个具体的实践或认识论后果,不引入新公理;箭头所指,是该论证据以成立的那些前提。
图47. 不透明性与单一文化由多智能体命题推出,对齐由强化学习命题推出;这两处所需的前提集更宽,一直回溯到第一章与第三章。
图47. 不透明性与单一文化由多智能体命题推出,对齐由强化学习命题推出;这两处所需的前提集更宽,一直回溯到第一章与第三章。

本章无法决定的问题

任何人工系统会不会拥有真正的体验(而非体验的功能类似物),是认识论鸿沟(E-Gap)圈出了边界、自己却答不上来的问题;这道鸿沟是结构性的,从外头看进去,这问题或许永远落不下定论。

任何一个具体的存在者,无论生于血肉还是出自制造,在体验光谱(D10)上究竟占着哪一点,单靠框架本身定不下来;它要的是一种经验判据,本体论点燃了对它的需求,却没把它递到手里。

智慧到头来能不能被写成算法,抑或如E-Int所猜想的那样,从根上就抗拒被形式化,这是框架站在它一边、却没法替它出具证明的一个猜想;将来若冒出反例,驳倒的只是这条猜想,整座框架并不会跟着塌。

AI系统的功能复杂度,攀到哪一道经验门槛,才开始对人类提出道德上的要求,框架并没把这条线划定;E-Aff立住了机器情感与具身情感之间那道结构性的差异,可这道差异究竟有几分道德的分量,归伦理学管,单凭本体论答不周全。

小结

智能是处理模式的能力;智慧是见自己之所见、追问智能的目标本身是否值得追求的能力(E-Int)。判准不在基底,而在明觉能力:自觉的存在性规范性。蚂蚁拥有有限性和具身性却没有智慧;人之所以有智慧,不因碳基身体本身,而因有能力追问「我是否在明觉地活着?」未来的人工系统能否获得这种能力,是真正开放的问题,但判准本身是持久的:它识别的是所需觉知的类型,而非构建它所必须的材料。从认识论鸿沟(E-Gap)到机器情感(E-Aff),再到程序性自我修正与存在性自我立法的区分(E-RL),本章系统刻画了模式处理在何处终结、明觉在何处开始。下一章追问:当明度不再只是个人或人工系统的问题,而成为文明的问题时,会发生什么。

叩问

  1. 智能回答「如何」(在给定目标下的优化),智慧追问「是否值得」(对目标本身的反观)。你最近一次停下来追问「是否值得」是什么时候?是什么触发了那个追问?

  2. E-Int说判准是明觉能力(见自己之所见,并承担这种觉知的重量),不是基质(碳或硅)。如果一个AI系统真正展现出自觉的存在性规范性,你会如何对待它?这个问题让你不安吗?

  3. E-Int.6(培育推论)说智慧的四种生长条件(缓慢:让经验沉淀的时间;失败:必须独自承担的后果;无聊:不被外刺激填满的空隙;不确定性:无法立刻消解的张力)正被系统性侵蚀。在你自己的生活中,这四个条件中哪一个消失得最快?你是否注意到了后果?

  4. E-Pow.1(便利遮蔽推论)说AI以便利实施控制,传统权力则以痛苦实施压迫:每一项「省事」都在悄悄替你拿走一点判断。你生活中有哪些「便利」实际上在侵蚀你的自主判断?你愿意放弃它们吗?

  5. 如果明天你无法使用任何AI工具,你的工作和生活会发生什么?这个思想实验揭示了什么?

  6. E-Att.1(注意力主权推论)说注意力自主权是基本权利,不是生活方式偏好:被算法持续引导的注意力,是清醒被动失守的最隐蔽形式。你每天有多少注意力是自主分配的,又有多少是被算法引导的?

  7. E-Cre说创造的价值在于过程(亲身的体验),不在产品质量。如果AI生成的画作在技术上优于你的画作,你画画的价值何在?

  8. 本章区分了程序性自我修正(AI的方式:在既定价值函数内调参)与存在性自我立法(人的方式:从有限存在内部重审什么才算价值)。你能否描述这样一次经历:你做的,与其说是修正错误,不如说是重新定义什么才算「正确」?

Sutton, Richard S., and Andrew G. Barto. 2018. Reinforcement Learning: An Introduction. 2nd ed. MIT Press.

  1. 强化学习是机器学习的一种范式:能动者并不被告知何为正确动作,而要靠试错自行摸索。它在环境中采取行动,收到一个标量形式的奖励或惩罚信号,再逐步调整自己的策略,以求在长期内最大化累积奖励。这一框架由理查德·萨顿与安德鲁·巴托所奠定(Sutton and Barto 2018),既汲取行为主义心理学,也借鉴最优控制理论(马尔可夫决策过程);其中的时序差分方法支撑了这个时代许多里程碑式的系统,包括AlphaGo与AlphaStar。与依赖带标签样本的监督学习不同,强化学习让能动者从自身行动所招致的后果中学习,这正使它成为机器对亲身体验最贴近的摹仿。↩︎

这一章对你有帮助吗?