系列导航 导读 第1篇 第2篇 第3篇 第4篇 第5篇 第6篇 第7篇 第8篇 第9篇 第10篇 第11篇
第12篇 第13篇 第14篇 第15篇 第16篇 第17篇 第18篇 第19篇 第20篇 第21篇 第22篇 案例系列 ↗

当算法决定生死:我们如何为AI决策划定边界?

【负主体性系列·第21篇生存性代价量化进路】


从”代价的肉身”说起

在上一篇文章中,我论证了一个令人不安的结论:人工智能无法成为真正的责任承担者

这不是技术问题——不是因为AI不够智能、不够准确、或者不够可靠。而是一个更加根本的问题:责任的本质,在于”被代价压着”——当你做出一个决定,这个决定的后果会不可逆地落在你的身上,你的身体会承受、你的生命会消耗、你的时间会流逝。这种”代价的肉身性”,是责任归属的根本性条件。

而人工智能,无论它多么强大,它不会饿、不会累、不会死。在”是否承担代价”这一特定维度上,一个AI系统做出”决策”和一块石头从山坡滚落并没有本质区别——都不会真正”承担”什么代价。

这个结论在哲学上是成立的,但它留给我们的现实问题更加棘手:既然责任鸿沟不可弥合,那我们怎么分配责任?

这正是本文要回答的问题。


生存性代价:指决策者因其选择而不可逆地消耗自身生命资源(时间、健康、自由、道德完整性等)的程度。其本质是”身体必须承受选择后果”的存在论事实。

这个概念不同于日常语言中的”代价”或”成本”:


一、我们需要一个”决策分拣器”

让我从一个具体的问题开始:自动驾驶汽车在紧急情况下应该保护谁?

这是一个经典的伦理困境——”运动中的电车难题”。当车辆高速行驶、前方突然出现行人时,系统必须在一瞬间做出选择:是转向保护行人但可能伤害乘客,还是保持车道保护乘客但可能伤害行人。

这个问题之所以困难,不在于技术,而在于它根本没有”正确答案”。保护乘客是自私的,保护行人是高尚的,但无论如何选择,都会有人失去生命。萨特(1946/1996)在《存在主义是一种人道主义》中说过:人在此刻被”判定为自由”(即:你无法以”我不知道”或”系统让我这么做”为由逃避选择的责任),无法逃避选择的责任。

面对这样的决策,我们有两个极端选项:

选项A:把决定权完全交给AI。让算法来决定”保护谁”。好处是算法反应快、计算准;坏处是算法的”决定”不承担任何代价,最终的责任归属将永远悬空。

选项B:把决定权完全交给人类。车内必须有人随时准备接管。好处是保留了人类决策的”担当”;坏处是在毫秒级的时间压力下,人类往往无法做出真正审慎的判断。

显然,两个极端都不是好选择。但我们如何在这之间找到平衡?

这就是”综合代价指数”(Composite Cost Index,简称CCI)框架要解决的问题:为不同类型的AI决策提供一个结构化的”分拣器”,帮助我们判断哪些决策必须保留给人类,哪些可以安全地委托给AI,哪些需要”有条件”地协作。


二、CCI框架的五把”标尺”

CCI框架将AI决策的”生存性代价”分解为五个可评估的维度。这五个维度不是凭空想象出来的,而是从”生存性代价”概念的不同侧面演绎而来。

需要说明的是:以下各维度援引了海德格尔、列维纳斯、萨特、梅洛-庞蒂等哲学家的洞见,但这些哲学家本人并未提出CCI框架,亦未以”生存性代价”为核心概念进行分析。以下用法是对这些哲学传统的创造性整合,而非对任何一位哲学家原意的忠实还原。

1. 后果不可逆程度

这个决策的后果能否被撤销?

“不可逆”是生存性代价最核心的特征。当决策的后果是死亡、器官损伤、不可修复的环境破坏时,决策者必须”永久承担”其选择的后果——这不是口头上的承认,而是身体必须承受的持久印记。

相比之下,可逆性后果——如可以退款的消费决策、可以撤回的邮件——所需的生存性代价要低得多。

评分锚点:1分代表完全可逆(如退款退货、可撤回的帖子),10分代表不可逆的灾难性后果(如死亡、永久残疾)。中间分值对应部分可逆的后果,如需要医疗干预才能康复的损伤。

2. 时间约束压力

做出决策可用的时间窗口有多大?

海德格尔(1927/1962)有一个深刻的洞见:人类存在是”向死而生”——我们存在于有限的时间中,每一刻都在不可逆地消耗着不可再生的生命资源。当决策面临紧迫的时间压力时,这种有限性变得尤为尖锐:决策者被迫在信息不完备的情况下做出选择,不得不”赌上”其有限的生命时间来换取决策的完成。

这意味着:即使决策本身是正确的,在极端时间压力下做出决策本身就是一种代价。

评分锚点:1分代表无时间限制或时间充裕,决策者可以进行充分准备;10分代表毫秒级生命支持决策,延迟本身构成不可接受的风险。中间分值对应中度时间压力,如需要数小时到数天做出响应的决策情境。

3. 受影响者范围

这个决策会影响多少人?

当决策的影响范围从个人扩展到家庭、社区、社会乃至全人类时,决策者所承担的”存在性重量”成倍增加。更重要的是,面对他者的面孔,我被召唤去承担对他者的责任——这种”责任召唤”具有不可拒绝性。

哲学家列维纳斯(1961/1969)在《整体与无限》中论证:当我面对他人的面孔(Levinas称之为”他者的面孔”——即他人以不可还原为概念或对象的方式向我显现,直接构成伦理要求),我无法声称”我不关心”。当受影响者增多时,这种责任召唤也相应增强。

评分锚点:1分代表仅影响决策者本人(如个人阅读偏好选择),10分代表影响全社会或全人类。中间分值对应影响特定群体的情况。

4. 价值冲突强度

决策涉及的价值取向之间有多难调和?

萨特宣称”人被判定为自由”——当面对不可通约的价值冲突时,决策者必须做出选择,而这一选择本身就是对自身有限性的承认:你无法同时实现所有价值,必须有所放弃。

电车难题是价值冲突的经典情境。现实中的决策往往更加复杂:不仅涉及生命数量的权衡,还涉及生命质量、代际公平、文化认同等不可直接量化的价值维度。

评分锚点:1分代表无价值冲突的纯技术判断,10分代表核心道德原则之间不可调和的冲突(如堕胎决策、难民政策)。中间分值对应存在一定价值考量但冲突不极端的决策情境。

5. 认知负荷预估

完成这个决策需要多少认知资源?

每一种认知活动都伴随着大脑的物理代谢过程。当决策所需的认知负荷增加时,决策者必须付出更多的”神经代谢成本”——这是一种特殊的生存性代价。

同时,认知负荷与决策质量之间并非线性关系。当认知负荷超过承载能力时,决策质量反而下降——这就是著名的”决策疲劳”(decision fatigue)现象。超出认知负荷极限的决策尝试,不仅消耗更多的生存性代价,还可能导致决策失误(Baumeister et al., 1998;但该效应近年来面临复制争议,参见Hagger et al., 2016)。

评分锚点:1分代表直觉判断或简单启发式(如根据习惯选择早餐吃什么),10分代表需要数小时深度分析、多学科专业知识整合的高复杂度决策(如重大投资决策、复杂病例诊断)。


三、三个治理层级:决策的”安全等级”

有了这五把”标尺”,我们就可以对具体的AI决策进行评估了。CCI框架将综合评分映射为三个治理层级:

安全委托(CCI < 4.0)

当一项决策的CCI值低于4.0时,表明其生存性代价较低。AI系统可以自主执行该决策,无需人类实时监控,但仍需建立事后审计机制。

典型场景:推荐算法、内容筛选、路线规划、简单数据处理。

有条件委托(4.0 ≤ CCI < 8.0)

当CCI值处于4.0至8.0之间时,生存性代价处于中等水平。AI可以执行或部分执行决策,但必须设置人类实时监控通道和干预机制,人类监控者承担监督责任并在必要时介入。

典型场景:医疗诊断辅助、金融风险评估、工业自动化、质量检测。

强制人类保留(CCI ≥ 8.0)

当CCI达到8.0及以上时,决策的生存性代价极高。AI只能提供信息支持和分析建议,最终决策权必须由人类行使。

典型场景:自动驾驶紧急避让决策、核打击决策、死刑判决。


四、四个典型案例:框架实战

案例一:自动驾驶紧急避让(CCI = 8.2 → 强制人类保留)

情境:车辆高速行驶中,前方突然出现行人,系统必须在毫秒内决定是转向保护行人还是保持车道保护乘客。

让我用CCI框架逐项评估:

维度 评分 理由
后果不可逆程度 10 涉及生命丧失,这是最高级别的不可逆后果
时间约束压力 10 毫秒级时间窗口,极端的时间压力
受影响者范围 4 直接影响车内1-4名乘客和车外行人,人数有限
价值冲突强度 10 必须在”保护乘客”与”保护行人”两个都具有道德正当性的选项间取舍——典型的存在主义式悲剧抉择
认知负荷预估 7 人类必须在极短时间内从放松状态切换至高度警觉,整合信息并做出生死抉择

CCI = (10+10+4+10+7) ÷ 5 = 8.2 → 强制人类保留

评分说明:以上评分基于典型情境假设。实际应用中,不同自动驾驶场景(如高速公路vs城市道路)、不同法规体系(如不同国家的交通法规)可能导致评分差异,需多方协商校准。CCI是相对排序工具,重点在于比较不同决策的代价高低,而非纠结某项评分是否恰好为某值。

关键洞见:很多人可能认为,自动驾驶系统在紧急情况下反应更快,所以应该让系统自主决策。但CCI框架揭示了这一直觉的盲点:时间压力本身就是生存性代价的核心组成部分。AI可以在毫秒内完成计算,但这种”无摩擦”的计算恰恰意味着它无法”真正承担”决策的代价。

这里需要区分两个层次:(1)”保护谁”的规范性判断——这个判断涉及生死之间的道德抉择,具有不可替代性,必须由人类在立法、设计阶段通过审慎的民主程序完成;(2)运行时按照预设规则执行的层面——AI在此的角色是规则执行,而非自主决策。CCI = 8.2评估的是第(1)层的决策,而非第(2)层的执行。换言之,CCI框架的价值不在于告诉你”谁来按方向盘”,而在于告诉你:这个决策的代价高到必须由人类社会预先确定规则,而不能交给工程师在代码里悄悄写定。

案例二:医疗AI诊断建议(CCI = 5.0 → 有条件委托)

情境:医疗AI系统(如影像诊断AI)为医生提供诊断建议,医生在系统建议的基础上做出最终诊断决策。

维度 评分 理由
后果不可逆程度 6 误诊可能导致严重健康后果,但通常有一定可修正性
时间约束压力 4 诊断通常有数日到数周的时间窗口(非紧急情况)
受影响者范围 2 主要影响患者本人及其家属
价值冲突强度 5 涉及生命延续vs生命质量、患者自主权vs家属意见等权衡
认知负荷预估 8 需要整合多源信息并进行综合判断,是高度专业化的认知任务

CCI = (6+4+2+5+8) ÷ 5 = 5.0 → 有条件委托

评分说明:评分因医疗场景而异。基层诊所的全科诊断与三甲医院的疑难病例会诊,评分可能显著不同。需根据具体情境调整。

关键洞见:医疗诊断的生存性代价主要来自”高认知负荷”和”中等价值冲突”。这意味着:AI系统在信息整合方面具有明显优势(可以快速检索海量文献、整合多源数据),但生命的价值权衡仍需人类医生与患者共同做出。

这支持一种”协作式”而非”替代式”的人机关系:AI作为”智能助手”承担信息整合工作,医生保留最终诊断决策权。

案例三:推荐系统内容筛选(CCI = 1.4 → 安全委托)

情境:抖音、Netflix等平台根据用户行为自动筛选和排序内容。

五个维度的评分均极低——后果可逆(1分)、无时间压力(1分)、影响仅限个人(1分)、无核心道德冲突(2分)、认知负荷低(2分)。

CCI = 1.4 → 安全委托

评分说明:虽然单个推荐决策的生存性代价极低,但推荐算法对用户注意力的长期引导可能产生累积效应(如信息茧房、注意力剥夺等问题)。这类累积效应属于平台治理层面的系统性问题,超出单次决策CCI的评估范围,需要另设框架来处理。

关键洞见:CCI框架的价值在于提供了系统性的论证——五个维度的评分都极低,说明决策的生存性代价微不足道,人类的介入不仅是多余的,反而可能因主观偏见而降低决策质量。

案例四:算法量刑辅助(CCI = 6.2 → 有条件委托,接近边界)

情境:法院使用AI系统(如美国的COMPAS系统)辅助刑事量刑决策,生成关于再犯风险的评估报告供法官参考。

维度 评分 理由
后果不可逆程度 8 监禁判决剥夺人身自由,对被告的影响是实质性的、难以弥补的
时间约束压力 4 量刑通常有相对充裕的审议时间(非紧急情况)
受影响者范围 4 直接影响被告本人及其家庭,对社会有示范效应
价值冲突强度 7 涉及”报应正义vs矫正正义”、”个体化vs标准化”等多维度价值权衡
认知负荷预估 8 需要整合法律规范、量刑指南、被告陈述、证据材料等多维内容

CCI = (8+4+4+7+8) ÷ 5 = 6.2 → 有条件委托(偏向边界)

评分说明:算法量刑辅助处于治理边界,评分对法律体系敏感。大陆法系vs英美法系、初犯vs累犯等因素均可能影响评分。框架建议对接近边界的决策强化人类审议要求。

关键洞见:这个案例处于”有条件委托”层级的边界,接近”强制人类保留”。框架的维度分析揭示了为什么:虽然时间约束压力较低,但后果不可逆程度(8分)、价值冲突强度(7分)和认知负荷(8分)都很高。这种”高/低交叉”的维度分布,正是边界案例的典型特征——不存在某一维度的压倒性高分,而是多个维度呈现中高度评分的叠加效应。

对于这类接近边界的决策,CCI框架建议强化人类审议要求:法官必须提供明确的”采纳或拒绝AI建议的理由”并记录在案;同时设置专门的上诉机制,允许被告挑战AI建议的依据。


五、阈值8.0和4.0:为什么是这两个数字?

你可能会问:为什么是8.0和4.0这两个阈值?它们是怎么来的?

这是一个好问题。阈值的设定植根于四重理论考量:

理论依据一:从概念结构推导

CCI值8.0意味着五个维度的平均评分为8分——这要求在多数维度上呈现高生存性代价特征(要么多数维度接近10分,要么所有维度都偏高)。当这种”高代价叠加”出现时,表明决策者必须同时面对”永久承担”、”有限时间”、”他者性抉择”等多重压力——这正是亚里士多德意义上”实践智慧”的本体论条件。

CCI值4.0则表示平均评分处于中等水平——后果有一定严重性但不致命、时间有一定压力但不紧迫。这表明委托AI处理不会产生存在论层面的责任鸿沟。

理论依据二:方法论支撑

阈值设定借鉴了多准则决策分析(MCDA)领域的成熟方法论:

理论依据三:案例分布验证

案例 CCI值 直觉归属 是否一致
推荐系统 1.4 安全委托
医疗AI诊断 5.0 有条件委托
算法量刑 6.2 有条件委托(边界)
自动驾驶紧急避让 8.2 强制人类保留

*注:”直觉归属”指基于领域常识的独立预判,而非框架内部推导——这增强了验证的说服力。

四个案例的CCI值分别落入直觉上合理的治理层级,这验证了阈值的内部一致性。

理论依据四:参照行业先例

ISO 31000风险评估标准将风险值分为”低-中-高-极高”四档。CCI框架的阈值设定借鉴了这一传统,同时针对框架的特殊需求进行了调整。

一个重要说明

阈值的最终选择是规范性判断,而非纯粹的经验发现。不同的伦理立场可能支持不同的阈值设定。例如:

CCI框架的阈值不是”绝对真理”,而是启动讨论的锚点。框架的价值在于将隐含的判断转化为显性的结构化争论——当不同利益相关方对同一决策的治理归属产生争议时,框架帮助他们识别争议的具体来源:是评分分歧?权重分歧?还是阈值分歧?

关于阈值的”整数感”:有人可能质疑”为何恰好是8.0和4.0”显得过于工整。实际上,若将阈值设为7.8或8.3,四个案例的治理归属不变——这说明边界具有鲁棒性,不是人为随意切割。


六、等权重方案:一阶近似的合理性

你可能还注意到,CCI的计算方式是等权重的——五个维度各占20%。为什么不赋予某些维度更高的权重?比如”后果不可逆程度”难道不比”认知负荷”更重要吗?

这是一个深刻的哲学问题。

打个比方:你第一次去一家餐厅,菜单上有十道菜,你不确定哪道最好吃。最稳妥的策略是什么?——每道菜都尝一点,而不是把所有赌注押在某一道上。因为在缺乏信息的情况下,均匀分配风险是理性的默认选择。等权重方案背后的逻辑与此类似:在没有充分理由偏爱某个维度之前,给五个维度以相同的权重,是最少预设、最多兼容的选择。

为什么是等权重?

第一,哲学传统的不可通约性。

CCI框架的五个维度分别植根于不同的哲学传统:热力学(不可逆性)、海德格尔(时间性)、列维纳斯(他者性)、萨特(价值冲突)、兰道尔原理/梅洛-庞蒂(认知负荷)。这些传统各有其独立的理论完整性,没有一个超越性的框架可以确定它们之间的权重关系。

第二,信息论的经济性原则。

在缺乏先验知识的情况下,等权重方案借鉴最大熵原理(maximum entropy principle)的思路,引入最少的额外信息。差异化权重则预设了关于维度重要性的先验知识——而这些知识恰恰是框架需要验证而非假设的。

第三,认识论谦逊。

等权重不等于等重要性。这是一种认识论谦逊的立场:等权重并不意味着”不可逆性”和”认知负荷”同等重要,而是承认我们在目前阶段还没有充分的理由来区分它们的权重差异。

等权重的辩护

认为”后果不可逆”比”认知负荷”更重要,这本身是一种价值预设。而这种价值预设的合理性依赖于具体情境:在某些情境中,影响范围的权重可能急剧上升(比如涉及大量生命的决策);在另一些情境中,不可逆性的权重可能更为突出。

更重要的是,等权重不等于等贡献。即使采用等权重,高不可逆性+高时间压力的组合,其CCI值仍然会高于低不可逆性+低时间压力的组合——因为各维度的高评分会共同推高平均值。

一个潜在的追问:当两个维度的评分相互关联时(例如,不可逆的死亡事故往往同时推高”后果不可逆程度”和”价值冲突强度”),等权重是否会导致”同一个因素被计算两次”?这种多重计数效应确实存在,它是任何多维评估框架的固有特征。在获得经验数据之前,等权重方案以认识论谦逊作为默认起点——它承认这种可能性,但选择不在此基础上引入更多预设来”纠正”它,因为任何纠正本身也依赖于尚未验证的假设。

后续研究方向

等权重方案是一个初始框架,后续可通过专家德尔菲法、层次分析法(AHP)或数据驱动校准进行权重优化。(这些方向将在后续研究中逐步探索。)


七、两篇论文的脉络:从”为何不可”到”如何分配”

回到文章开头的问题:如果责任鸿沟不可弥合,那我们怎么分配责任?

第一篇论文(《代价的肉身——为什么人工智能无法跨越”责任鸿沟”》)的回答是:本体论层面,责任鸿沟是不可弥合的。AI系统无论多么强大,都无法真正”承担”决策的代价——因为它不会饿、不会累、不会死。责任的本质在于”被代价压着”的存在方式,而这是AI在存在论层面无法具备的。

但本体论的不可弥合,并不意味着实践上的无所作为。第二篇论文(本文)回答的是:在操作层面,责任是可以分配的。通过CCI框架,我们可以系统地评估不同决策的生存性代价,据此确定哪些决策必须保留给人类、哪些可以委托给AI、哪些需要人机协作。

两篇论文构成一个完整的研究链条:

  第一篇《代价的肉身》 第二篇《生存性代价量化进路》
论证层次 本体论 方法论
核心概念 生存性代价 CCI框架
核心问题 为什么AI无法跨越责任鸿沟? 哪些决策需要人类保留?
实践指向 高风险决策必须由人类保留 在什么条件下保留?

八、结语:一个思考的新起点

在算法日益渗透生死抉择的时代,我们不能把”如何分配责任”简化为”如何优化算法”。人类必须保留对高生存性代价决策的最终裁量权——不是因为我们更聪明,而是因为我们会痛、会悔、会死。

CCI框架不是万能的。它有明显的局限性:维度选择和权重设定仍有讨论空间;评分依赖主观判断,需要逐步校准;框架目前处理的是单次决策的”静态评估”,尚未涵盖决策代价的动态变化和多案例累积效应。这些正是后续研究需要推进的方向。

但框架的核心价值不在于给出”标准答案”,而在于提供一个思考的结构

当我们面对一个新的AI决策场景时,CCI框架引导我们问五个问题:

  1. 这个决策的后果可以撤销吗?
  2. 做出决策的时间窗口有多大?
  3. 这个决策会影响多少人?
  4. 这个决策涉及哪些相互冲突的价值?
  5. 做出这个决策需要多少认知资源?

这五个问题,帮助我们将模糊的直觉判断转化为可讨论的结构化分析。当你发现自己在”自动驾驶应该保护谁”这样的问题上感到困惑时,不妨用这五个维度来分解问题——你可能会发现,困惑的根源不在于问题的复杂性,而在于我们尚未把问题拆解清楚。

但CCI框架回答了”哪些决策需要人类保留”的问题,尚未回答”当人机协作出错时,责任如何在开发者、运营者、用户和监管者之间分配”。这是下一篇文章要处理的议题。

责任鸿沟或许不可弥合,但在跨越鸿沟的实践中,我们可以做得更加审慎、更加结构化、更加可问责。

这,正是CCI框架想要提供的。


作者:龍德明宇

系列文章:负主体性之责任鸿沟系列

下一篇预告:《责任梯度的具体分配方案——从CCI到实际治理》


【学术声明】

本站学术工作按理论层级组织如下:

基础理论

核心理论

展开方向

以上学术成果均由作者龍德明宇完成。各篇在其所属层级内做出独立贡献,基础理论为下游展开提供统一根基,但不替代各方向的独立论证。