智能增强中的伦理与社会挑战
Linas Juozenas分享
公平 · 新兴技术 · 负责任的创新
谁能从中受益?打造公平、安全、共享的创新
一项突破并不会仅仅因为在实验室中有效或进入市场,就算完全成功。它的真正价值还取决于谁能够使用它、谁的需求塑造了它、谁承担其风险,以及当它造成伤害时,人们能否提出质疑、拒绝或寻求补救。
- 有意义的获取机会
- 人权
- 相称的保障措施
- 公众参与
真正的问题不只是“我们能造出来吗?”
新兴技术可以拓展人类的可能性,也可能以更快的速度和更大的规模重现旧有的排斥。负责任的创新会追问:我们正在创造什么样的进步,为谁创造,以及由谁掌控。
人工智能可以翻译课程、辅助诊断,让复杂工具更易使用。基因和细胞疗法可以针对疾病的生物学成因,治疗那些过去只能持续进行症状管理的疾病。神经技术可能帮助一些有严重功能障碍的人恢复交流或行动能力。每一项发展都可能真正有价值,但并不一定人人都能获得、对所有人都同样有效,或在伦理上已经完整。
发明与公共利益之间的差距,正是许多伦理问题产生的地方。一项服务在技术上可能已经存在,但由于价格难以负担、缺乏无障碍设计、不提供个人所用的语言,或依赖其社区并不具备的基础设施,仍可能无法使用。一套系统平均来看可能运行良好,却一再让某个较小群体失望。一种治疗可能在临床上令人印象深刻,但需要专科中心、长期照护、出行和后续随访,因此其可及性远比单看价格所显示的复杂得多。
这意味着消除不公正的障碍,审视利益与风险如何分配,满足不同需求,并保护每个人理解、选择、拒绝和寻求补救的能力。
2025年,国际电信联盟估计仍有22亿人处于离线状态,其中大多数生活在中低收入国家。1 连接性已大幅扩展,但仅看互联网用户数量这一醒目数字,并不能反映连接质量、设备使用机会、可负担性、数字技能、无障碍程度,或当地是否提供有用的服务。医疗保健、教育和公共服务中也存在类似层次。
一项突破有效
研究人员证实,在既定条件下,一种方法能够产生预期效果。
系统能够触达人们
基础设施、机构、受过培训的工作人员和可持续的融资,使试验之外的实际使用成为可能。
人们能够公平受益
可及性、结果、选择和问责应在不同人群之间进行考察,而不能根据平均值想当然地推定。
可及性是一条至少包含六个环节的链条
称某项产品“可获得”,可能会掩盖它的存在与个人安全受益能力之间的实际距离。
只要任何一个关键环节失效,名义上的可及性就可能带来很少的实际益处。一个免费学习平台,如果一个家庭只能共用一台不可靠的设备,就不能称为真正可及。一个诊断模型如果对某个子群体表现不佳,而临床医生又未获提醒,就不公平。如果出行、生育力保存、离岗时间或长期照护仍然无法实现,仅仅因为保险承担药品费用,并不意味着患者能够获得一种高度先进的治疗。
平等与公平相关,但并不相同
平等通常意味着提供相同的资源或规则。公平则考察不同的起点和需求是否会使这种形式上的平等供给无法带来公平的机会。有时,最公平的设计是普惠性的:字幕、清晰的语言和安全的默认设置能够帮助许多人。有时则需要额外支持:适配的界面、出行援助、社区卫生工作者或离线途径。
一个系统可以改善平均结果,却让较小群体的结果变差。评估应报告纳入了哪些人、相关群体之间的表现有何差异,以及是否有人承受了新的或不成比例的负担。
不平等可能在创新的每个阶段出现
偏见不仅是算法中的缺陷。它可能始于哪些问题能够获得资助,贯穿研究与设计,并在工具面对不平等的世界时再次显现。
-
问题选择
投资会受到激励机制、政治重点和购买力的影响。即使影响市场能力较弱的人群所面临的需求具有很高的社会成本,也可能仍未得到充分研究。
-
证据与数据
谁参与会影响研究人员能够了解到什么。缺失的群体、糟糕的测量、历史性歧视,以及基于过去错误决策的标签,都可能在模型训练或产品测试之前塑造结果。
-
设计选择
语言、默认设置、设备要求、对感官能力的假设,以及对“正常”的定义,决定了谁能舒适地使用系统,以及谁的行为会被视为例外。
-
部署条件
在一个机构中验证过的工具,在人员配置、基础设施、文化、疾病流行率或激励机制不同的地方,表现可能会有所不同。情境是性能的一部分。
-
结果与负担
衡量的不应只有准确率或采用率,还应包括等待时间、错误决策、隐私损失、无偿劳动、环境成本,以及无法选择退出的后果。
-
反馈、修复与退出
最接近故障的人往往最先发现问题。他们需要一个明确可见的报告渠道、及时的人工回应、记录更正,以及在调查问题期间可安全使用的替代方案。
多元化的上线团队或一次咨询无法保证结果公平。参与必须影响决策,部署后还必须持续监测,因为用户、条件和技术都会发生变化。
相同的伦理原则在不同技术中呈现出不同面貌
人工智能、生物技术和神经技术不应被作为一个不加区分的类别来治理。干预的深度、可逆性、证据、受影响的权利以及错误的后果都很重要。
可及性不只是给每位学习者一个应用程序
人工智能可以提供翻译、示例、反馈和额外练习。然而,学习取决于课程质量、教师支持、可靠的设备、语言覆盖范围、无障碍性,以及学生是否仍在进行思考。用于招生、评分、纪律处分或学习者画像的系统,需要比可选的头脑风暴工具接受严格得多的审查。
- 为基本服务提供非人工智能途径。
- 让教育工作者对具有重大影响的判断负责。
- 测试无障碍性、错误分布不均和虚假掌握。
- 尽量减少对儿童和学习者数据的收集。
效率不能抹去正当程序
自动化可以帮助处理案件或识别模式,但如果对医疗、就业、信贷、福利或公共安全作出错误决定,个人可能受到严重伤害。正确的问题不是模型是否令人印象深刻,而是其在决策中的作用、所依据的证据和保障措施是否恰当。
- 当自动化系统实质性地影响决策时,应通知相关人员。
- 提供易于理解的理由和有实质意义的人为审查。
- 防止审查者只是批准机器的结果。
- 记录并调查错误和申诉的模式。
药物只是获取治疗的一部分
美国食品药品监督管理局于2023年12月批准了首个基于CRISPR/Cas9的镰状细胞病治疗,而不是在2025年批准。5 它的问世是重要的科学里程碑,也说明获取机会不能简化为价目表:治疗可能涉及专门中心、干细胞采集、强化预处理、长期照护、生育方面的考量以及长期随访。
- 将益处和负担与现有护理进行比较。
- 在疾病负担最重的地区规划能力。
- 将出行、时间、支持和后续随访纳入融资安排。
- 建立登记册,并开展透明的长期安全监督。
亲密数据需要持久的责任
神经技术涵盖从非侵入性研究和消费设备到植入式医疗系统的各种形式。这些用途并不具有相同的风险。侵入性更强或影响更重大的系统,会引发有关心理隐私、不断变化的同意、网络安全、维修、软件支持、衍生数据所有权,以及公司撤回产品时责任归属的问题。
- 将治疗性证据与增强功能营销区分开来。
- 将同意视为持续过程,而非一次性签名。
- 规划维护、替换和安全停用。
- 限制神经数据和行为数据的二次使用。
新兴技术的伦理指南针
伦理原则不会自动产生唯一答案。它们使重要价值变得清晰,揭示冲突,并帮助机构解释一项决定为何合理。
以人为人相待
不要把人简化为预测结果、评分、基因组、诊断结果或数据来源。技术应在人权框架内运行,而不应为了便利而重新定义人权。
让选择具有实质意义
同意需要提供易于理解的信息、免受不当压力,并有现实可行的替代方案。难以读懂的告知并不构成真正的控制。
检验完整影响
将承诺的益处与身体、心理、社会、经济和环境风险进行比较,包括由错误或滥用造成的伤害。
审视分配情况
应询问具有相似需求的人是否受到一致对待,以及既有不利处境是否造成不平等的访问机会、暴露风险或结果。
少收集,并妥善保护
有用的数据也可能敏感。限制收集、访问、保留和再利用;在系统整个运行周期内保护系统。
确保责任主体可识别
必须有人拥有调查、纠正、赔偿、暂停或撤销某一系统的权力和责任。“算法决定的”不等于问责。
从原则到治理
联合国教科文组织《关于人工智能伦理的建议书》将人权和尊严置于核心,并呼吁实现公平、包容和人类监督。2 世界卫生组织关于卫生领域人工智能和人类基因组编辑的工作,同样将科学机遇与安全性、有效性、伦理以及负责任的机构联系起来。4 这些框架之所以有价值,是因为它们涵盖技术的整个生命周期,而不是把伦理视为最后的审批环节。
某种做法在技术上可能合法,但仍可能具有剥削性、缺乏可及性、误导性,或没有充分证据支持。相反,不同司法管辖区可能对同一风险采取不同监管方式。组织仍须负责作出有依据的判断。
负责任的进步应采用与风险相称的防护措施
有益的选择很少是“创新还是伦理”。真正的任务,是根据可能后果的严重程度,匹配证据、监督和可逆性。
拼写助手、课堂评分系统、人工智能诊断设备和植入式脑机接口不应经过完全相同的关卡。一个系统越难以逆转,越影响基本权利,覆盖人数越多,越在缺乏真正选择的情况下行动,使用的数据越敏感,或可能造成的伤害越严重,其治理要求就越高。
| 背景 | 示例 | 最低限度的问题 | 防护强度 |
|---|---|---|---|
| 低后果且可逆 | 可选的个人笔记重组工具。 | 数据是否受到保护?输出结果能否核查?用户能否轻松退出? | 清晰的信息、安全的默认设置以及简单的纠错机制。 |
| 中等后果 | 推荐练习或内容的学习系统。 | 它是否适用于不同学习者?它会缩小机会范围或造成依赖吗? | 教育工作者监督、无障碍测试以及持续的结果审查。 |
| 高后果 | 影响就业、教育机会、信贷、福利或临床护理的系统。 | 使用是否合法且必要?有哪些证据支持?个人能否有效提出申诉? | 独立评估、文档记录、受过培训的人类权威、审计以及可执行的补救措施。 |
| 身体性或深度涉及个人的干预 | 基因疗法或植入式神经技术。 | 安全性和收益是否已有充分证据?同意是否持久有效?谁来提供终身支持? | 临床与伦理审查、专业监管、长期监测和连续性规划。 |
分阶段设闸创新
-
明确预期收益和不可接受的伤害
在开始构建前明确目标人群、应用场景、要解决的问题和边界。记录由谁参与了这些内容的定义。
-
在扩大规模前验证假设
采用具有代表性的证据、现实条件,并与现有替代方案进行比较,而不仅仅展示有利的演示结果。
-
在仍存在不确定性的领域逐步部署
限制范围,密切监测并保护参与者。监管沙盒应是受控的学习环境,而不是免除权利或安全责任的特区。
-
保持回滚可能性
明确暂停阈值、人工替代方案、数据更正、事件响应,以及暂停期间对受影响人员承担责任的主体。
-
以证据为依据重新授权
审查绩效、结果分布和新风险。不能仅仅因为一个系统已经为人熟悉,就自动允许其继续运行。
欧盟《人工智能法案》体现了基于风险的方法:该法案于2024年生效,并分阶段适用,对禁止性做法、通用人工智能模型和某些高风险系统规定了不同义务。3 具体法律义务取决于系统、角色、用途和当前实施时间表,因此组织应查阅官方文本并寻求合格的法律指导,而不应依赖简化的标签。
将包容性融入基础设施、研究和服务交付
公平获取无法仅靠最后提供折扣来弥补。这需要从最初的研究问题,到融资、部署和长期支持,始终进行协调一致的决策。
打造有意义的连接
覆盖只是起点。可靠的电力、可负担的服务、合适的设备、维护、安全的身份系统、数字技能,以及离线或低带宽选项,决定了连接能否转化为能力。
将无障碍设计视为核心质量
采用公认的无障碍标准,让残障人士参与测试,并支持以多种方式感知、理解和操作服务。在排斥发生后再进行改造,通常更困难,也更不完整。
本地化不应止于文字
翻译不会自动带来文化或实践上的相关性。示例、假设、风险沟通、付款渠道和支持措施必须适应人们将采取行动的环境。
共享决策权
当协商能够改变要求、预算、时间表或项目是否推进时,协商才真正重要。应补偿社区专业知识,并报告意见如何改变了设计。
以负责任的方式改善代表性
招募应针对有充分依据的证据缺口,而不应将社区视为数据来源。除样本多样性外,还应重视知情同意、利益共享、治理以及有用研究结果的反馈。
为完整服务路径提供资金
应综合考虑价格、交付能力、劳动力、出行、支持性照护、监测和机会成本。没有可行服务路径的融资产品仍然无法获得。
利用采购能力奖励负责任的设计
公共机构、医院、学校和大型雇主可以将无障碍、数据保护、互操作性、子群体表现、事件报告和退出支持纳入采购要求。合同可以要求供应商披露重大变更、协助数据迁移,并在约定期限内继续提供关键支持。
对于高成本疗法,融资试验可以将付款与结果挂钩,或协调不同支付方之间的谈判。美国自愿参与的 CMS 细胞和基因疗法可及性模式最初聚焦于镰状细胞病,是一个例子:参与州和制造商采用由 CMS 谈判达成的基于结果的协议,同时该模式也认可与治疗相关的实际支持。6 应将其作为一个持续运行的模式进行评估,而不应将其视为所有可及性问题都已解决的证明。
当伙伴关系能够培养本地研究领导力、技术技能、维护能力、治理能力和决策权时,合作会更加稳固。捐赠一种工具,却不赋予当地适应、修理或质疑它的能力,可能会造成一种新的脆弱性。
为塑造技术的人制定的实用路线图
责任是共同承担的,但不能分散到无人需要负责的程度。每个机构都有各自的着力点和职责。
| 利益相关方 | 开发或采购前 | 部署期间 | 推出后 |
|---|---|---|---|
| 政府和监管机构 | 制定基于权利的规则,为被忽视的需求提供资金,评估基础设施,并要求与风险相称的证据。 | 开展检查、执行规定、发布指导,并保护独立研究、投诉和举报。 | 追踪结果,堵住漏洞,跨境协调,并提供有效的补救措施。 |
| 企业和投资者 | 明确预期用户和禁止用途;为无障碍、安全、支持和负责任的退出安排预算。 | 记录局限性,监测错误的分布,并赋予产品团队暂停不安全工作的权力。 | 报告严重事件,纠正伤害,维护关键产品,并避免抛弃依赖这些产品的用户。 |
| 研究人员和大学 | 选择具有社会意义的问题,改善代表性,并建立有意义的知情同意和治理机制。 | 维护研究诚信,登记适当的研究,并报告局限性和不利发现。 | 负责任地分享有用知识,支持复现,并研究出版之外的现实影响。 |
| 卫生和教育机构 | 将这项技术与现有做法进行比较,并纳入专业人员、患者、学习者和照护者。 | 培训用户,维护人的责任,并提供无障碍的替代方案和申诉渠道。 | 衡量学习、健康和公平方面的结果,而不仅仅是使用情况;对于无法证明其负担合理的系统,应停止使用。 |
| 社区和民间社会 | 明确需求、不可谈判的权利,以及在当地具有实际意义的受益定义。 | 观察实施情况,支持公众理解,并找出隐藏成本或被排除的群体。 | 利用投诉、公益研究、倡导和参与式审查来要求纠正。 |
如果受影响的人无法理解一份冗长的技术文件,也无法利用其中的信息采取行动,仅仅发布这份文件是不够的。有效的透明度应将清晰的解释与选择权、监督、纠正措施和问责后果联系起来。
简明公平影响审查
在提案阶段、上线前以及预定的审查节点,使用这些问题。答案应有证据支持,并分配给明确的负责人。
扩大规模前的十二个问题
如果证据缺失,应记录不确定性,并决定如何解决。沉默并不代表风险较低。
- 究竟要解决什么问题,是谁定义了这个问题?
- 预期谁会受益,而有意义的获益应是什么样?
- 哪些人可能因成本、语言、残障、地点、设备或机构规则而被排除?
- 哪些群体在证据中缺失,或所占比例过小?
- 收集、推断、保留、共享或重复使用了哪些数据?
- 人们能否在不放弃不必要隐私的情况下参与?
- 同意是否真正出于自愿、易于理解且可以撤回?
- 不同相关人群的错误和结果有何差异?
- 系统出错时,一个人会面临什么情况?
- 具备资质的人是否能够审查并改变具有重大影响的决策?
- 谁可以暂停、修复或撤回该系统,以及在什么阈值下进行?
- 谁来为支持、纠正、过渡和长期义务支付费用?
值得保留的证据
- 目的记录:预期用途、禁止用途、目标人群、替代方案和成功标准。
- 参与记录:参与者、选定方式、报酬方式,以及由此发生的变化。
- 证据记录:数据集、研究对象、测试条件、不确定性和已知局限。
- 影响记录:相关群体的获益、错误、投诉、申诉、获取障碍和结果。
- 决策记录:明确的负责人、风险接受、纠正措施、审查日期,以及继续或停止的理由。
文档并不会仅仅因为存在就具有价值。它应帮助负责任的人理解系统、追溯决策、识别正在出现的模式,并在本可避免的伤害扩散之前采取行动。
常见误解与实际问题
简单的口号会让伦理分歧看起来比实际更容易解决。这些区分为更好的决策留出了空间。
公平会拖慢创新吗?
周全的防护措施可能需要时间和资源,尤其是对于后果严重的系统。但这并不意味着它们与创新相对立。在大规模部署后才发现设计无法使用、性能不安全或遭到公众拒绝,代价可能高得多。适当的推进速度取决于风险的严重程度及其可逆性。
突破性技术会自然而然地变得可负担吗?
一些技术会因规模化、竞争和学习而变得更便宜。另一些技术则依赖稀缺材料、专业劳动力、复杂制造、持续支持或强大的市场排他性。可负担性是技术、制度、融资和政策共同作用的结果,而不是自动成立的规律。
增加更多数据能解决算法偏见吗?
更具代表性且质量更高的数据可能有所帮助,但单靠数据量无法修复定义不佳的目标、不公正的历史标签、缺失的语境、不适合的部署方式或有害的用途。必须审视完整的决策系统——包括制度和激励机制。
开源是否自动意味着公平?
开放代码或知识可以降低某些障碍,并支持检查或本地适配。但人们仍可能缺乏使用它所需的计算资源、专业技能、合适的数据、支持或法律自由。开放也可能使不安全的能力更容易传播。其影响取决于开放的内容、面向的对象以及配套的保障措施。
透明度足以让一个系统符合伦理吗?
不。一套系统即使有清晰的文档,仍可能不安全、具有胁迫性或不公平。当透明度能够支持知情选择、独立评估、问责和补救时,它才至关重要。透明度是实质性限制的补充,而不是替代。
每个人都应平等获得每一种增强措施吗?
并非每项拟议的增强措施都安全、有益或符合社会期望,而医疗保健的优先事项必须考虑需求、证据和机会成本。公平并不要求不加区别地分配。它要求公平的推理、免受歧视的保护、有意义的参与,以及在获取可能造成持久的权力或排斥形式时给予特别关注。
一种全球性的伦理框架能适用于每一种文化吗?
实施应尊重语言、语境和正当的文化差异,同时,基本权利应保护人们免受以习俗为由开脱的胁迫或歧视。全球原则与地方参与应相互影响,而不是迫使人们在两者之间作出选择。
当许多组织共同构建了这个系统时,谁负责?
责任可以分担,但仍应明确。开发者、部署方、专业用户、采购方、高管和监管者可能承担不同的职责。合同和治理机制应明确由谁监测、响应、纠正、赔偿,以及决定是否可以继续运行。
当更多人能够塑造进步时,进步会更大
技术的能力只是其成就的一部分。其余部分取决于围绕它的制度和关系:研究是否反映真实需求,证据是否涵盖将依赖它的人,获取是否切实可行,选择是否受到尊重,以及错误能否被质疑和纠正。
伦理不应装饰创新,也不应将其冻结。伦理应帮助社会掌舵——让风险可见、设定边界、保护权力较弱者,并保留学习的空间。包容性会改善这一过程,因为社区能够贡献远方的设计者、投资者和监管者可能不具备的知识。
目标不是让每个人都使用相同的技术,而是让有价值的进步不会默认成为特权,不把脆弱性视为许可,并让人们继续参与那些会改变其教育、健康、工作、身体和未来的决策。
它确实有效。它解决了一个有价值的问题。人们能够接触并使用它。它所带来的负担是合理的,并且得到了公平分配。受其影响的人仍保有尊严、选择权以及切实可行的纠正途径。
本文仅用于一般教育目的,不构成法律、医疗、监管、投资或政策建议。相关要求和证据会发生变化;对于会产生重大影响的决策,请查阅当前官方来源并咨询合格专业人士。
证据视角与延伸阅读
此次改写以机构一手来源取代了原文章中缺乏依据的统计数据,以及不存在或描述有误的项目。
-
国际电信联盟——《2025年事实与数据》
关于互联网使用情况以及连接性、可负担性和质量方面持续存在差距的全球估计。 -
联合国教科文组织——《人工智能伦理问题建议书》
以人权、尊严、公平、包容、透明度和人类监督为核心的全球框架。 -
欧盟委员会——人工智能监管框架
欧盟人工智能法案的官方概览及当前分阶段实施时间表。 -
世界卫生组织——《人类基因组编辑:治理框架》
关于体细胞、胚系和可遗传人类基因组编辑的价值观、原则、机构与治理工具。 -
美国食品药品监督管理局——首批获批用于治疗镰状细胞病的基因疗法
美国食品药品监督管理局于2023年12月发布的公告,其中包括首个获其批准的CRISPR/Cas9疗法。 -
美国医疗保险与医疗补助服务中心——细胞与基因疗法可及性模型
关于基于结果的协议以及支持获得镰状细胞基因疗法的当前模型详情。 -
世界卫生组织——《人工智能促进健康的伦理与治理》
将人工智能在医疗领域的潜力与伦理、人权和公共问责相结合的指导方针。 -
美国国家标准与技术研究院——人工智能风险管理框架
围绕治理、绘制、衡量和管理人工智能风险而制定的自愿性框架。