AI治理

AI决策出了事谁负责?企业AI问责机制的落地指南

2026年10月10日 彭志林 · 山海咨询创始人 6 分钟阅读

多数AI事故的根因不是技术,而是责任从未被指派。本文给出企业AI问责机制的四层结构(决策/场景/模型/数据)、上线前最小检查清单,以及山海七力视角下的落地顺序。

分享这篇文章

AI决策出了事谁负责?先说结论

AI 决策一旦出事,多数企业第一反应是查模型,但根因常常不在技术——责任从来没被明确指派过。结论是:AI 问责机制必须建在规模化落地之前,而且要具体到"谁签字、谁复核、谁兜底"这三个人名。

为什么 AI 治理的第一步是"定责"而不是"定技术"?

因为技术每半年迭代一轮,责任却不会自动迁移。模型换供应商、架构换方案、提示词换版本,如果责任只挂在"系统"上,出事时就是无人可问。治理的第一动作是把责任钉在具体的岗位和人身上,再谈技术选型。

这一点在监管里已经写死了。中国《生成式人工智能服务管理暂行办法》自 2023 年 8 月 15 日施行,明确服务提供者承担内容生产者责任;《人工智能生成合成内容标识办法》自 2025 年 9 月 1 日施行,要求生成内容必须可标识、可追溯。欧盟《人工智能法案》2024 年 8 月 1 日生效,高风险系统的义务自 2026 年 8 月 2 日起全面适用。"可追溯"三个字,本质就是问责。

企业 AI 问责机制到底由哪几层组成?

答案是四层:决策层定规矩,场景层管业务后果,模型层管技术变更,数据层管来源合规。四层各有一个具名责任人,缺一层就会在出事时出现真空。

层级责任人核心职责最常见的空缺
决策层AI 治理负责人(建议由一把手或分管副总兼任)划定可用/禁用场景、审批高风险上线只设委员会不设个人,开会有人、签字无人
场景层业务 Owner(谁用谁负责)定义业务边界、验收口径、止损条件把项目整个丢给 IT 部门
模型层模型责任人记录版本、评测结果、变更理由换模型不记录,事后无法复现当时的输出
数据层数据责任人来源合法性、标注质量、保留期限训练数据说不清来源,审计时无从举证

没有问责机制,AI 项目会踩哪些坑?

三个坑,几乎必踩:出事无人兜底、责任边界互相推、复盘无法沉淀。

  • 无人兜底 → 项目被整体叫停。一次客户投诉就可能让整条 AI 业务线停摆,前期投入沉没。
  • 边界模糊 → 业务与 IT 互推。业务说是模型错,技术说是用法错,各执一词,问题留在原地。
  • 无法沉淀 → 同类错误反复发生。没有责任人就没有复盘主体,第二个项目会犯第一个项目的错。

行业数据也在印证这件事。MIT NANDA 2025 年的研究指出,约 95% 的生成式 AI 试点没有对利润表产生实质影响;RAND 的报告同样提到超过 80% 的 AI 项目未能达到预期。这些项目里,倒在治理与责任设计上的,远多于倒在模型能力上的。

中小企业也要建完整的 AI 治理体系吗?

不用照搬大厂的整套体系,但要保留最小骨架:一个人、一份清单、一次复盘。一个人指具名的 AI 治理责任人;一份清单指上线前必须过的检查项;一次复盘指每个季度把出过的问题过一遍。规模小的公司反而更容易做到,因为决策链条短。

上线前的最小检查清单(可直接抄用)
  • 这个场景出了错,最坏的后果是什么?谁承担?
  • 输入数据从哪来,有没有授权?能不能说清来源?
  • 输出会不会直接触达客户?触达前有没有人工复核环节?
  • 模型换了版本,能不能复现上一次的输出?
  • 出问题时的止损开关在哪,谁来按?

从组织能力看,AI 治理到底落在哪一环?

它同时压在两处:数字助推力和文化凝聚力。数字助推力解决"有没有机制、有没有数据、有没有工具";文化凝聚力解决"出了问题,组织是遮掩还是复盘"。很多企业的治理文件写得很漂亮,但第一次出事就选择内部消化,机制从此失效——这不是制度问题,是文化问题。

山海七力诊断里,我们通常会先看这两力的得分:数字助推力低,说明机制和数据基础没打牢,先补基础设施;文化凝聚力低,说明组织不敢面对错误,先解决心理安全,再上治理文件。顺序错了,文件就是废纸。

结语

回到事物最根本的样子:AI 不会自己承担责任,承担责任的永远是人。把三个名字写清楚——谁签字、谁复核、谁兜底——比多买一个模型更能降低风险。越山海,见未来;先把责任分清楚,才谈得上规模化。

常见问题

企业 AI 治理应该从哪一步开始?
从指定一个具名的 AI 治理责任人开始,而不是从写制度文件开始。责任人确定后,再梳理正在运行和计划上线的 AI 场景清单,按"出错后果严重程度"排序,优先给高风险场景配上复核与止损机制。制度文件放在第三步写,避免一开始就陷入文本工作。
AI 出了事故,责任一定在企业吗?
多数情况下企业要承担主要责任。现行监管框架普遍把使用方视为责任主体之一,中国《生成式人工智能服务管理暂行办法》明确服务提供者承担内容生产者责任。企业与供应商之间的责任划分属于合同约定,不能对抗外部监管与用户索赔,所以合同中应明确数据权属、输出责任与追溯配合义务。
小公司只有一个 AI 应用,也需要治理吗?
需要,但可以极简。保留三件事即可:一个具名责任人、一份上线前检查清单、每季度一次问题复盘。真正的风险不在应用数量多,而在于唯一的应用直接触达客户却没有任何复核环节——这类单点风险反而最致命。
AI 问责机制会不会拖慢业务速度?
设计得当反而会提速。因为责任与止损条件明确后,低风险场景可以走快速通道直接放行,只有高风险场景才需要审批。多数企业的慢,来自每个场景都要临时讨论能不能上,而不是来自治理本身。把边界一次性划清,重复决策就消失了。
AI 治理和 ISO/IEC 42001 是什么关系?
ISO/IEC 42001:2023 是国际上第一个可认证的人工智能管理体系标准,提供了一套建立、实施、维护和改进 AI 管理体系的要求框架。企业可以把它当作治理体系的骨架参考,但不必一开始就去拿认证——先按四层责任结构把人和流程定下来,再对照标准补齐差距,投入产出比更高。

觉得有启发?

把这篇分享给正面对同样问题的伙伴

点击右上角 ···
分享给好友或朋友圈

正在唤起分享…