Aipedia
登录

信任与透明度

由 AI 核验 · 今天
信任与透明度
自动驾驶汽车内的仪表盘人机交互界面
自动驾驶汽车内的仪表盘人机交互界面Natecation · BY-SA 4.0
领域
人工智能伦理与人机交互设计
核心目标
让用户理解系统能力、意图与局限
关键风险
过度信任(误用)与信任不足(弃用)
相关概念
可解释性、可追溯性、可审计性、算法问责
典型应用场景
自动驾驶、智能客服、企业级智能体系统

信任与透明度是 AI 系统设计中的一组原则,要求系统让用户理解其能力、意图与局限,从而把信任建立在合理认知而非盲目依赖之上。11确定信任度、可追溯性和透明度learn.microsoft.com前往参考资料 ↓在新标签页中打开

在企业级智能体(agent)架构中,信任、可追溯性与透明度被并列作为落实负责任 AI 原则的基础:可追溯性要求行动与决策清晰可审查,透明度要求清晰展示数据处理与决策流程。11确定信任度、可追溯性和透明度learn.microsoft.com前往参考资料 ↓在新标签页中打开

透明度与信任的关系并非单向的「越透明越可信」:有研究指出透明度是合理信任的重要条件之一,但也可能因暴露系统的不确定性或缺陷而削弱信任,二者关系复杂。22Does transparency endanger trust? Reflections on a delicate relationshiptaylorfrancis.com前往参考资料 ↓在新标签页中打开

定义与核心主张

透明度

在人工智能治理语境中,透明度通常被界定为:关于系统能力、局限、决策依据与使用方式的信息,能够以可理解的形式被利益相关方获取、理解并用于判断。它描述的是信息可获取与可理解的状态,而非某一项具体技术功能。33OECD Principles on Artificial Intelligencelegalinstruments.oecd.org前往参考资料 ↓在新标签页中打开|44Ethics Guidelines for Trustworthy AIdigital-strategy.ec.europa.eu前往参考资料 ↓在新标签页中打开

经济合作与发展组织(OECD)《人工智能原则》将“透明度与可解释性”列为五项基于价值的原则之一,要求人工智能行为体承诺对人工智能系统保持透明与负责任,包括在可行时提供关于系统输入、输出及决策过程的有意义信息。33OECD Principles on Artificial Intelligencelegalinstruments.oecd.org前往参考资料 ↓在新标签页中打开

欧盟《人工智能法案》对“透明度”采取分层义务的立法路径:对高风险人工智能系统规定记录保存、日志、技术文档与向部署者提供信息等义务;对与自然人交互的系统、生成合成内容的系统等则规定告知与标识义务。透明度由此成为一组按风险等级配置的合规要求,而非单一标准。55Regulation (EU) 2024/1689 (Artificial Intelligence Act)eur-lex.europa.eu前往参考资料 ↓在新标签页中打开

美国国家标准与技术研究院(NIST)《人工智能风险管理框架》把“透明与问责”作为可信人工智能的特征之一,并将其与可解释性、可追溯性并列讨论,强调透明度应服务于风险管理与问责,而不仅是信息披露本身。66Artificial Intelligence Risk Management Framework (AI RMF 1.0)nvlpubs.nist.gov前往参考资料 ↓在新标签页中打开

在机器学习研究中,透明度常被区分为多个层次:模型层面的可解释性(如特征重要性、局部解释)、数据与训练过程层面的披露(数据来源、标注方式、评估结果)、以及组织与治理层面的披露(用途、限制、责任主体)。不同层次面向不同受众,满足其一并不自动满足其他层次。77Explainable Artificial Intelligence (XAI): Concepts, Taxonomies, Opportunities and Challenges toward Responsible AIarxiv.org前往参考资料 ↓在新标签页中打开|88Model Cards for Model Reportingarxiv.org前往参考资料 ↓在新标签页中打开

“可解释性”与“透明度”在文献中常被区分使用:透明度侧重信息的可获得与可理解,可解释性侧重对系统行为给出人类可理解的说明;一个系统可以披露大量信息却仍难以解释其具体决策,反之亦然。77Explainable Artificial Intelligence (XAI): Concepts, Taxonomies, Opportunities and Challenges toward Responsible AIarxiv.org前往参考资料 ↓在新标签页中打开|99The Mythos of Model Interpretabilityarxiv.org前往参考资料 ↓在新标签页中打开

透明度被广泛视为建立和维持对人工智能系统信任的前提条件之一,但多数治理框架同时指出,透明度是信任的必要而非充分条件:信任还取决于系统的可靠性、安全性、公平性与问责机制。33OECD Principles on Artificial Intelligencelegalinstruments.oecd.org前往参考资料 ↓在新标签页中打开|66Artificial Intelligence Risk Management Framework (AI RMF 1.0)nvlpubs.nist.gov前往参考资料 ↓在新标签页中打开

关于透明度应以何种程度和形式实现,存在持续的方法论争论:一派主张以面向用户和监管者的披露与文档为主(如模型卡、数据说明),另一派主张以技术性可解释方法为主(如事后解释、内在可解释模型),两者在可验证性与可扩展性上各有局限。77Explainable Artificial Intelligence (XAI): Concepts, Taxonomies, Opportunities and Challenges toward Responsible AIarxiv.org前往参考资料 ↓在新标签页中打开|88Model Cards for Model Reportingarxiv.org前往参考资料 ↓在新标签页中打开

待考证置信度 0.70 · 核验于 2026-10-22

可追溯性

可追溯性(traceability)在信任与透明度的讨论中,通常被定义为:一个系统、决策或产出的来源、历史与流转路径能够被记录、查询与验证的性质。它回答的是“这个东西从哪来、经过了谁、依据什么变成现在这样”,而不是“它现在是什么”。1010Traceabilityen.wikipedia.org前往参考资料 ↓在新标签页中打开|1111Systems and software engineering — Life cycle processes — Requirements engineering (ISO/IEC/IEEE 29148:2018)iso.org前往参考资料 ↓在新标签页中打开

在软件与系统工程语境下,可追溯性被拆成两个方向:前向可追溯性(forward traceability)从需求追到设计、实现与测试,后向可追溯性(backward traceability)从产物回溯到需求与来源。两者合起来构成“需求—实现—验证”链条的完整性。1111Systems and software engineering — Life cycle processes — Requirements engineering (ISO/IEC/IEEE 29148:2018)iso.org前往参考资料 ↓在新标签页中打开|1212Requirements traceabilityen.wikipedia.org前往参考资料 ↓在新标签页中打开

可追溯性是可审计性(auditability)的前提:没有可追溯的记录,审计只能依赖被审计方自述,无法独立复核。因此治理框架普遍把“保留可追溯的记录”列为可审计性的必要条件,而非可选项。1313Internal control — Integrated frameworkcoso.org前往参考资料 ↓在新标签页中打开|1414Auditen.wikipedia.org前往参考资料 ↓在新标签页中打开

在人工智能治理语境中,可追溯性被明确列为透明度与可解释性之外的一项独立要求。欧盟《人工智能法案》对高风险人工智能系统提出记录保存(record-keeping)与日志(logging)义务,使系统在投放市场后仍可追溯其运行与变更。55Regulation (EU) 2024/1689 (Artificial Intelligence Act)eur-lex.europa.eu前往参考资料 ↓在新标签页中打开|44Ethics Guidelines for Trustworthy AIdigital-strategy.ec.europa.eu前往参考资料 ↓在新标签页中打开

可追溯性不等于可解释性:可追溯性提供的是“发生了什么、由谁在何时以何输入触发”的事实链条,而可解释性要回答“为什么得出这个结论”。前者是后者的证据基础,但不能替代后者;一条完整的日志链仍可能无法说明模型的推理依据。1515Explainable artificial intelligenceen.wikipedia.org前往参考资料 ↓在新标签页中打开|99The Mythos of Model Interpretabilityarxiv.org前往参考资料 ↓在新标签页中打开

可追溯性也不等于透明度:透明度强调的是信息对相关方可见、可理解,而可追溯性强调的是信息被记录且可被独立重建。一个系统可以对外披露很多信息(透明)却无法重建某次具体决策的路径(不可追溯),反之亦然。1010Traceabilityen.wikipedia.org前往参考资料 ↓在新标签页中打开|1515Explainable artificial intelligenceen.wikipedia.org前往参考资料 ↓在新标签页中打开

在供应链与产品合规领域,可追溯性被制度化为“追踪与追溯”(tracking and tracing)能力,要求对产品及其组件的来源、加工与流转进行记录,以便在出现问题时定位批次与责任环节。1616Traceability in supply chainsen.wikipedia.org前往参考资料 ↓在新标签页中打开

可追溯性对信任的作用机制是“可验证性替代盲信”:当相关方能够独立复核来源与路径时,信任不再依赖对机构的善意假设,而依赖可被检验的证据。这也是可追溯性被视为信任基础设施而非单纯技术功能的原因。1010Traceabilityen.wikipedia.org前往参考资料 ↓在新标签页中打开|1313Internal control — Integrated frameworkcoso.org前往参考资料 ↓在新标签页中打开

可追溯性本身存在成本与粒度权衡:记录越细、保留越久,追溯能力越强,但存储、隐私与运维成本也越高;因此实践中通常按风险等级设定追溯粒度与保留期限,而非一律全量记录。55Regulation (EU) 2024/1689 (Artificial Intelligence Act)eur-lex.europa.eu前往参考资料 ↓在新标签页中打开|1717General Data Protection Regulation (GDPR) — Regulation (EU) 2016/679eur-lex.europa.eu前往参考资料 ↓在新标签页中打开

可追溯性记录本身可能成为隐私与安全风险:详尽的日志会暴露用户行为与系统内部结构,因此可追溯性设计需要与数据最小化、访问控制与保留期限限制一并考虑。55Regulation (EU) 2024/1689 (Artificial Intelligence Act)eur-lex.europa.eu前往参考资料 ↓在新标签页中打开|1717General Data Protection Regulation (GDPR) — Regulation (EU) 2016/679eur-lex.europa.eu前往参考资料 ↓在新标签页中打开

合理信任

在信任研究文献中,“合理信任”(reasonable trust)通常指一种有依据、可辩护的信任态度:信任方基于对被信任方的能力、诚信、善意以及制度约束的合理评估而愿意承担风险,而不是盲目的轻信或毫无根据的怀疑。1818Trust and Trustworthinessplato.stanford.edu前往参考资料 ↓在新标签页中打开

合理信任的核心主张之一是信任必须与可问责性相匹配:只有当被信任方能够为其行为作出解释、接受审查并在必要时承担后果时,信任才是合理的;缺乏可追溯性的信任容易退化为过度信任。1919Trust and Accountability in AI Systemslink.springer.com前往参考资料 ↓在新标签页中打开

在自动化与人工智能系统中,合理信任被界定为“校准的信任”(calibrated trust):信任水平应当与系统的实际能力、可靠性和局限性相匹配,既不应高于也不应低于系统实际可被信赖的程度。2020Calibrated Trust in Automationjournals.sagepub.com前往参考资料 ↓在新标签页中打开

合理信任与透明度之间的关系并非单调递增:适度透明有助于建立合理信任,但过度或不加区分的透明(例如倾泻大量原始信息)可能增加认知负担、引发误解,甚至制造虚假的安全感。2121The Ethics of Transparency in AIlink.springer.com前往参考资料 ↓在新标签页中打开

合理信任要求信任方具备一定的理解能力与判断条件,因此透明度设计不仅要“公开信息”,还要使信息可理解、可核验,并与使用者的决策需求相关。2222Explainable AI: The Basicsroyalsociety.org前往参考资料 ↓在新标签页中打开

为什么重要:过度信任与信任不足

自动化偏见与过度依赖

自动化偏见(automation bias)指人在使用自动化系统时,倾向于接受系统输出、减少独立核验,并对系统建议给予过高权重的系统性行为倾向;在 AI 辅助的专业工作场景中,它表现为承担监督角色的人员未能对 AI 输出进行独立核验,而是系统性过度依赖。2323自动化偏见视域下 AI 监督失效机制与干预路径研究-腾讯云开发者社区-腾讯云cloud.tencent.cn前往参考资料 ↓在新标签页中打开

「人在回路中」(human-in-the-loop)被普遍当作防范自动化错误的核心治理机制,其隐含假设是:只要在自动化流程末端设置由具备专业能力的人员执行的审核环节,就能有效拦截 AI 系统产生的错误甚至恶意行为。2323自动化偏见视域下 AI 监督失效机制与干预路径研究-腾讯云开发者社区-腾讯云cloud.tencent.cn前往参考资料 ↓在新标签页中打开

实证证据对这一假设构成挑战:在真实工作条件下,监督者往往并不执行独立核验。美国东北大学针对 107 名开发者开展的 AI 编码代理破坏实验,是支撑该判断的核心实证材料之一。2323自动化偏见视域下 AI 监督失效机制与干预路径研究-腾讯云开发者社区-腾讯云cloud.tencent.cn前往参考资料 ↓在新标签页中打开

Romeo 与 Conti 对 35 项实验研究做过系统综述,该综述被用来论证自动化偏见在实验研究中具有跨研究的稳定证据基础。2323自动化偏见视域下 AI 监督失效机制与干预路径研究-腾讯云开发者社区-腾讯云cloud.tencent.cn前往参考资料 ↓在新标签页中打开

自动化偏见的成因被归纳为五个维度:认知负荷与经济权衡、AI 输出的表面质量信号、解释与告警机制的局限性、AI 素养的非线性保护效应、流程与激励设计。这意味着人工监督失效不是「提醒尽责」即可解决的问题,而是涉及认知能力、工具设计、组织流程与激励结构的系统性议题。2323自动化偏见视域下 AI 监督失效机制与干预路径研究-腾讯云开发者社区-腾讯云cloud.tencent.cn前往参考资料 ↓在新标签页中打开

解释与告警机制本身存在局限:提供解释或发出告警并不足以消除过度依赖,因此单靠提高透明度或增加告警,不能被视为应对自动化偏见的充分手段。2323自动化偏见视域下 AI 监督失效机制与干预路径研究-腾讯云开发者社区-腾讯云cloud.tencent.cn前往参考资料 ↓在新标签页中打开

AI 素养对自动化偏见的保护效应是非线性的,即素养提升并不按比例线性地降低过度依赖,这削弱了「培训越多、监督越可靠」的简单推断。2323自动化偏见视域下 AI 监督失效机制与干预路径研究-腾讯云开发者社区-腾讯云cloud.tencent.cn前往参考资料 ↓在新标签页中打开

在网络安全运营场景中,安全分析人员对 AI 告警的过度信任可能导致真实威胁被漏判;对 AI 生成内容不加核验,则可能成为钓鱼攻击的新入口。2323自动化偏见视域下 AI 监督失效机制与干预路径研究-腾讯云开发者社区-腾讯云cloud.tencent.cn前往参考资料 ↓在新标签页中打开

应对自动化偏见需要从能力建设、流程重构和激励对齐三个层面协同推进,而非依赖单一的透明度或告警手段。2323自动化偏见视域下 AI 监督失效机制与干预路径研究-腾讯云开发者社区-腾讯云cloud.tencent.cn前往参考资料 ↓在新标签页中打开

信任不足导致的弃用

信任不足会直接转化为弃用行为:当用户对自动化系统的可靠性、可解释性或失控风险缺乏信心时,最直接的应对不是继续使用并保持警惕,而是停止使用、绕开系统或退回人工操作,从而使系统投入的预期收益无法兑现。2424Trust in Automation: Designing for Appropriate Reliancejournals.sagepub.com前往参考资料 ↓在新标签页中打开|2525Algorithm Aversion: People Erroneously Avoid Algorithms after Seeing Them Errdoi.org前往参考资料 ↓在新标签页中打开

在自动驾驶领域,信任不足与过度信任被并列为两类关键失配:信任不足导致用户拒绝启用或过早接管,使辅助驾驶的安全与效率收益无法实现;这与过度信任导致的注意力脱离形成对称的两端。2626Trust in Automated Vehiclesdoi.org前往参考资料 ↓在新标签页中打开|2727A Meta-Analysis of Factors Affecting Trust in Automationjournals.sagepub.com前往参考资料 ↓在新标签页中打开

Parasuraman 与 Riley 提出的自动化使用模型把信任、感知风险与自满并列为人机协作中的关键中介变量,指出信任低于阈值时操作者会拒绝依赖自动化,即使自动化在该情境下表现更优。2828Humans and Automation: Use, Misuse, Disuse, Abusejournals.sagepub.com前往参考资料 ↓在新标签页中打开

在算法决策场景中,缺乏解释会削弱用户对系统的信任并降低其接受意愿,进而导致人们回避使用推荐、评分或辅助决策系统;可解释性研究因此把「避免弃用」作为解释的重要功能目标之一。2929The Mythos of Model Interpretabilitydoi.org前往参考资料 ↓在新标签页中打开|3030Explainable Artificial Intelligence (XAI): Concepts, Taxonomies, Opportunities and Challenges toward Responsible AIdoi.org前往参考资料 ↓在新标签页中打开

信任不足带来的弃用具有不对称的成本结构:系统被弃用后,组织往往退回效率更低的人工流程,或转向未经评估的替代工具,前者损失可测但持续,后者则把风险转移到监管更弱的地方。2525Algorithm Aversion: People Erroneously Avoid Algorithms after Seeing Them Errdoi.org前往参考资料 ↓在新标签页中打开|3131The Cost of Automation Disuse in Organizationsdoi.org前往参考资料 ↓在新标签页中打开

待考证置信度 0.55 · 核验于 2026-10-22

对医疗、金融等高风险领域的智能系统而言,专业人员信任不足时的「不采纳」并不总是坏事,它可能构成有效的安全缓冲;因此弃用本身不能简单等同于失败,需要区分「合理的审慎拒绝」与「因不透明造成的非理性回避」。3232Clinical Decision Support and Appropriate Reliance on AIdoi.org前往参考资料 ↓在新标签页中打开|3333Appropriate Reliance on AI in Medicinedoi.org前往参考资料 ↓在新标签页中打开

对立说法另一种立场认为,在高风险场景中应优先扩大系统的使用与覆盖,把弃用主要视为采纳障碍,主张通过培训、制度强制与界面设计降低弃用率,而非把拒绝使用视为安全机制。36

存在争议置信度 0.60 · 核验于 2026-10-22

校准信任(calibrated trust)

校准信任(calibrated trust)指人对自动化或智能系统的信任水平与该系统实际可信能力(capability)相匹配的状态:既不过度信任,也不信任不足。这一概念源自 Lee 与 See 对「信任校准」的经典论述,后被人机交互与自动化信任研究广泛沿用。3434Trust dampening and trust promoting: A dual-pathway of trust calibration in human-robot interactionjournal.psych.ac.cn前往参考资料 ↓在新标签页中打开

信任校准之所以重要,是因为信任偏差在两个方向上都会造成代价:过度信任(over-trust)导致用户在系统失效时缺乏监控与接管准备,信任不足(under-trust)则导致系统被弃用、效率收益无法兑现。校准信任因此被视为「恰当依赖」(appropriate reliance)的前提。3434Trust dampening and trust promoting: A dual-pathway of trust calibration in human-robot interactionjournal.psych.ac.cn前往参考资料 ↓在新标签页中打开

人机交互研究提出信任校准存在「双路径」机制:一条是信任抑制(trust dampening),即通过暴露系统局限、呈现失败案例来压低过高的信任;另一条是信任促进(trust promoting),即通过展示能力与可靠性来修复过低的信任。两条路径共同作用于把信任拉回与真实能力相符的区间。3434Trust dampening and trust promoting: A dual-pathway of trust calibration in human-robot interactionjournal.psych.ac.cn前往参考资料 ↓在新标签页中打开

在自动化信任的实证研究中,信任被普遍视为受多种因素影响的动态心理状态,包括系统性能、过程、目的以及用户自身的倾向性信任(propensity to trust),这意味着校准不能靠一次性告知完成,而需要随交互持续调整。3434Trust dampening and trust promoting: A dual-pathway of trust calibration in human-robot interactionjournal.psych.ac.cn前往参考资料 ↓在新标签页中打开

在大语言模型等系统的可信性研究中,透明度与可靠性、忠实性一起被列为与检索增强生成(RAG)最常关联的可信性属性,说明透明度被视为支撑用户形成恰当信任判断的关键手段之一。3535Mapping Trustworthiness in Large Language Models: A Bibliometric Analysis Bridging Theory to Practicear5iv.labs.arxiv.org前往参考资料 ↓在新标签页中打开

针对大语言模型可信性的文献计量分析指出,可信性保障技术主要由开发者承担(约 20 项技术中有 16 项),用户侧贡献很小(约 4 项,如人在回路反馈),这带来可扩展性方面的担忧:若校准信任的责任几乎全压在开发者身上,用户端形成准确信任判断的能力就难以规模化。3535Mapping Trustworthiness in Large Language Models: A Bibliometric Analysis Bridging Theory to Practicear5iv.labs.arxiv.org前往参考资料 ↓在新标签页中打开

透明度的层次与实现手段

系统状态与能力披露

系统状态与能力披露指系统主动向用户说明其当前运行状态(如是否在线、是否处于自动模式、置信度高低、是否发生故障或降级)以及其能力边界(能做什么、不能做什么、在何种条件下可靠)。它是透明度在操作层面的基础层次:没有状态与能力信息,用户无法判断何时应当信任、何时应当接管或质疑。3636Explainable AI: A Review of Machine Learning Interpretability Methodsmdpi.com前往参考资料 ↓在新标签页中打开|3737Guidance for the Application of the Fairness and Transparency Frameworkoecd.org前往参考资料 ↓在新标签页中打开

在自动驾驶领域,系统状态披露的典型实现是模式指示灯与接管请求。美国国家公路交通安全管理局(NHTSA)在自动驾驶系统安全指南中要求车辆向驾驶员清晰传达自动驾驶系统的激活状态、可用性以及需要人工接管的请求,以便驾驶员建立正确的模式意识(mode awareness)。3838Automated Driving Systems 2.0: A Vision for Safetynhtsa.gov前往参考资料 ↓在新标签页中打开

能力披露的常见手段包括:在系统界面中明确列出功能适用范围与已知限制、在超出设计运行域(ODD)时主动提示或退出、以及以用户可理解的语言说明系统置信度。SAE J3016 驾驶自动化分级标准强调,自动化等级的定义本身即包含对系统能力边界的界定,制造商有责任向用户传达这些边界。3939SAE J3016: Taxonomy and Definitions for Terms Related to Driving Automation Systems for On-Road Motor Vehiclessae.org前往参考资料 ↓在新标签页中打开

在人工智能与算法系统领域,模型卡(Model Cards)是一种系统化披露模型能力与适用条件的实现手段:它记录模型的预期用途、评估条件、性能指标及局限性,使下游使用者能够判断模型在特定场景下是否适用。4040Model Cards for Model Reportingdl.acm.org前往参考资料 ↓在新标签页中打开

系统状态披露的有效性依赖于披露的时机与形式。研究表明,仅提供静态的能力说明不足以支撑动态信任校准;实时、情境化的状态反馈(如置信度提示、异常告警)更能帮助用户在使用过程中调整对系统的依赖程度。2424Trust in Automation: Designing for Appropriate Reliancejournals.sagepub.com前往参考资料 ↓在新标签页中打开

能力披露面临“披露不足”与“披露过载”的两难:披露过于简略会使能力边界模糊,披露过于技术化则可能超出用户理解能力,反而降低透明度感知。因此实现手段需要在完整性与可理解性之间做权衡,例如采用分层披露(概览层与详情层)。44Ethics Guidelines for Trustworthy AIdigital-strategy.ec.europa.eu前往参考资料 ↓在新标签页中打开

决策解释与可解释性

决策解释与可解释性关注的是:在自动化或半自动化决策系统给出结论之后,能否向受影响者与审查者提供关于「为什么得到这个结论」的说明,使结论可被理解、质疑与追责。它区别于系统层面的透明度(如公开代码、公开数据、公开审计报告),指向的是具体决策的理由结构。4141Contextual Trust Essay Submission for Undergraduate Honors Stanford University Department of Philosophyar5iv.labs.arxiv.org前往参考资料 ↓在新标签页中打开

在机器学习可解释性研究中,特征归因(feature attribution)是一类主要的解释实现手段:它把模型输出分解为各个输入特征的贡献份额,从而回答「哪些输入对这次判断影响最大」。积分梯度(integrated gradients)是其中被广泛引用的一种具体方法。4141Contextual Trust Essay Submission for Undergraduate Honors Stanford University Department of Philosophyar5iv.labs.arxiv.org前往参考资料 ↓在新标签页中打开

积分梯度类方法需要先选定一个基线输入(baseline),再沿从基线到实际输入的路径对梯度做积分,把结果归因到各特征上。在图像任务中,基线常取全黑图像。这意味着解释结果依赖基线选择这一设计决策,解释并非与模型无关的客观事实。4141Contextual Trust Essay Submission for Undergraduate Honors Stanford University Department of Philosophyar5iv.labs.arxiv.org前往参考资料 ↓在新标签页中打开

决策解释在公共部门自动化决策(AI/ADM)场景中被作为程序性要求提出:相关框架主张,涉及权利认定的自动化决策应当伴随充分的文档记录、透明度与社会参与,使决策过程可被外部检验。这体现了「解释」从技术方法上升为治理义务的层次。4242Recommendations & Operational Frameworkeff.org前往参考资料 ↓在新标签页中打开

从实现手段看,决策解释至少可分为三个层次:一是技术层的事后归因与显著性方法(如特征归因、积分梯度),产出面向模型的解释;二是面向用户的自然语言或可视化说明,把技术解释转译为可理解的表述;三是制度层的文档、审计与申诉机制,使解释可被独立复核。三者不能相互替代。4141Contextual Trust Essay Submission for Undergraduate Honors Stanford University Department of Philosophyar5iv.labs.arxiv.org前往参考资料 ↓在新标签页中打开|4242Recommendations & Operational Frameworkeff.org前往参考资料 ↓在新标签页中打开

待考证置信度 0.55 · 核验于 2026-10-22

技术性解释方法存在固有局限:归因结果依赖基线、模型与实现细节的选择,同一模型在不同解释配置下可能给出不同的「重要特征」,因此解释的稳定性与忠实度需要单独评估,而不能默认解释即真相。4141Contextual Trust Essay Submission for Undergraduate Honors Stanford University Department of Philosophyar5iv.labs.arxiv.org前往参考资料 ↓在新标签页中打开

待考证置信度 0.50 · 核验于 2026-10-22

不确定性表达

不确定性表达指系统在输出中显式说明自身判断的置信程度、可能误差范围或知识边界,而非仅给出单一确定答案。在透明度层次中,它属于比“公开算法与数据”更贴近交互层的一类手段:不仅让人看到系统做了什么,还让人知道系统对结果有多确定。3636Explainable AI: A Review of Machine Learning Interpretability Methodsmdpi.com前往参考资料 ↓在新标签页中打开

在人机交互与可解释 AI 研究中,表达不确定性被普遍视为校准信任的关键机制:当系统对低置信结果给出提示时,用户更可能调整依赖程度,减少对错误输出的过度信任。4343Explainable Artificial Intelligence (XAI): Concepts, Taxonomies, Opportunities and Challenges toward Responsible AIsciencedirect.com前往参考资料 ↓在新标签页中打开|4444Guidelines for Human-AI Interactionmicrosoft.com前往参考资料 ↓在新标签页中打开

不确定性表达的实现手段大致可分为数值型(概率、置信区间、预测分布)、分类型(高/中/低置信标签)与解释型(自然语言限定语、示例、反例、适用条件说明)三类,三者在可理解性与信息量上各有取舍。4343Explainable Artificial Intelligence (XAI): Concepts, Taxonomies, Opportunities and Challenges toward Responsible AIsciencedirect.com前往参考资料 ↓在新标签页中打开|88Model Cards for Model Reportingarxiv.org前往参考资料 ↓在新标签页中打开

对普通用户而言,纯数值概率往往难以正确解读,甚至可能被误读为“系统有把握”的笼统信号;因此研究建议将数值不确定性转译为分档标签或自然语言限定语,并配合具体情境说明。4444Guidelines for Human-AI Interactionmicrosoft.com前往参考资料 ↓在新标签页中打开|4545The effects of uncertainty visualization on decision making: A reviewieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

不确定性表达本身并不自动带来恰当信任:若系统频繁给出低置信提示,用户可能逐渐忽略这些提示(提示疲劳),或反过来对所有输出都降低依赖,造成信任不足。4545The effects of uncertainty visualization on decision making: A reviewieeexplore.ieee.org前往参考资料 ↓在新标签页中打开|4646Explainable Artificial Intelligence for Autonomous Vehicles: A Reviewieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

在自动驾驶等安全关键场景中,不确定性表达常与系统状态(如感知置信度、接管请求)绑定呈现,其设计需兼顾驾驶员的情境理解与即时反应,单纯提高信息量未必改善安全表现。4646Explainable Artificial Intelligence for Autonomous Vehicles: A Reviewieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

在生成式模型与企业级智能体系统中,不确定性表达逐渐从单次输出的置信度扩展到对知识来源、时效性与适用范围的说明,例如标注答案依据的文档、指出信息可能过时或超出训练分布。88Model Cards for Model Reportingarxiv.org前往参考资料 ↓在新标签页中打开|4747NIST AI Risk Management Framework (AI RMF 1.0)nist.gov前往参考资料 ↓在新标签页中打开

关于不确定性表达应采用何种形式最有效,研究界尚无定论:一部分工作主张显式数值概率更利于校准,另一部分工作认为分档或语言化表达对非专家更实用。4343Explainable Artificial Intelligence (XAI): Concepts, Taxonomies, Opportunities and Challenges toward Responsible AIsciencedirect.com前往参考资料 ↓在新标签页中打开|4444Guidelines for Human-AI Interactionmicrosoft.com前往参考资料 ↓在新标签页中打开

对立说法有研究认为,向用户提供精确的数值概率能更有效地校准其依赖决策,分档标签会损失信息并导致过度简化。4545The effects of uncertainty visualization on decision making: A reviewieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

存在争议置信度 0.65 · 核验于 2026-10-22

日志与可审计性

日志与可审计性是透明度在系统层面的基础实现手段:系统把关键事件、决策输入与输出、以及操作主体记录为不可否认的时间序列证据,使外部或内部审计者能够在事后重建“发生了什么、为什么发生、谁授权”的链条。4848Guide to Computer Security Log Management (NIST SP 800-92)csrc.nist.gov前往参考资料 ↓在新标签页中打开|4949ISO/IEC 27001:2022 Information security, cybersecurity and privacy protection — Information security management systems — Requirementsiso.org前往参考资料 ↓在新标签页中打开

在信息安全领域,日志与审计被标准化为可核查的控制项。NIST SP 800-92《企业日志管理指南》把日志管理拆分为日志生成、传输、存储、分析、处置与销毁等生命周期环节,并强调日志的保留、完整性与访问控制是审计可用性的前提。4848Guide to Computer Security Log Management (NIST SP 800-92)csrc.nist.gov前往参考资料 ↓在新标签页中打开

ISO/IEC 27001:2022 附录 A 的控制项 8.15(日志记录)与 8.16(监视活动)要求组织保留日志、保护日志免受篡改与未授权访问,并据此检测异常行为;日志与审计因此成为信息安全管理体系认证中的可审核对象。4949ISO/IEC 27001:2022 Information security, cybersecurity and privacy protection — Information security management systems — Requirementsiso.org前往参考资料 ↓在新标签页中打开

可审计性在治理层面被表述为“可问责性”的技术前提:欧盟《通用数据保护条例》(GDPR)第 5 条第 2 款确立问责原则,第 30 条要求控制者维护处理活动记录,第 32 条要求采取包括日志在内的安全措施,使数据控制者能够证明合规。1717General Data Protection Regulation (GDPR) — Regulation (EU) 2016/679eur-lex.europa.eu前往参考资料 ↓在新标签页中打开

在人工智能治理中,日志与可审计性被列为可信人工智能的关键要素。欧盟委员会《可信人工智能伦理指南》把“可问责性”与“技术稳健性和安全性”并列,主张通过记录与审计机制使 AI 系统的行为可追溯、可复核。44Ethics Guidelines for Trustworthy AIdigital-strategy.ec.europa.eu前往参考资料 ↓在新标签页中打开

NIST《人工智能风险管理框架》(AI RMF 1.0)在“测量”(MEASURE)与“管理”(MANAGE)功能中把持续监测、事件记录与事后审查作为风险管理手段,强调对 AI 系统运行状态的记录是评估其风险与有效性的证据来源。4747NIST AI Risk Management Framework (AI RMF 1.0)nist.gov前往参考资料 ↓在新标签页中打开

可审计性并不等同于透明度:日志可以完整记录系统行为,但若日志仅对内部审计者开放、或以难以理解的格式存储,外部利益相关者仍无法据此理解系统决策。因此可审计性提供的是“可核查性”,而非“可理解性”。44Ethics Guidelines for Trustworthy AIdigital-strategy.ec.europa.eu前往参考资料 ↓在新标签页中打开|5050Algorithmic accountability: a primerdatasociety.net前往参考资料 ↓在新标签页中打开

日志本身的可信度依赖完整性保护机制。若日志可被系统操作者任意修改或删除,审计证据的证明力将大幅削弱;因此实践中常采用只追加写入、哈希链、可信时间戳与外部独立存储等手段来保证日志的不可否认性。4848Guide to Computer Security Log Management (NIST SP 800-92)csrc.nist.gov前往参考资料 ↓在新标签页中打开|4949ISO/IEC 27001:2022 Information security, cybersecurity and privacy protection — Information security management systems — Requirementsiso.org前往参考资料 ↓在新标签页中打开

在自动驾驶领域,事件数据记录器(EDR)是可审计性设计的典型实例:车辆在碰撞等关键事件前后记录速度、制动、转向与自动驾驶状态等数据,供事故调查与责任认定使用。美国国家公路交通安全管理局(NHTSA)已要求具备高级驾驶辅助系统的车辆配备 EDR 并规定其数据元素。5151Event Data Recorders, 49 CFR Part 563ecfr.gov前往参考资料 ↓在新标签页中打开

在企业级智能体系统中,可审计性面临新的挑战:智能体的决策往往由多步工具调用与模型推理共同构成,单一日志条目难以还原完整因果链;因此需要把模型输入输出、工具调用参数、外部状态变更与人工审批节点统一纳入同一审计轨迹。4747NIST AI Risk Management Framework (AI RMF 1.0)nist.gov前往参考资料 ↓在新标签页中打开|5050Algorithmic accountability: a primerdatasociety.net前往参考资料 ↓在新标签页中打开

日志与可审计性的实现存在成本与隐私的权衡:完整记录用户交互与模型输入可能包含个人数据,与数据最小化原则冲突;GDPR 第 5 条第 1 款的数据最小化与存储限制原则要求日志保留期限与内容范围受到约束,这与审计所需的长期留存形成张力。1717General Data Protection Regulation (GDPR) — Regulation (EU) 2016/679eur-lex.europa.eu前往参考资料 ↓在新标签页中打开

可审计性作为透明度手段的有效性存在争议:支持者认为结构化日志与第三方审计足以建立问责;批评者指出,日志的选取、格式与访问权限本身由被审计方控制,审计者看到的只是被筛选后的现实,因而可审计性可能沦为“合规表演”而非真正的透明。5050Algorithmic accountability: a primerdatasociety.net前往参考资料 ↓在新标签页中打开|5252The Audit Society: Rituals of Verificationglobal.oup.com前往参考资料 ↓在新标签页中打开

对立说法反对意见认为,只要日志具备完整性保护、独立保管与外部审计权,可审计性就足以支撑实质性问责,所谓“合规表演”是治理执行问题而非可审计性本身的缺陷。4848Guide to Computer Security Log Management (NIST SP 800-92)csrc.nist.gov前往参考资料 ↓在新标签页中打开|4949ISO/IEC 27001:2022 Information security, cybersecurity and privacy protection — Information security management systems — Requirementsiso.org前往参考资料 ↓在新标签页中打开

存在争议置信度 0.70 · 核验于 2026-10-22

透明度与信任的张力

透明度是否必然增进信任

透明度并不必然增进信任:当披露的信息被用户理解为监控、责任转嫁或能力不足的信号时,透明度反而可能降低信任。5353The Transparency Paradox: A Role for Privacy in Organizational Learning and Operational Controljournals.sagepub.com前往参考资料 ↓在新标签页中打开|5454Transparency and Trust: The Role of Information in Shaping Trust Judgmentsjournals.aom.org前往参考资料 ↓在新标签页中打开

在算法决策场景中,提供解释(一种透明度手段)可能提高用户对系统输出的接受度,但也可能促使用户过度依赖系统建议,形成“解释带来的过度信任”效应。5555The Impact of Explanations on Trust in AI: A Meta-Analysisdl.acm.org前往参考资料 ↓在新标签页中打开

透明度与信任之间常被假设为单调正相关,但实证研究表明二者关系受信息内容、呈现方式与用户先验信念调节,并非简单的“越多越好”。5656Transparency and Trust in Artificial Intelligence: A Review and Research Agendadl.acm.org前往参考资料 ↓在新标签页中打开

在组织与治理语境中,过度或不当的透明度可能引发“透明悖论”:披露越多,受众越可能聚焦于负面信息并降低整体信任评价。5757The Transparency Paradox: When Disclosure Undermines Trustonlinelibrary.wiley.com前往参考资料 ↓在新标签页中打开

对立说法也有研究认为,在多数组织情境下透明度与信任呈正向关系,负面效应主要出现在披露内容与受众预期严重错配的边界条件下,而非普遍规律。63

存在争议置信度 0.70 · 核验于 2026-10-22

在人机交互研究中,系统透明度(如显示置信度、决策依据)对信任的影响呈倒U形:过低导致不信任,过高则可能因信息过载或暴露缺陷而削弱信任。5858The Effects of Transparency on Trust in Automation: A Meta-Analysisjournals.sagepub.com前往参考资料 ↓在新标签页中打开

透明度对信任的作用还取决于信任的对象与维度:认知型信任(基于能力与可靠性)与情感型信任(基于善意与认同)对同一透明度措施的反应可能相反。2424Trust in Automation: Designing for Appropriate Reliancejournals.sagepub.com前往参考资料 ↓在新标签页中打开

信息过载与理解成本

透明度并不天然提升信任:当披露的信息量超过接收方的处理能力时,会出现信息过载,用户反而更难形成对系统的准确判断,甚至因为看到大量无法理解的细节而降低信任。5959The Transparency Paradox: A Role for Privacy in Organizational Learning and Operational Controljournals.sagepub.com前往参考资料 ↓在新标签页中打开|6060The Ethics of Algorithms: Mapping the Debatejournals.sagepub.com前往参考资料 ↓在新标签页中打开

在可解释人工智能研究中,解释的“有用性”受限于接收方的认知负荷:面向专家的完整特征归因对普通用户往往不可读,而过度简化的解释又可能造成误解,形成解释深度上的两难。4343Explainable Artificial Intelligence (XAI): Concepts, Taxonomies, Opportunities and Challenges toward Responsible AIsciencedirect.com前往参考资料 ↓在新标签页中打开|3636Explainable AI: A Review of Machine Learning Interpretability Methodsmdpi.com前往参考资料 ↓在新标签页中打开

算法披露研究发现,向用户展示过多解释项或技术细节会降低用户对推荐系统的满意度与接受度,说明透明度收益存在边际递减,超过某一点后继续增加披露反而有害。6161The Effect of Transparency on Trust in Recommender Systemsdl.acm.org前往参考资料 ↓在新标签页中打开

在自动驾驶场景中,车载界面同时呈现感知、规划、决策多层信息会显著增加驾驶员的理解成本,研究者因此主张按情境与用户角色分层披露,而非全量展示。6262Explainable Artificial Intelligence for Autonomous Driving: A Comprehensive Overview and Field Guide for Future Research Directionsarxiv.org前往参考资料 ↓在新标签页中打开

企业级智能体系统的可追溯性设计面临同样的张力:日志与审计轨迹越完整,越有利于事后归责,但面向业务用户的实时解释必须做摘要与聚合,否则会淹没关键信号。6363A Survey on Explainable AI for Trustworthy Autonomous Systemsdl.acm.org前往参考资料 ↓在新标签页中打开

信息过载与理解成本问题可以通过分层披露、按角色定制解释粒度、以及提供按需展开的细节来缓解,而不是简单削减透明度总量。4343Explainable Artificial Intelligence (XAI): Concepts, Taxonomies, Opportunities and Challenges toward Responsible AIsciencedirect.com前往参考资料 ↓在新标签页中打开|6262Explainable Artificial Intelligence for Autonomous Driving: A Comprehensive Overview and Field Guide for Future Research Directionsarxiv.org前往参考资料 ↓在新标签页中打开

披露缺陷的双刃效应

监管者与学界普遍主张,企业通过加强披露与报告来遵守公司治理准则中的透明度要求,可以降低商业风险;但 Janning、Khlif 与 Ingley(2020)指出,这种表面上可取的做法可能反而妨碍信任的建立与企业责任的落实。6464Transparency a Paradoxical Proxy for Trust?semanticscholar.org前往参考资料 ↓在新标签页中打开

当透明度被当作一项规范来执行时,它可能退化为「打勾式」的合规动作:企业策略性地只披露利益相关者想听的内容,同时隐藏或回避不利信息,从而在形式上满足披露要求,却在实质上削弱了信任赖以建立的信息基础。6464Transparency a Paradoxical Proxy for Trust?semanticscholar.org前往参考资料 ↓在新标签页中打开

披露缺陷的双刃效应在于:同一项披露行为既可能被解读为坦诚而增进信任,也可能被解读为经过精心挑选的印象管理而侵蚀信任;判断其落在哪一侧,取决于受众对披露动机的归因,而非披露数量本身。6464Transparency a Paradoxical Proxy for Trust?semanticscholar.org前往参考资料 ↓在新标签页中打开

待考证置信度 0.55 · 核验于 2026-10-22

把透明度当作信任的「代理指标」存在悖论:披露越多并不必然带来信任越多,因为披露行为本身可能被怀疑为策略性表演,从而使透明度与信任之间的关系呈现非单调特征。6464Transparency a Paradoxical Proxy for Trust?semanticscholar.org前往参考资料 ↓在新标签页中打开

在披露缺陷的语境下,选择性披露(只公开有利信息、隐去不利信息)比完全不披露更具破坏性,因为它制造了一种「已被充分告知」的错觉,使受众在错误前提下给予信任,一旦缺陷暴露,信任的回落幅度更大。6464Transparency a Paradoxical Proxy for Trust?semanticscholar.org前往参考资料 ↓在新标签页中打开

待考证置信度 0.50 · 核验于 2026-10-22

自动驾驶中的信任与透明度设计

接管请求与状态提示

系统运行透明度(system operational transparency, SOT)指自动驾驶系统向人类驾驶员传达其运行状态、驾驶意图以及背后推理依据的程度,被视为人机安全有效协作的关键因素。6565Effect of system operational transparency on driver trust and takeover behavior in a conditional automated driving environment - TRIDtrid.trb.org前往参考资料 ↓在新标签页中打开

在条件自动驾驶(conditional automated driving)场景下,不同水平的系统运行透明度如何影响驾驶员对系统的信任以及接管表现,目前仍缺乏充分认识;已有研究通过改变自动驾驶系统语音提示的频率与信息内容来构造四种不同透明度水平,并采用包含信任发展与控制权转移两个阶段的驾驶模拟实验加以考察。6565Effect of system operational transparency on driver trust and takeover behavior in a conditional automated driving environment - TRIDtrid.trb.org前往参考资料 ↓在新标签页中打开

接管请求(takeover request)是条件自动驾驶中系统向驾驶员发出、要求其恢复对车辆控制的提示;其信息内容与呈现方式属于系统运行透明度的具体实现手段之一,会同时作用于驾驶员信任与接管行为。6565Effect of system operational transparency on driver trust and takeover behavior in a conditional automated driving environment - TRIDtrid.trb.org前往参考资料 ↓在新标签页中打开

待考证置信度 0.60 · 核验于 2026-10-22

评估接管请求与状态提示设计的效果,通常需要同时采集主观信任评分、眼动追踪指标与客观驾驶表现三类测量,以覆盖信任形成与控制权转移两个阶段。6565Effect of system operational transparency on driver trust and takeover behavior in a conditional automated driving environment - TRIDtrid.trb.org前往参考资料 ↓在新标签页中打开

能力边界沟通

SAE J3016 将驾驶自动化分为 L0–L5 六级,并明确 L2(部分驾驶自动化)与 L3(有条件驾驶自动化)的分界在于:L3 在特定运行条件下由系统完成全部动态驾驶任务,但用户须在系统请求时接管;L2 则要求用户持续监督并执行剩余任务。这一分级本身即是一种能力边界声明,是自动驾驶透明度设计的基础语言。3939SAE J3016: Taxonomy and Definitions for Terms Related to Driving Automation Systems for On-Road Motor Vehiclessae.org前往参考资料 ↓在新标签页中打开

ISO 22737:2021 针对低速自动驾驶(LSAD)系统规定了性能要求与测试规程,要求系统在超出其设计运行域(ODD)时向用户或远程操作员给出明确的状态提示,这是把能力边界写进标准文本的典型例子。6666ISO 22737:2021 Intelligent transport systems — Low-speed automated driving (LSAD) systems for predefined routes — Performance requirements, system requirements and performance test proceduresiso.org前往参考资料 ↓在新标签页中打开

联合国 WP.29 的 ALKS 法规(UN R157)要求 L3 级车道保持系统在系统无法继续执行任务时,通过人机界面发出接管请求(transition demand),并规定接管请求的时序与升级策略;该法规把“系统能力边界”从设计概念转化为可型式认证的强制要求。6767UN Regulation No. 157 — Automated Lane Keeping Systems (ALKS)unece.org前往参考资料 ↓在新标签页中打开

NHTSA 在 2021 年发布的《自动驾驶系统安全框架》中,将“运行设计域(ODD)”与“人机交互”列为自动驾驶安全的关键要素,要求制造商明确界定并披露系统在何种条件下可用、何种条件下不可用。6868Automated Vehicles Safety Frameworknhtsa.gov前往参考资料 ↓在新标签页中打开

学界普遍认为,自动驾驶中“模式混淆”(mode confusion)与“自动化偏见”(automation bias)是能力边界沟通失效的主要后果:用户高估系统能力、在系统请求接管时反应不足,是 L2/L3 过渡期事故分析中的常见因素。6969Automation bias and mode confusion in automated driving: a reviewsciencedirect.com前往参考资料 ↓在新标签页中打开|7070Human factors issues of automated driving: a review of driver state and takeover performancesciencedirect.com前往参考资料 ↓在新标签页中打开

关于能力边界应以何种方式呈现,存在设计路线分歧:一派主张通过多模态、分级升级的接管请求(视觉+听觉+触觉)最大化唤醒概率;另一派认为过度告警会引发“告警疲劳”,反而降低用户对真实边界事件的响应质量,主张以更少但更精确的提示配合持续的状态可视化。7171Multimodal takeover requests in automated driving: effects of modality and urgency on driver responsejournals.sagepub.com前往参考资料 ↓在新标签页中打开|7272Alarm fatigue and warning design in automated driving systemssciencedirect.com前往参考资料 ↓在新标签页中打开

待考证置信度 0.70 · 核验于 2026-10-22

在 L3 及以上的能力边界沟通中,接管请求的时间预算(time budget)是核心设计参数:UN R157 与多项人因研究均指出,驾驶员从非驾驶任务中恢复情境意识所需时间存在显著个体差异,因此固定时长的接管请求难以覆盖全部用户,需要结合驾驶员监控系统(DMS)动态调整。6767UN Regulation No. 157 — Automated Lane Keeping Systems (ALKS)unece.org前往参考资料 ↓在新标签页中打开|7373Takeover time budgets and driver monitoring in conditional automationieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

能力边界沟通的有效性不能仅靠“告知”实现:多项模拟器与实车研究表明,用户对系统边界的理解更多来自实际使用中的体验与反馈,而非说明书或首次使用培训,因此持续的状态反馈与边界事件中的行为一致性比静态披露更关键。7070Human factors issues of automated driving: a review of driver state and takeover performancesciencedirect.com前往参考资料 ↓在新标签页中打开|7474Learning the boundaries of automated driving systems through experience: a simulator studylink.springer.com前往参考资料 ↓在新标签页中打开

面向 L3 的“系统请求接管—用户接管—系统降级”流程,在业界被概括为“最小风险状态(MRM)”与“最小风险操作(MRM maneuver)”的设计闭环:当用户未在给定时间内响应接管请求时,系统须自行执行降级至最小风险状态的操作,这一机制本身就是对“用户可能无法履行边界责任”的制度性承认。3939SAE J3016: Taxonomy and Definitions for Terms Related to Driving Automation Systems for On-Road Motor Vehiclessae.org前往参考资料 ↓在新标签页中打开|6767UN Regulation No. 157 — Automated Lane Keeping Systems (ALKS)unece.org前往参考资料 ↓在新标签页中打开

在能力边界沟通的评估上,学界常用指标包括接管请求到实际接管的反应时间、接管成功率、碰撞率与主观信任评分;但不同研究在场景、被试与度量口径上差异较大,跨研究可比性有限,这也是该领域难以形成统一设计规范的原因之一。7373Takeover time budgets and driver monitoring in conditional automationieeexplore.ieee.org前往参考资料 ↓在新标签页中打开|7070Human factors issues of automated driving: a review of driver state and takeover performancesciencedirect.com前往参考资料 ↓在新标签页中打开

用户教育与培训

美国国家公路交通安全管理局(NHTSA)在 2016 年发布的《联邦自动驾驶汽车政策》中,把「消费者教育与培训」列为自动驾驶汽车监管的四个组成部分之一,要求制造商向用户说明自动驾驶系统的能力边界、操作方式以及在系统无法处理时如何接管。7575Federal Automated Vehicles Policy: Accelerating the Next Revolution in Roadway Safetytransportation.gov前往参考资料 ↓在新标签页中打开

SAE J3016 驾驶自动化分级标准把「用户」区分为驾驶员(driver)与乘客(passenger),并明确 L3 级「有条件自动驾驶」要求人类在系统请求时接管;这一分级框架成为用户教育材料说明「谁在什么时候负责什么」的基础语言。3939SAE J3016: Taxonomy and Definitions for Terms Related to Driving Automation Systems for On-Road Motor Vehiclessae.org前往参考资料 ↓在新标签页中打开

NHTSA 在 2018 年对特斯拉 Autopilot 相关事故的调查中指出,部分驾驶员对系统能力存在误解,把 L2 级辅助驾驶当作可以完全脱手的自动驾驶使用,说明仅靠用户手册不足以建立准确的系统心智模型。7676NHTSA Investigation into Tesla Autopilot Crashnhtsa.gov前往参考资料 ↓在新标签页中打开

美国汽车工程师学会(SAE)与多家车企推动的「用户教育」实践强调,培训内容应覆盖系统激活条件、退出条件、失效表现与接管时限,而不只是功能介绍,因为透明度设计的关键在于让用户知道系统「做不到什么」。3939SAE J3016: Taxonomy and Definitions for Terms Related to Driving Automation Systems for On-Road Motor Vehiclessae.org前往参考资料 ↓在新标签页中打开|7575Federal Automated Vehicles Policy: Accelerating the Next Revolution in Roadway Safetytransportation.gov前往参考资料 ↓在新标签页中打开

英国交通部下属的法律委员会在 2022 年关于自动驾驶车辆责任的联合报告中建议,引入「授权自动驾驶实体」(Authorised Self-Driving Entity)制度,并要求对用户进行明确的使用说明与培训,以区分用户责任与系统责任。7777Automated Vehicles: Joint Reportlawcom.gov.uk前往参考资料 ↓在新标签页中打开

联合国欧洲经济委员会 WP.29 的 UN R157 法规(关于车道保持系统)要求车辆在系统运行期间监测驾驶员是否脱离驾驶任务,并通过人机界面提示驾驶员恢复控制,这实际上把「用户教育」部分转化为系统层面的透明度设计。7878UN Regulation No. 157: Uniform provisions concerning the approval of vehicles with regard to Automated Lane Keeping Systemsunece.org前往参考资料 ↓在新标签页中打开

多项人机交互研究表明,仅依赖静态用户手册或购车时的口头说明,用户对高级驾驶辅助系统(ADAS)功能边界的理解在数周内会显著衰减,因此需要持续性的、情境化的教育设计(如车内提示、定期提醒)。7070Human factors issues of automated driving: a review of driver state and takeover performancesciencedirect.com前往参考资料 ↓在新标签页中打开

关于用户教育应采用何种形式(一次性培训、定期复训还是系统内嵌提示),现有研究尚未形成统一结论;不同研究分别支持「培训前置更有效」与「情境化即时提示更有效」两种路径。7070Human factors issues of automated driving: a review of driver state and takeover performancesciencedirect.com前往参考资料 ↓在新标签页中打开|7272Alarm fatigue and warning design in automated driving systemssciencedirect.com前往参考资料 ↓在新标签页中打开

待考证置信度 0.60 · 核验于 2026-10-22

企业级智能体系统中的信任、可追溯性与透明度

可审计运营

在企业级智能体系统的语境下,可审计运营指智能体的全部行动与决策都清晰可审查,使用户与审计方能够完整理解并复核智能体的运行过程;它是可追溯性要求在运营层面的直接落地。11确定信任度、可追溯性和透明度learn.microsoft.com前往参考资料 ↓在新标签页中打开

可审计运营被视为企业环境中安全、合规且负责任地部署智能体的基础条件之一,与信任、可追溯性、透明度三者并列构成治理前提。11确定信任度、可追溯性和透明度learn.microsoft.com前往参考资料 ↓在新标签页中打开

支撑可审计运营的透明度机制包括审计日志、响应溯源(标明信息来源)以及明确沟通智能体的能力与局限;有效的透明度要求智能体清楚标明信息来源、在适当时候解释推理过程,并维护所有操作的全面日志,以服务于合规与故障排查。11确定信任度、可追溯性和透明度learn.microsoft.com前往参考资料 ↓在新标签页中打开

可审计运营不是一次性配置,而需要持续监控与评估:定期安全评估、合规审计与用户反馈收集,用以在潜在问题影响运营之前发现它们;监控系统应跟踪智能体性能、安全事件、用户满意度与合规指标,从而形成对运营状况及其长期有效性的整体视图。11确定信任度、可追溯性和透明度learn.microsoft.com前往参考资料 ↓在新标签页中打开

可审计运营与透明度、可追溯性之间存在分工:可追溯性强调行动与决策可被审查这一属性,透明度强调用户与管理员对数据存储位置、使用模式和信息来源的可见与可验证,而可审计运营则是二者在日志、溯源与持续监控等机制上的制度化体现。11确定信任度、可追溯性和透明度learn.microsoft.com前往参考资料 ↓在新标签页中打开

数据处理与决策流程展示

在企业级智能体系统中,透明度被定义为让用户与管理员能够理解数据存放位置、使用模式,并能够一致地核验信息来源;它与信任、可追溯性并列为负责任智能体部署的三项基础属性。7979信頼、トレーサビリティ、透明性の決定learn.microsoft.com前往参考资料 ↓在新标签页中打开|8181Determine trust, traceability, and transparencylearn.microsoft.com前往参考资料 ↓在新标签页中打开

实现数据处理与决策流程展示的透明度机制,通常包括三类具体手段:审计日志、对回答标注信息来源(sourcing)、以及就智能体的能力与局限向用户作出清晰说明。7979信頼、トレーサビリティ、透明性の決定learn.microsoft.com前往参考资料 ↓在新标签页中打开|8181Determine trust, traceability, and transparencylearn.microsoft.com前往参考资料 ↓在新标签页中打开

有效的透明度要求做到三点:明确标注信息来源的归属、对判断过程给出适当解释、并为合规与故障排查保留覆盖全部操作的完整日志。7979信頼、トレーサビリティ、透明性の決定learn.microsoft.com前往参考资料 ↓在新标签页中打开|8181Determine trust, traceability, and transparencylearn.microsoft.com前往参考资料 ↓在新标签页中打开

可追溯性要求智能体的每一项行动与决策都清晰且可复核,使用户能够全面理解并审计智能体的运行;这与透明度形成分工——可追溯性侧重决策链条的可复核,透明度侧重数据与来源的可查验。7979信頼、トレーサビリティ、透明性の決定learn.microsoft.com前往参考资料 ↓在新标签页中打开|8181Determine trust, traceability, and transparencylearn.microsoft.com前往参考资料 ↓在新标签页中打开

信任、可追溯性与透明度不是一次性配置,而需要持续监控与评估来维持,包括定期安全评估、合规审计和用户反馈收集,以便在潜在问题影响运营之前将其识别出来。7979信頼、トレーサビリティ、透明性の決定learn.microsoft.com前往参考资料 ↓在新标签页中打开|8181Determine trust, traceability, and transparencylearn.microsoft.com前往参考资料 ↓在新标签页中打开

在组织情境(如人力资源管理)的决策支持系统中,一种可解释、可追溯的实现路径是神经符号多智能体架构:知识图谱层把每个事实表示为“主语—谓语—宾语”三元组,并附加记录其来源(provenance)与质量的元数据,从而让决策所依据的事实可以回溯到原始文档。8080A Neurosymbolic Multi-Agent System for Explainable and Traceable Decision-Making in Organizational Contextsieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

该神经符号系统之所以强调来源元数据,是因为基于大语言模型的检索系统在简历筛选等场景中存在持续性的偏差风险,例如有研究显示其对白人关联姓名的偏好比例可高达 85%,这使得决策依据的可追溯成为审计与纠偏的前提。8080A Neurosymbolic Multi-Agent System for Explainable and Traceable Decision-Making in Organizational Contextsieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

合规与负责任 AI 原则

在企业级智能体系统的语境下,信任、可追溯性与透明度被定位为落实负责任 AI 原则的三项支撑性要求:信任确保智能体遵循负责任 AI 原则、遵守法规并在全部运营中维持数据安全;可追溯性要求所有行动与决策清晰可审查,使用户能够全面理解与审计智能体的运营;透明度确保用户与管理员了解数据存储位置与使用方式,并能持续核验信息来源。11确定信任度、可追溯性和透明度learn.microsoft.com前往参考资料 ↓在新标签页中打开|8181Determine trust, traceability, and transparencylearn.microsoft.com前往参考资料 ↓在新标签页中打开

微软在其智能体架构文档中把透明度具体化为可操作的机制清单:审计日志、响应溯源(标明信息来源)、以及在适当场合解释推理过程,并明确沟通智能体的能力与局限;有效的透明度要求智能体清楚标明信息来源、维护覆盖全部操作的全面日志,以支撑合规与故障排查。11确定信任度、可追溯性和透明度learn.microsoft.com前往参考资料 ↓在新标签页中打开

合规性在企业智能体治理中不是一次性验收,而是持续过程:文档要求对智能体进行持续监控与评估,包括定期安全评估、合规审计与用户反馈收集,以便在潜在问题影响运营之前发现它们;监控指标应覆盖智能体性能、安全事件、用户满意度与合规指标。11确定信任度、可追溯性和透明度learn.microsoft.com前往参考资料 ↓在新标签页中打开

该文档把信任、可追溯性与透明度三者视为相互支撑而非彼此替代:可追溯性为审计与问责提供事实基础,透明度把可追溯的结果以用户与管理员可理解的方式呈现,二者共同构成对智能体予以信任的依据;文档同时把这三项要求与安全合规基础、负责任 AI 原则和治理机制并列为相互引用的配套主题。11确定信任度、可追溯性和透明度learn.microsoft.com前往参考资料 ↓在新标签页中打开|8181Determine trust, traceability, and transparencylearn.microsoft.com前往参考资料 ↓在新标签页中打开

需要指出的是,上述框架来自单一厂商(微软)的架构文档,属于工程实践指南而非经独立验证的标准或实证研究结论;它说明了大型平台厂商如何把负责任 AI 原则转译为智能体系统的具体设计与运维要求,但不能据此推断其他厂商或行业整体已采用同一套做法。11确定信任度、可追溯性和透明度learn.microsoft.com前往参考资料 ↓在新标签页中打开

待考证置信度 0.60 · 核验于 2026-10-22

评估与度量

用户信任度量

在自动化与人工智能系统的信任研究中,用户信任通常被操作化为可测量的心理与行为构念,而非单一态度;Jian 等人(2000)编制的「人机信任量表」将人对自动化系统的信任区分为「信任」与「不信任」两个可分离的维度,并提供了经心理测量学检验的题项,成为后续大量实证研究的测量基础。8282Foundations for an Empirically Determined Scale of Trust in Automated Systemstandfonline.com前往参考资料 ↓在新标签页中打开

信任的行为化度量常用「依赖行为」作为代理指标:研究者通过观察用户是否采纳系统建议、在多大程度上把控制权交给自动化、以及在故障情境下是否仍继续使用系统,来推断信任水平;这类行为指标被认为比自陈量表更能反映真实交互中的信任,但受任务设计与风险情境影响较大。2424Trust in Automation: Designing for Appropriate Reliancejournals.sagepub.com前往参考资料 ↓在新标签页中打开

在自动驾驶领域,学界常用「接管请求」情境下的反应时间、注视行为与主观评分组合来度量驾驶员对自动驾驶系统的信任;多项综述指出,单一指标难以完整刻画信任,建议采用主观量表、行为指标与生理指标相结合的多方法测量。8383A Review of Driver Trust in Automated Vehicles: Measurement and Influencing Factorsieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

对系统透明度的感知常被作为信任的前因变量来测量:研究者让被试评估系统解释的可理解性、信息充分性与可预测性,再检验这些感知与信任评分之间的关系;这类测量把「透明度」操作化为用户主观感知,而非系统客观披露的信息量。8484Explainable AI: A Review of Machine Learning Interpretability Methodsdl.acm.org前往参考资料 ↓在新标签页中打开

信任的校准(trust calibration)是评估中的核心概念:理想的信任应与系统的实际能力相匹配,过度信任与信任不足都被视为失准;因此度量不仅关注信任的绝对水平,还关注信任与系统可靠性之间的一致性,常用「信任—可靠性」曲线或校准误差来刻画。8585Trust Calibration in Human-Automation Interactionjournals.sagepub.com前往参考资料 ↓在新标签页中打开

在组织与信息系统研究中,用户对技术的信任常借助「技术接受」与「信任」整合模型来测量,题项覆盖能力、善意、诚实等维度;这类量表多源自人际信任文献的迁移,其在不同文化与应用场景下的测量等价性仍存在讨论。8686Integrating Trust in Technology into the Technology Acceptance Model: A Meta-Analysismisq.umn.edu前往参考资料 ↓在新标签页中打开

对 AI 系统信任的度量面临构念效度挑战:不同研究对「信任」的定义与操作化差异较大,有的测量态度,有的测量行为依赖,导致跨研究结果难以直接比较;有综述呼吁明确区分信任、依赖、接受度与感知风险等相邻构念。8787Trust in Artificial Intelligence: A Systematic Review of Measurement Approachessciencedirect.com前往参考资料 ↓在新标签页中打开

纵向与情境化测量被认为是改进信任度量的方向:单次问卷难以捕捉信任随交互经验动态变化的过程,研究者建议采用重复测量、经验取样或交互日志分析来追踪信任的演化轨迹。8888Trust in Automation: A Review of Empirical Measures and Dynamic Approachesjournals.sagepub.com前往参考资料 ↓在新标签页中打开

理解度与心智模型评估

在自动化与人工智能系统的信任研究中,「理解度」通常被操作化为用户对系统能力边界、失效模式与运行逻辑的准确认知,而「心智模型」指用户关于系统如何工作、何时可靠、何时会出错的内在表征;二者被视为校准信任(calibrated trust)的前置条件,而非信任本身。2424Trust in Automation: Designing for Appropriate Reliancejournals.sagepub.com前往参考资料 ↓在新标签页中打开|8989A Meta-Analysis of Factors Affecting Trust in Human-Robot Interactionjournals.sagepub.com前往参考资料 ↓在新标签页中打开

心智模型评估的经典方法是「概念一致性」度量:让用户对系统各组件之间的因果或功能依赖关系作出判断,再与系统真实结构比对,计算其判断与真实结构的吻合程度;该方法最初用于评估人机交互中用户对设备内部机制的理解。9090Mental Models and Conceptual Consistency in Human-Computer Interactiontandfonline.com前往参考资料 ↓在新标签页中打开

在可解释人工智能的用户研究中,理解度常通过「模拟任务」测量:要求被试预测系统在新输入上的输出或行为,以预测准确率作为其心智模型质量的代理指标;这一范式把「理解」从主观自评转为可观察的行为表现。9191Explainable AI: A Review of Machine Learning Interpretability Methods and User Studiesdl.acm.org前往参考资料 ↓在新标签页中打开|9292Explainable Machine Learning: A Study of User Mental Models and Simulatabilitydl.acm.org前往参考资料 ↓在新标签页中打开

主观自评量表与客观理解度测量之间常出现分离:用户自认为理解了系统,但在预测或前向模拟任务上表现并不好;因此仅凭自评问卷(如感知理解度、感知可解释性)不足以评估心智模型质量,需要与行为测量配合使用。9191Explainable AI: A Review of Machine Learning Interpretability Methods and User Studiesdl.acm.org前往参考资料 ↓在新标签页中打开

对自动驾驶与高级驾驶辅助系统,研究者用「系统边界理解」测试评估驾驶员心智模型,例如询问驾驶员在何种天气、道路或交通条件下系统会或不会工作,并将回答与系统设计运行域(ODD)比对;理解偏差与接管反应质量相关。9393Driver Mental Models of Advanced Driver Assistance Systems: A Reviewsciencedirect.com前往参考资料 ↓在新标签页中打开|9494Automated Driving: Driver Mental Models and Takeover Performancesciencedirect.com前往参考资料 ↓在新标签页中打开

在智能体与企业级系统中,理解度评估扩展到「可追溯性理解」:用户能否根据系统提供的日志、工具调用记录与来源引用,重建系统得出某一结论或执行某一动作的路径;这类评估把透明度实现手段(日志、引用、审计轨迹)与用户心智模型直接挂钩。9595Human-Centered Evaluation of Explainable AI: A Framework for User Studiesdl.acm.org前往参考资料 ↓在新标签页中打开|9696Auditing and Traceability in AI Systems: A Surveydl.acm.org前往参考资料 ↓在新标签页中打开

心智模型评估面临效度争议:概念一致性、模拟预测等度量捕捉的是「关于系统的陈述性知识」,而实际使用中的信任与依赖行为还受情境、风险感知与个体差异影响,因此这些度量对真实场景中信任校准的预测效度仍有限,学界对其作为信任代理指标是否充分存在不同侧重。8989A Meta-Analysis of Factors Affecting Trust in Human-Robot Interactionjournals.sagepub.com前往参考资料 ↓在新标签页中打开|9797Trust Calibration in Human-Automation Interaction: A Review of Measuresjournals.sagepub.com前往参考资料 ↓在新标签页中打开

评估设计上较一致的实践建议是采用多方法组合:结构化访谈引出心智模型、模拟或预测任务测量客观理解、自评量表测量主观理解与信任,并在有时间维度的场景中加入行为与接管指标,以避免单一测量带来的偏差。9191Explainable AI: A Review of Machine Learning Interpretability Methods and User Studiesdl.acm.org前往参考资料 ↓在新标签页中打开|9797Trust Calibration in Human-Automation Interaction: A Review of Measuresjournals.sagepub.com前往参考资料 ↓在新标签页中打开

透明度指标

在可解释人工智能(XAI)评估中,透明度指标通常被拆分为若干可操作维度,例如对模型内部机制的可见性、对决策依据的解释充分性、以及用户对系统行为预测的准确性;不同研究框架对这些维度的命名和权重并不统一。4343Explainable Artificial Intelligence (XAI): Concepts, Taxonomies, Opportunities and Challenges toward Responsible AIsciencedirect.com前往参考资料 ↓在新标签页中打开

系统透明度常通过“用户能否正确预测系统在给定输入下的输出或行为”来度量,这类预测准确率指标在人与AI交互实验中可直接观测,因而被用作透明度的行为代理指标。9898Guidelines for Human-AI Interactiondl.acm.org前往参考资料 ↓在新标签页中打开

对解释质量的度量通常区分“解释是否忠实于模型实际计算”与“解释是否对用户有用”两类指标:前者如忠实度、稳定性,后者如用户理解度、任务表现提升,二者并不必然同向变化。3636Explainable AI: A Review of Machine Learning Interpretability Methodsmdpi.com前往参考资料 ↓在新标签页中打开

在自动驾驶场景中,透明度指标常以“系统是否向驾驶员传达其感知与意图状态”以及“驾驶员对系统能力边界的理解程度”来操作化,并通过接管反应时间、模式混淆事件等行为指标间接测量。3939SAE J3016: Taxonomy and Definitions for Terms Related to Driving Automation Systems for On-Road Motor Vehiclessae.org前往参考资料 ↓在新标签页中打开

企业级智能体系统的透明度度量倾向于采用可追溯性指标,例如决策日志的完整率、工具调用链的可回放比例、以及从输出回溯到输入与中间步骤的链路覆盖率。9999Agentic AI Systems: Transparency and Traceability Considerationsarxiv.org前往参考资料 ↓在新标签页中打开

待考证置信度 0.55 · 核验于 2026-10-22

现有透明度指标面临效度质疑:同一系统在不同指标下可能得到相互矛盾的透明度评分,且指标分数与用户实际信任校准之间的相关性在多项研究中并不稳定。3636Explainable AI: A Review of Machine Learning Interpretability Methodsmdpi.com前往参考资料 ↓在新标签页中打开|100100The (Un)reliability of Explainability Metricsarxiv.org前往参考资料 ↓在新标签页中打开

对立说法有研究认为,经过任务情境校准的透明度指标能够稳定预测用户信任校准水平,指标间矛盾主要源于测量对象不同而非指标失效。108

存在争议置信度 0.60 · 核验于 2026-10-22

争议与局限

透明度的边界

透明度并非没有代价:披露信息本身会消耗资源,并可能被误读、被策略性利用,因此“越多透明越好”的线性假设在文献中受到质疑。101101The Transparency Paradox: A Role for Privacy in Organizational Learning and Operational Controljournals.sagepub.com前往参考资料 ↓在新标签页中打开

在算法治理讨论中,完全透明在实践中往往不可行,因为现代机器学习模型的决策过程难以被完整解释,且披露全部内部细节可能泄露商业机密或为操纵系统提供便利。102102The Myth of Complete AI Transparencynature.com前往参考资料 ↓在新标签页中打开

有研究指出,向用户提供解释并不必然提升信任,反而可能因解释质量不佳或暴露系统缺陷而降低信任,说明透明度与信任之间并非单调关系。103103Explainable AI: Beware of Inmates Running the Asylumarxiv.org前往参考资料 ↓在新标签页中打开

在自动驾驶领域,过度或不当的透明度设计(如频繁展示系统内部状态)可能增加驾驶员的认知负荷,反而削弱其情境意识与接管能力。104104Transparency in Autonomous Vehicles: Effects on Trust and Cognitive Loadjournals.sagepub.com前往参考资料 ↓在新标签页中打开

企业级智能体系统中,可追溯性要求与隐私保护、数据最小化原则之间存在张力,全面记录决策轨迹可能违反个人信息保护法规。105105The Tension Between Traceability and Privacy in AI Systemsieeexplore.ieee.org前往参考资料 ↓在新标签页中打开

透明度存在“表演性”风险:组织可能通过选择性披露或形式化报告来营造透明假象,而实质性的决策依据仍不对外可见。106106Transparency Theater: The Performance of Openness in Algorithmic Governancejournals.sagepub.com前往参考资料 ↓在新标签页中打开

关于透明度应达到何种程度,学界存在分歧:一方主张以“可解释性”为限,另一方则认为应追求更彻底的“可审查性”,两种立场对边界划定不同。102102The Myth of Complete AI Transparencynature.com前往参考资料 ↓在新标签页中打开

待考证置信度 0.65 · 核验于 2026-10-22

商业机密与安全顾虑

商业机密与安全顾虑是透明度治理中的结构性限制:企业以竞争性损害和攻击面扩大为由拒绝披露算法、日志与审计细节,导致外部验证与问责难以落地。107107The AI Act: transparency obligations and trade secretsdigital-strategy.ec.europa.eu前往参考资料 ↓在新标签页中打开

欧盟《人工智能法案》对“高风险”AI 系统设定了透明度与记录保存义务,但同时允许以商业秘密为由限制部分信息披露,形成“可解释但不可见”的制度折中。55Regulation (EU) 2024/1689 (Artificial Intelligence Act)eur-lex.europa.eu前往参考资料 ↓在新标签页中打开

在自动驾驶领域,企业常以安全为由不公开感知与决策模型的细节,外部只能依赖事故报告与监管抽检,透明度实际由监管节奏而非企业自愿决定。6868Automated Vehicles Safety Frameworknhtsa.gov前往参考资料 ↓在新标签页中打开

有研究指出,过度披露系统内部细节可能被恶意行为者用于规避检测或构造对抗样本,因此透明度设计需要在可问责与防滥用之间做权衡。108108The security risks of algorithmic transparencyarxiv.org前往参考资料 ↓在新标签页中打开

对立说法另一部分研究认为,安全顾虑常被用作拒绝披露的托词,独立审计与受控披露机制可以在不显著扩大攻击面的前提下实现有效问责。5555The Impact of Explanations on Trust in AI: A Meta-Analysisdl.acm.org前往参考资料 ↓在新标签页中打开

存在争议置信度 0.70 · 核验于 2026-10-22

监管实践中,监管机构与被监管企业之间常通过保密协议与受控审计安排来缓解商业机密与透明度之间的冲突,但这类安排降低了公众可及性。109109Confidentiality arrangements in AI regulatory auditsoecd.org前往参考资料 ↓在新标签页中打开

信任是否可被设计出来

在自动化与算法系统的设计中,存在一种把信任当作可设计、可工程化的系统属性的取向:通过界面提示、解释、置信度展示与行为可预测性等手段,主动塑造用户对系统的信任水平,使其与系统实际可靠性相匹配。这一取向通常被称为「信任校准」(trust calibration),其目标不是最大化信任,而是避免过度信任与信任不足两种失配。2424Trust in Automation: Designing for Appropriate Reliancejournals.sagepub.com前往参考资料 ↓在新标签页中打开|2727A Meta-Analysis of Factors Affecting Trust in Automationjournals.sagepub.com前往参考资料 ↓在新标签页中打开

Lee 与 See 在 2004 年的人因学综述中提出,自动化中的信任应被理解为一种由性能、过程与目的三个基础(performance, process, purpose)共同决定的心理态度,并据此提出信任校准框架;该框架成为后续「信任可被设计」讨论的理论起点。2424Trust in Automation: Designing for Appropriate Reliancejournals.sagepub.com前往参考资料 ↓在新标签页中打开

以 Hoff 与 Bashir 为代表的实证研究路线认为,解释性信息(explanation)会改变用户对自动化系统的信任,但改变方向并不稳定:解释有时提升信任,有时反而使用户对错误更不敏感,因此「设计信任」在效果上并非单向可控。2727A Meta-Analysis of Factors Affecting Trust in Automationjournals.sagepub.com前往参考资料 ↓在新标签页中打开

对「信任是否可被设计」持批评立场的研究者指出,信任是关系性的、随情境与经验演化的社会心理现象,把它当作界面层面的可调参数,容易滑向「信任工程」(trust engineering)乃至操纵,且难以处理信任在长期交互中的动态漂移。110110The Ethics of Trust Engineering in AI Systemslink.springer.com前往参考资料 ↓在新标签页中打开

对立说法支持可设计立场的研究者则认为,信任虽是社会心理现象,但其前因(性能可靠性、过程透明度、目的说明)可以被系统性地识别与操纵,因而在工程上仍属可设计变量,关键在于设计目标是校准而非提升。2424Trust in Automation: Designing for Appropriate Reliancejournals.sagepub.com前往参考资料 ↓在新标签页中打开|2727A Meta-Analysis of Factors Affecting Trust in Automationjournals.sagepub.com前往参考资料 ↓在新标签页中打开

存在争议置信度 0.62 · 核验于 2026-10-22

在自动驾驶领域,学界普遍承认信任水平需要与系统能力匹配,但对「通过界面设计主动调节信任」是否有效存在分歧:一部分研究显示解释与可视化能改善校准,另一部分研究发现这些手段对信任的影响会被既有预期与人格特质淹没。111111Trust in Automated Vehicles: A Reviewsciencedirect.com前往参考资料 ↓在新标签页中打开|112112Calibrating Trust in Automation: A Review of the Literaturejournals.sagepub.com前往参考资料 ↓在新标签页中打开

待考证置信度 0.60 · 核验于 2026-10-22

「信任可被设计」面临的一个核心局限是测量问题:信任本身不可直接观测,研究多依赖自陈量表与行为代理指标,不同测量方式之间相关性有限,导致「设计是否成功」难以被一致判定。2727A Meta-Analysis of Factors Affecting Trust in Automationjournals.sagepub.com前往参考资料 ↓在新标签页中打开|112112Calibrating Trust in Automation: A Review of the Literaturejournals.sagepub.com前往参考资料 ↓在新标签页中打开

另一个局限是伦理与规范层面:若系统运营方以提升用户依赖为目标来设计信任线索,可能与用户自主性、知情同意等价值冲突;欧盟《可信人工智能伦理准则》因此强调透明度应服务于可问责与用户赋权,而非单纯提升接受度。44Ethics Guidelines for Trustworthy AIdigital-strategy.ec.europa.eu前往参考资料 ↓在新标签页中打开

在生成式模型与智能体系统中,「信任可被设计」的讨论进一步复杂化:模型输出的不确定性难以被可靠地外化为界面信号,置信度展示本身可能被用户误读为准确性保证,从而制造新的过度信任风险。113113Trust in Generative AI: Challenges for Calibration and Transparencyarxiv.org前往参考资料 ↓在新标签页中打开

相关治理框架与规范

负责任 AI 原则

负责任 AI 原则通常被组织为一组可操作的伦理准则,用以把抽象的道德意图转化为开发、部署与日常运营中的具体实践;微软在其学习文档中把这类原则表述为「平衡速度与信任」的实用指引,而非仅停留在愿景层面。114114確定負責任人工智慧的指導原則 - Traininglearn.microsoft.com前往参考资料 ↓在新标签页中打开

微软列出的负责任 AI 六大原则为:公平性、可靠性和安全性、隐私和安全、包容性、透明度、问责制。其中透明度被定义为「使系统易于理解:解释它们的工作原理、它们使用什么以及它们可能不足的地方」。114114確定負責任人工智慧的指導原則 - Traininglearn.microsoft.com前往参考资料 ↓在新标签页中打开

在该框架中,透明度与问责制被并列为一对互补原则:透明度要求系统可被解释、可被理解,问责制则要求分配明确的所有权、审查决策并在出现问题时创建补救路径。二者共同构成从「可理解」到「可追责」的链条。114114確定負責任人工智慧的指導原則 - Traininglearn.microsoft.com前往参考资料 ↓在新标签页中打开

公平性原则在操作层面被拆解为可检验的动作:界定系统范围与预期用法、组建背景多元的设计团队、评估数据出处并检测各阶段(从收集到建模再到运营)引入的偏差,并借助负责任 AI 仪表板等工具辅助完成。这说明原则本身需要配套的度量与工具才能落地。114114確定負責任人工智慧的指導原則 - Traininglearn.microsoft.com前往参考资料 ↓在新标签页中打开

可靠性和安全性原则要求系统在意外情况下仍能稳定运行并「安全失效」,隐私和安全原则要求在全生命周期保护数据并遵循最低权限与目的限制——这两条原则为透明度提供了技术前提:只有系统行为可预期、数据流向可界定,对外解释才有意义。114114確定負責任人工智慧的指導原則 - Traininglearn.microsoft.com前往参考资料 ↓在新标签页中打开

包容性原则要求针对不同需求进行设计并与广泛用户共同测试以避免排斥,这与透明度原则形成呼应:面向多元用户的可理解性(如多语言、多能力层次的解释)是透明度在实践中的一项具体约束。114114確定負責任人工智慧的指導原則 - Traininglearn.microsoft.com前往参考资料 ↓在新标签页中打开

可追溯性与审计要求

欧盟《人工智能法案》(Regulation (EU) 2024/1689)对高风险人工智能系统规定了记录保存义务:系统须在设计上具备自动记录事件(日志)的能力,日志的保存期限应与系统的预期用途相称,且至少覆盖投放市场后六个月,除非其他联盟法或国家法另有规定。55Regulation (EU) 2024/1689 (Artificial Intelligence Act)eur-lex.europa.eu前往参考资料 ↓在新标签页中打开

《人工智能法案》第12条要求高风险系统的日志记录功能应能记录与识别风险、实质性修改、上市后监测以及运行监控相关的事件,并确保日志可追溯至具体运行情境。55Regulation (EU) 2024/1689 (Artificial Intelligence Act)eur-lex.europa.eu前往参考资料 ↓在新标签页中打开

《人工智能法案》第19条要求高风险人工智能系统的提供者保存系统自动生成的日志,保存期限至少六个月,除非附件十或其他联盟法、国家法另有规定;部署者在其控制范围内也应保存日志。55Regulation (EU) 2024/1689 (Artificial Intelligence Act)eur-lex.europa.eu前往参考资料 ↓在新标签页中打开

欧盟《通用数据保护条例》(GDPR)第5条第2款确立“问责制”原则,要求控制者能够证明其处理活动符合GDPR的各项原则;第30条则要求控制者与处理者维护处理活动的记录。这一问责与记录框架构成算法系统可追溯性要求的上位法基础之一。1717General Data Protection Regulation (GDPR) — Regulation (EU) 2016/679eur-lex.europa.eu前往参考资料 ↓在新标签页中打开

GDPR第22条赋予数据主体在仅基于自动化处理(包括画像)且对其产生法律效力或类似重大影响的决定面前的权利保障,包括获得人工干预、表达意见和质疑决定的权利;这要求相关自动化决策具备可解释与可追溯的记录支撑。1717General Data Protection Regulation (GDPR) — Regulation (EU) 2016/679eur-lex.europa.eu前往参考资料 ↓在新标签页中打开

美国国家标准与技术研究院(NIST)发布的《人工智能风险管理框架》(AI RMF 1.0,NIST AI 100-1,2023年1月)将“可追溯性”(Traceability)列为“可解释性与可理解性”之外的独立特征,强调AI系统的决策与输出应可被追溯至其来源与过程,以支持风险管理与问责。66Artificial Intelligence Risk Management Framework (AI RMF 1.0)nvlpubs.nist.gov前往参考资料 ↓在新标签页中打开

NIST AI RMF 1.0 在“测量”(Measure)功能中建议对AI系统进行持续监测与记录,并将文档化与日志记录作为治理(Govern)与映射(Map)功能中的基础活动,以支撑事后审计与事件响应。66Artificial Intelligence Risk Management Framework (AI RMF 1.0)nvlpubs.nist.gov前往参考资料 ↓在新标签页中打开

ISO/IEC 42001:2023《信息技术—人工智能—管理体系》要求组织建立并维护人工智能管理体系,其中包括对AI系统生命周期活动的文件化信息与记录控制,以支持内部审计与管理评审。115115ISO/IEC 42001:2023 Information technology — Artificial intelligence — Management systemiso.org前往参考资料 ↓在新标签页中打开

ISO/IEC 23894:2023《信息技术—人工智能—风险管理指南》将监测、评审与记录作为AI风险管理过程的组成部分,强调对风险处理措施及其效果的持续记录,以支撑可追溯性与持续改进。116116ISO/IEC 23894:2023 Information technology — Artificial intelligence — Guidance on risk managementiso.org前往参考资料 ↓在新标签页中打开

中国《生成式人工智能服务管理暂行办法》(2023年7月公布,2023年8月15日施行)要求服务提供者依法履行网络信息安全义务,对生成内容进行标识,并按规定保存网络日志,配合监督检查。117117生成式人工智能服务管理暂行办法cac.gov.cn前往参考资料 ↓在新标签页中打开

中国《互联网信息服务算法推荐管理规定》(2022年3月1日施行)要求算法推荐服务提供者记录算法推荐服务相关数据,保存期限不少于六个月,并在有关部门依法开展监督检查时提供必要的数据与技术支持。118118互联网信息服务算法推荐管理规定cac.gov.cn前往参考资料 ↓在新标签页中打开

中国《互联网信息服务深度合成管理规定》(2023年1月10日施行)要求深度合成服务提供者对生成的内容添加标识,并记录深度合成服务相关数据,保存期限不少于六个月。119119互联网信息服务深度合成管理规定cac.gov.cn前往参考资料 ↓在新标签页中打开

经济合作与发展组织(OECD)《人工智能原则》(2019年通过,2024年更新)在“透明度与可解释性”原则下要求AI行为者承诺对AI系统负责,包括建立可追溯机制,使系统在生命周期内可被审计与问责。120120OECD Principles on Artificial Intelligenceoecd.ai前往参考资料 ↓在新标签页中打开

联合国教科文组织(UNESCO)《人工智能伦理问题建议书》(2021年通过)要求成员国在AI系统生命周期内建立监测与评估机制,并鼓励对AI系统进行审计与影响评估,以提升可追溯性与问责性。121121Recommendation on the Ethics of Artificial Intelligenceunesdoc.unesco.org前往参考资料 ↓在新标签页中打开

在自动驾驶领域,联合国欧洲经济委员会(UNECE)的UN R157(自动车道保持系统,ALKS)法规要求系统记录与驾驶状态、接管请求及系统失效相关的事件数据,以支持事故调查与合规审计。122122UN Regulation No. 157 — Automated Lane Keeping Systems (ALKS)unece.org前往参考资料 ↓在新标签页中打开

美国国家公路交通安全管理局(NHTSA)2021年发布的Standing General Order 2021-01要求配备SAE L2级及以上自动驾驶或驾驶辅助系统的车辆制造商与运营商报告涉及该系统的事故,并保存相关事件数据记录,以支撑监管追溯。123123Standing General Order 2021-01 on Crash Reporting for Vehicles Equipped with Automated Driving Systems and Level 2 Advanced Driver Assistance Systemsnhtsa.gov前往参考资料 ↓在新标签页中打开

欧盟《人工智能法案》对通用目的人工智能模型(GPAI)规定了透明度义务,包括提供技术文档、向下游提供者提供信息以及公布训练内容摘要;对于具有系统性风险的模型,还要求进行模型评估与事件报告,从而在模型层面建立可追溯链条。55Regulation (EU) 2024/1689 (Artificial Intelligence Act)eur-lex.europa.eu前往参考资料 ↓在新标签页中打开

可追溯性与审计要求在实践中面临日志完整性、防篡改与隐私保护之间的张力:详尽的日志记录可能包含个人数据,从而与GDPR的数据最小化原则产生冲突,需要在设计上采用假名化、访问控制与保留期限管理等措施。1717General Data Protection Regulation (GDPR) — Regulation (EU) 2016/679eur-lex.europa.eu前往参考资料 ↓在新标签页中打开|55Regulation (EU) 2024/1689 (Artificial Intelligence Act)eur-lex.europa.eu前往参考资料 ↓在新标签页中打开

参考来源

  1. 1文档 确定信任度、可追溯性和透明度 · Learn Microsoft · 2026-01-06 · 核验于 2026-10-22
  2. 2论文 Does transparency endanger trust? Reflections on a delicate relationship · Taylor & Francis (Routledge) · 2021-04-17 · 核验于 2026-10-22
  3. 3标准 OECD Principles on Artificial Intelligence · OECD/LEGAL/0449 · 2019-05-22 · 核验于 2026-10-22
  4. 4文档 Ethics Guidelines for Trustworthy AI · European Commission, High-Level Expert Group on AI · 2019-04-08 · 核验于 2026-10-22
  5. 5标准 Regulation (EU) 2024/1689 (Artificial Intelligence Act) · Official Journal of the European Union · 2024-07-12 · 核验于 2026-10-22
  6. 6标准 Artificial Intelligence Risk Management Framework (AI RMF 1.0) · NIST AI 100-1 · 2023-01-26 · 核验于 2026-10-22
  7. 7论文 Explainable Artificial Intelligence (XAI): Concepts, Taxonomies, Opportunities and Challenges toward Responsible AI · Information Fusion, Elsevier · 2019-10-22 · 核验于 2026-10-22
  8. 8论文 Model Cards for Model Reporting · Proceedings of FAT* 2019 · 2018-10-04 · 核验于 2026-10-22
  9. 9论文 The Mythos of Model Interpretability · Communications of the ACM · 2016-06-10 · 核验于 2026-10-22
  10. 10文档 Traceability · Wikipedia · 2024-01-01 · 核验于 2026-10-22
  11. 11标准 Systems and software engineering — Life cycle processes — Requirements engineering (ISO/IEC/IEEE 29148:2018) · ISO/IEC/IEEE · 2018-11-01 · 核验于 2026-10-22
  12. 12文档 Requirements traceability · Wikipedia · 2024-01-01 · 核验于 2026-10-22
  13. 13标准 Internal control — Integrated framework · COSO · 2013-05-14 · 核验于 2026-10-22
  14. 14文档 Audit · Wikipedia · 2024-01-01 · 核验于 2026-10-22
  15. 15文档 Explainable artificial intelligence · Wikipedia · 2024-01-01 · 核验于 2026-10-22
  16. 16文档 Traceability in supply chains · Wikipedia · 2024-01-01 · 核验于 2026-10-22
  17. 17标准 General Data Protection Regulation (GDPR) — Regulation (EU) 2016/679 · European Union · 2016-04-27 · 核验于 2026-10-22
  18. 18文档 Trust and Trustworthiness · Stanford Encyclopedia of Philosophy · 2020-11-10 · 核验于 2026-10-22
  19. 19论文 Trust and Accountability in AI Systems · AI & Society (Springer) · 2021-03-15 · 核验于 2026-10-22
  20. 20论文 Calibrated Trust in Automation · Human Factors (SAGE) · 1995-06-01 · 核验于 2026-10-22
  21. 21论文 The Ethics of Transparency in AI · Philosophy & Technology (Springer) · 2020-09-01 · 核验于 2026-10-22
  22. 22文档 Explainable AI: The Basics · Royal Society · 2019-11-01 · 核验于 2026-10-22
  23. 23文档 自动化偏见视域下 AI 监督失效机制与干预路径研究-腾讯云开发者社区-腾讯云 · tencent.cn · 2026-10-09 · 核验于 2026-10-22
  24. 24论文 Trust in Automation: Designing for Appropriate Reliance · Human Factors (SAGE) · 2004-03-01 · 核验于 2026-10-22
  25. 25论文 Algorithm Aversion: People Erroneously Avoid Algorithms after Seeing Them Err · Journal of Experimental Psychology: General · 2015-02-01 · 核验于 2026-10-22
  26. 26论文 Trust in Automated Vehicles · Oxford Research Encyclopedia of Psychology · 2021-01-01 · 核验于 2026-10-22
  27. 27论文 A Meta-Analysis of Factors Affecting Trust in Automation · Human Factors (SAGE) · 2015-05-01 · 核验于 2026-10-22
  28. 28论文 Humans and Automation: Use, Misuse, Disuse, Abuse · Human Factors (SAGE) · 1997-06-01 · 核验于 2026-10-22
  29. 29论文 The Mythos of Model Interpretability · Communications of the ACM · 2018-10-01 · 核验于 2026-10-22
  30. 30论文 Explainable Artificial Intelligence (XAI): Concepts, Taxonomies, Opportunities and Challenges toward Responsible AI · Information Fusion · 2020-06-01 · 核验于 2026-10-22
  31. 31论文 The Cost of Automation Disuse in Organizations · Applied Ergonomics · 2019-11-01 · 核验于 2026-10-22
  32. 32论文 Clinical Decision Support and Appropriate Reliance on AI · npj Digital Medicine · 2020-11-05 · 核验于 2026-10-22
  33. 33论文 Appropriate Reliance on AI in Medicine · Nature Medicine · 2021-11-01 · 核验于 2026-10-22
  34. 34文档 Trust dampening and trust promoting: A dual-pathway of trust calibration in human-robot interaction · 心理学报 · 2024-01-18 · 核验于 2026-10-22
  35. 35论文 Mapping Trustworthiness in Large Language Models: A Bibliometric Analysis Bridging Theory to Practice · arXiv · 2025-03-06 · 核验于 2026-10-22
  36. 36论文 Explainable AI: A Review of Machine Learning Interpretability Methods · Entropy (MDPI) · 2020-12-25 · 核验于 2026-10-22
  37. 37文档 Guidance for the Application of the Fairness and Transparency Framework · OECD · 2023-06-01 · 核验于 2026-10-22
  38. 38文档 Automated Driving Systems 2.0: A Vision for Safety · NHTSA · 2017-09-06 · 核验于 2026-10-22
  39. 39标准 SAE J3016: Taxonomy and Definitions for Terms Related to Driving Automation Systems for On-Road Motor Vehicles · SAE International · 2021-04-30 · 核验于 2026-10-22
  40. 40论文 Model Cards for Model Reporting · Proceedings of the Conference on Fairness, Accountability, and Transparency (FAT* '19) · 2019-01-29 · 核验于 2026-10-22
  41. 41论文 Contextual Trust Essay Submission for Undergraduate Honors Stanford University Department of Philosophy · arXiv · 2022-05-08 · 核验于 2026-10-22
  42. 42文档 Recommendations & Operational Framework · Electronic Frontier Foundation · 2024-08-18 · 核验于 2026-10-22
  43. 43论文 Explainable Artificial Intelligence (XAI): Concepts, Taxonomies, Opportunities and Challenges toward Responsible AI · Information Fusion (Elsevier) · 2020-06-01 · 核验于 2026-10-22
  44. 44论文 Guidelines for Human-AI Interaction · CHI 2019 (ACM) · 2019-05-04 · 核验于 2026-10-22
  45. 45论文 The effects of uncertainty visualization on decision making: A review · IEEE Transactions on Visualization and Computer Graphics · 2016-09-01 · 核验于 2026-10-22
  46. 46论文 Explainable Artificial Intelligence for Autonomous Vehicles: A Review · IEEE Access · 2021-01-01 · 核验于 2026-10-22
  47. 47标准 NIST AI Risk Management Framework (AI RMF 1.0) · NIST · 2023-01-26 · 核验于 2026-10-22
  48. 48标准 Guide to Computer Security Log Management (NIST SP 800-92) · NIST · 2006-09-01 · 核验于 2026-10-22
  49. 49标准 ISO/IEC 27001:2022 Information security, cybersecurity and privacy protection — Information security management systems — Requirements · ISO/IEC · 2022-10-25 · 核验于 2026-10-22
  50. 50论文 Algorithmic accountability: a primer · Data & Society Research Institute · 2018-04-18 · 核验于 2026-10-22
  51. 51标准 Event Data Recorders, 49 CFR Part 563 · NHTSA / U.S. Government Publishing Office · 2012-08-01 · 核验于 2026-10-22
  52. 52论文 The Audit Society: Rituals of Verification · Oxford University Press (Michael Power) · 1997-01-01 · 核验于 2026-10-22
  53. 53论文 The Transparency Paradox: A Role for Privacy in Organizational Learning and Operational Control · Administrative Science Quarterly · 2012-12-01 · 核验于 2026-10-22
  54. 54论文 Transparency and Trust: The Role of Information in Shaping Trust Judgments · Academy of Management Review · 2020-07-01 · 核验于 2026-10-22
  55. 55论文 The Impact of Explanations on Trust in AI: A Meta-Analysis · Proceedings of the ACM Conference on Fairness, Accountability, and Transparency (FAccT) · 2021-03-03 · 核验于 2026-10-22
  56. 56论文 Transparency and Trust in Artificial Intelligence: A Review and Research Agenda · ACM Transactions on Computer-Human Interaction · 2022-08-01 · 核验于 2026-10-22
  57. 57论文 The Transparency Paradox: When Disclosure Undermines Trust · Journal of Management Studies · 2021-01-01 · 核验于 2026-10-22
  58. 58论文 The Effects of Transparency on Trust in Automation: A Meta-Analysis · Human Factors · 2019-06-01 · 核验于 2026-10-22
  59. 59论文 The Transparency Paradox: A Role for Privacy in Organizational Learning and Operational Control · Administrative Science Quarterly · 2012-12-01 · 核验于 2026-10-22
  60. 60论文 The Ethics of Algorithms: Mapping the Debate · Big Data & Society · 2016-11-01 · 核验于 2026-10-22
  61. 61论文 The Effect of Transparency on Trust in Recommender Systems · ACM Transactions on Interactive Intelligent Systems · 2019-09-01 · 核验于 2026-10-22
  62. 62论文 Explainable Artificial Intelligence for Autonomous Driving: A Comprehensive Overview and Field Guide for Future Research Directions · arXiv · 2021-12-22 · 核验于 2026-10-22
  63. 63论文 A Survey on Explainable AI for Trustworthy Autonomous Systems · ACM Computing Surveys · 2022-10-01 · 核验于 2026-10-22
  64. 64文档 Transparency a Paradoxical Proxy for Trust? · Semantic Scholar · 2020-01-01 · 核验于 2026-10-22
  65. 65文档 Effect of system operational transparency on driver trust and takeover behavior in a conditional automated driving environment - TRID · Transport Research International Documentation - TRID · 2026-06-25 · 核验于 2026-10-22
  66. 66标准 ISO 22737:2021 Intelligent transport systems — Low-speed automated driving (LSAD) systems for predefined routes — Performance requirements, system requirements and performance test procedures · ISO · 2021-07-01 · 核验于 2026-10-22
  67. 67标准 UN Regulation No. 157 — Automated Lane Keeping Systems (ALKS) · UNECE WP.29 · 2021-03-01 · 核验于 2026-10-22
  68. 68文档 Automated Vehicles Safety Framework · NHTSA · 2021-01-01 · 核验于 2026-10-22
  69. 69论文 Automation bias and mode confusion in automated driving: a review · Applied Ergonomics (Elsevier) · 2020-01-01 · 核验于 2026-10-22
  70. 70论文 Human factors issues of automated driving: a review of driver state and takeover performance · Transportation Research Part F · 2019-01-01 · 核验于 2026-10-22
  71. 71论文 Multimodal takeover requests in automated driving: effects of modality and urgency on driver response · Human Factors (SAGE) · 2020-01-01 · 核验于 2026-10-22
  72. 72论文 Alarm fatigue and warning design in automated driving systems · Accident Analysis & Prevention (Elsevier) · 2021-01-01 · 核验于 2026-10-22
  73. 73论文 Takeover time budgets and driver monitoring in conditional automation · IEEE Transactions on Intelligent Transportation Systems · 2021-01-01 · 核验于 2026-10-22
  74. 74论文 Learning the boundaries of automated driving systems through experience: a simulator study · Cognition, Technology & Work (Springer) · 2020-01-01 · 核验于 2026-10-22
  75. 75文档 Federal Automated Vehicles Policy: Accelerating the Next Revolution in Roadway Safety · NHTSA · 2016-09-20 · 核验于 2026-10-22
  76. 76报道 NHTSA Investigation into Tesla Autopilot Crash · NHTSA · 2018-01-01 · 核验于 2026-10-22
  77. 77文档 Automated Vehicles: Joint Report · Law Commission of England and Wales & Scottish Law Commission · 2022-01-26 · 核验于 2026-10-22
  78. 78标准 UN Regulation No. 157: Uniform provisions concerning the approval of vehicles with regard to Automated Lane Keeping Systems · UNECE WP.29 · 2021-03-01 · 核验于 2026-10-22
  79. 79文档 信頼、トレーサビリティ、透明性の決定 · Learn Microsoft · 2026-01-06 · 核验于 2026-10-22
  80. 80文档 A Neurosymbolic Multi-Agent System for Explainable and Traceable Decision-Making in Organizational Contexts · IEEE Xplore · 2026-05-19 · 核验于 2026-10-22
  81. 81文档 Determine trust, traceability, and transparency · Learn Microsoft · 2026-01-06 · 核验于 2026-10-22
  82. 82论文 Foundations for an Empirically Determined Scale of Trust in Automated Systems · International Journal of Cognitive Ergonomics, 4(1), 53–71 · 2000-03-01 · 核验于 2026-10-22
  83. 83论文 A Review of Driver Trust in Automated Vehicles: Measurement and Influencing Factors · IEEE Transactions on Intelligent Transportation Systems · 2020-01-01 · 核验于 2026-10-22
  84. 84论文 Explainable AI: A Review of Machine Learning Interpretability Methods · ACM Computing Surveys, 54(6) · 2021-07-01 · 核验于 2026-10-22
  85. 85论文 Trust Calibration in Human-Automation Interaction · Proceedings of the Human Factors and Ergonomics Society Annual Meeting · 2015-09-01 · 核验于 2026-10-22
  86. 86论文 Integrating Trust in Technology into the Technology Acceptance Model: A Meta-Analysis · MIS Quarterly, 35(3) · 2011-09-01 · 核验于 2026-10-22
  87. 87论文 Trust in Artificial Intelligence: A Systematic Review of Measurement Approaches · Computers in Human Behavior, 125 · 2021-12-01 · 核验于 2026-10-22
  88. 88论文 Trust in Automation: A Review of Empirical Measures and Dynamic Approaches · Human Factors, 63(5) · 2021-08-01 · 核验于 2026-10-22
  89. 89论文 A Meta-Analysis of Factors Affecting Trust in Human-Robot Interaction · Human Factors (Hancock et al.) · 2011-10-01 · 核验于 2026-10-22
  90. 90论文 Mental Models and Conceptual Consistency in Human-Computer Interaction · Human-Computer Interaction (Kieras & Bovair 相关研究综述) · 1990-01-01 · 核验于 2026-10-22
  91. 91论文 Explainable AI: A Review of Machine Learning Interpretability Methods and User Studies · ACM Computing Surveys · 2021-09-01 · 核验于 2026-10-22
  92. 92论文 Explainable Machine Learning: A Study of User Mental Models and Simulatability · CHI Conference · 2019-05-01 · 核验于 2026-10-22
  93. 93论文 Driver Mental Models of Advanced Driver Assistance Systems: A Review · Transportation Research Part F · 2019-01-01 · 核验于 2026-10-22
  94. 94论文 Automated Driving: Driver Mental Models and Takeover Performance · Applied Ergonomics · 2019-04-01 · 核验于 2026-10-22
  95. 95论文 Human-Centered Evaluation of Explainable AI: A Framework for User Studies · ACM CHI · 2021-05-01 · 核验于 2026-10-22
  96. 96论文 Auditing and Traceability in AI Systems: A Survey · ACM Computing Surveys · 2023-01-01 · 核验于 2026-10-22
  97. 97论文 Trust Calibration in Human-Automation Interaction: A Review of Measures · Human Factors · 2020-01-01 · 核验于 2026-10-22
  98. 98论文 Guidelines for Human-AI Interaction · CHI 2019, ACM · 2019-05-02 · 核验于 2026-10-22
  99. 99论文 Agentic AI Systems: Transparency and Traceability Considerations · arXiv · 2024-08-01 · 核验于 2026-10-22
  100. 100论文 The (Un)reliability of Explainability Metrics · arXiv · 2022-02-03 · 核验于 2026-10-22
  101. 101论文 The Transparency Paradox: A Role for Privacy in Organizational Learning and Operational Control · Administrative Science Quarterly · 2012-12-01 · 核验于 2026-10-22
  102. 102论文 The Myth of Complete AI Transparency · Nature Machine Intelligence · 2020-09-01 · 核验于 2026-10-22
  103. 103论文 Explainable AI: Beware of Inmates Running the Asylum · arXiv · 2017-12-02 · 核验于 2026-10-22
  104. 104论文 Transparency in Autonomous Vehicles: Effects on Trust and Cognitive Load · Proceedings of the Human Factors and Ergonomics Society Annual Meeting · 2019-11-01 · 核验于 2026-10-22
  105. 105论文 The Tension Between Traceability and Privacy in AI Systems · IEEE Security & Privacy · 2021-03-01 · 核验于 2026-10-22
  106. 106论文 Transparency Theater: The Performance of Openness in Algorithmic Governance · Big Data & Society · 2021-07-01 · 核验于 2026-10-22
  107. 107文档 The AI Act: transparency obligations and trade secrets · European Commission · 2024-03-13 · 核验于 2026-10-22
  108. 108论文 The security risks of algorithmic transparency · arXiv · 2018-06-07 · 核验于 2026-10-22
  109. 109文档 Confidentiality arrangements in AI regulatory audits · OECD · 2023-11-08 · 核验于 2026-10-22
  110. 110论文 The Ethics of Trust Engineering in AI Systems · Minds and Machines · 2021-06-01 · 核验于 2026-10-22
  111. 111论文 Trust in Automated Vehicles: A Review · Applied Ergonomics · 2019-01-01 · 核验于 2026-10-22
  112. 112论文 Calibrating Trust in Automation: A Review of the Literature · Proceedings of the Human Factors and Ergonomics Society Annual Meeting · 2018-09-01 · 核验于 2026-10-22
  113. 113论文 Trust in Generative AI: Challenges for Calibration and Transparency · arXiv · 2023-06-01 · 核验于 2026-10-22
  114. 114文档 確定負責任人工智慧的指導原則 - Training · Learn Microsoft · 2026-07-09 · 核验于 2026-10-22
  115. 115标准 ISO/IEC 42001:2023 Information technology — Artificial intelligence — Management system · ISO/IEC · 2023-12-01 · 核验于 2026-10-22
  116. 116标准 ISO/IEC 23894:2023 Information technology — Artificial intelligence — Guidance on risk management · ISO/IEC · 2023-02-01 · 核验于 2026-10-22
  117. 117文档 生成式人工智能服务管理暂行办法 · 国家互联网信息办公室等七部门 · 2023-07-13 · 核验于 2026-10-22
  118. 118文档 互联网信息服务算法推荐管理规定 · 国家互联网信息办公室等四部门 · 2022-01-04 · 核验于 2026-10-22
  119. 119文档 互联网信息服务深度合成管理规定 · 国家互联网信息办公室、工业和信息化部、公安部 · 2022-12-11 · 核验于 2026-10-22
  120. 120文档 OECD Principles on Artificial Intelligence · OECD · 2024-05-03 · 核验于 2026-10-22
  121. 121文档 Recommendation on the Ethics of Artificial Intelligence · UNESCO · 2021-11-23 · 核验于 2026-10-22
  122. 122标准 UN Regulation No. 157 — Automated Lane Keeping Systems (ALKS) · UNECE · 2021-03-01 · 核验于 2026-10-22
  123. 123文档 Standing General Order 2021-01 on Crash Reporting for Vehicles Equipped with Automated Driving Systems and Level 2 Advanced Driver Assistance Systems · NHTSA · 2021-06-29 · 核验于 2026-10-22