NIST:人工智能偏见远远超出数据本身
在IT行业这个发展更新速度很快的行业,只有不停止的学习,才不会被行业所淘汰。如果你是科技周边学习者,那么本文《NIST:人工智能偏见远远超出数据本身》就很适合你!本篇内容主要包括##content_title##,希望对大家的知识积累有所帮助,助力实战开发!
到目前为止,应该没有人会质疑大多数人工智能都是建立在某种程度上有问题的偏见之上的,而且目前也在使用这种偏见。这是一个被观察和证实了数百次的挑战。组织机构面临的挑战是根除人工智能偏见,而不是仅仅满足于推动更好的、无偏见的数据。

在对其出版物《迈向人工智能中识别和管理偏见的标准》(NIST 1270特别出版物)的一次重大修订中,在去年的公众评论期之后,美国国家标准与技术研究所(NIST)提出了一个强有力的论点,即超越数据甚至ML过程来发现和摧毁AI偏见。
作者们没有指责收集不当或标记不当的数据,而是表示,人工智能偏见的下一个前沿是“人类和系统的制度和社会因素”,并推动从社会技术角度寻找更好的答案。
“环境决定一切,”NIST人工智能偏见的首席研究员、该报告的作者之一瑞瓦·施瓦茨(Reva Schwartz)说。“人工智能系统不是孤立运行的。他们帮助人们做出直接影响他人生活的决定。如果我们要开发值得信赖的人工智能系统,我们需要考虑所有可能削弱公众对人工智能的信任的因素。这些因素中有许多已经超越了技术本身,还影响了技术,我们从各种各样的人和组织收到的评论都强调了这一点。”
造成人工智能偏见的人为和系统偏见是什么?
根据NIST的报告,人类基础分为两大类:个体和群体,每个类别下都有许多特定的偏见。
个体的人类偏见包括自动化自满,即人们过度依赖自动化技能;内隐偏见,一种影响某人做决定的无意识的信念、态度、联想或刻板印象;还有确认偏见,也就是人们更喜欢与他们现有信念一致或一致的信息。
群体人类基础包括群体思维(groupthink),即人们出于顺应群体或避免分歧的愿望而做出非最优决策的现象;资金偏见,当报告有偏见的结果以满足一个资助机构或财政支持者,这反过来可能会受到额外的个人/群体偏见的影响。
对于系统性偏见,NIST报告将其定义为历史的、社会的和制度的。从本质上讲,长期存在的偏见随着时间的推移已经被编入社会和机构,并在很大程度上被视为“事实”或“事情就是这样的”。
这些偏见之所以重要,是因为人工智能部署对当今组织的工作方式有多么大的影响。由于种族偏见的数据,人们被剥夺了抵押贷款,剥夺了他们首次拥有住房的机会。求职者被拒绝面试,因为人工智能被训练成历史上的雇佣决定,这更倾向于男性而不是女性。有前途的年轻学生会因为他们的姓氏与过去成功人士的名字不匹配而被大学拒绝面试或录取。
换句话说:有偏见的人工智能创造了与效率开口一样多的锁门 。 如果组织不积极努力消除部署中的偏见,他们很快就会发现自己在思考和操作方面严重缺乏信任。
NIST 推荐的社会技术观点是什么?
其核心是认识到任何人工智能应用的结果都不只是数学和计算输入。它们是由开发人员或数据科学家制作的,他们的职位和机构各不相同,他们都有一定程度的负担。
NIST的报告中写道:“人工智能的社会技术方法考虑了从数据集建模的价值和行为,与它们交互的人类,以及复杂的组织因素,这些因素涉及到它们的委托、设计、开发和最终部署。”
NIST认为,通过社会技术视角,组织可以通过“准确性、可解释性和可理解性、隐私性、可靠性、鲁棒性、安全性和安全弹性”来培养信任。
他们的建议之一是让组织实施或改进他们的测试、评估、确认和验证(TEVV)过程。在给定的数据集或训练过的模型中,应该有方法从数学上验证偏差。他们还建议在AI开发工作中创造更多来自不同领域和职位的参与,并拥有来自不同部门或组织外部的多个利益相关者。 “human-in-the-loop”模型中,个人或集体不断纠正基本的 ML 输出,也是消除偏见的有效工具。
除了这些和修订后的报告之外,还有NIST的人工智能风险管理框架(AI RMF),这是一套由共识驱动的建议集,用于管理AI系统涉及的风险。一旦完成,它将涵盖人工智能技术和产品的透明度、设计和开发、治理和测试。人工智能RMF的初始评论期已经过去,但我们仍然有很多机会了解人工智能的风险和缓解措施。
今天带大家了解了的相关知识,希望对你有所帮助;关于科技周边的技术知识我们会一点点深入介绍,欢迎大家关注golang学习网公众号,一起学习编程~
LLVM之父Chris Lattner:为什么我们要重建AI基础设施软件
- 上一篇
- LLVM之父Chris Lattner:为什么我们要重建AI基础设施软件
- 下一篇
- 通过使用因果机器学习做出有效的可操作决策以优化业务KPI
-
- 科技周边 · 人工智能 | 6小时前 |
- Hugging Face Datasets map batched 返回长度不一致时怎么定位
- 213浏览 收藏
-
- 科技周边 · 人工智能 | 6小时前 |
- Hugging Face Datasets flatten 怎么展开嵌套字段并保留特征类型
- 455浏览 收藏
-
- 科技周边 · 人工智能 | 7小时前 |
- Hugging Face Datasets with_format 和 set_format 混用后为什么列类型变了
- 228浏览 收藏
-
- 科技周边 · 人工智能 | 7小时前 | 兼容性 · LiteRT Select TF Ops TFLITE_BUILTINS TensorFlow模型转换 不支持算子
- LiteRT 转换遇到不支持算子时怎么判断是否启用 Select TF Ops
- 226浏览 收藏
-
- 科技周边 · 人工智能 | 7小时前 | 人工智能 · LiteRT SignatureDef 多输入模型 端侧推理
- LiteRT SignatureDef 多输入模型怎么按签名准备推理张量
- 191浏览 收藏
-
- 科技周边 · 人工智能 | 7小时前 |
- Keras 自定义 train_step 怎么让正则损失继续参与梯度
- 343浏览 收藏
-
- 科技周边 · 人工智能 | 7小时前 | 人工智能 · 深度学习 · Keras RaggedTensor keras.Input ragged=True TensorFlow backend 模型保存 load_model 变长序列
- Keras RaggedTensor 输入模型保存后怎么保持变长序列结构
- 250浏览 收藏
-
- 科技周边 · 人工智能 | 7小时前 | 人工智能 · Keras NaN mixed_float16 mixed precision loss scale 输入范围 dtype policy
- Keras mixed_float16 训练出现 NaN 怎么区分 loss scale 和输入范围
- 337浏览 收藏
-
- 科技周边 · 人工智能 | 7小时前 | 人工智能 · 深度学习 · PyTorch strict state_dict load_state_dict module. 前缀 检查点迁移
- PyTorch state_dict 参数名前缀变化后怎么兼容旧检查点
- 436浏览 收藏
-
- 科技周边 · 人工智能 | 7小时前 | 人工智能 · 深度学习 · 内存优化 · 内存 PyTorch 按需加载 mmap checkpoint torch.load map_location state_dict
- PyTorch torch.load 开启 mmap 后为什么读取参数时才占用内存
- 475浏览 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 543次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 516次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 500次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 485次学习
-
- PubMedQA
- 深入了解PubMedQA生物医学问答数据集,涵盖其核心功能、使用方法及在临床决策、药物研发等场景的应用,助力提升NLP模型性能。
- 459次使用
-
- H2O EvalGPT
- H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
- 521次使用
-
- LMArena
- LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
- 536次使用
-
- HELM
- 深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
- 486次使用
-
- MMBench
- MMBench是由上海人工智能实验室等机构联合推出的多模态基准测试平台,提供细粒度能力评估、大规模数据集及VLMEvalKit工具。本文详细介绍其核心功能、安装使用方法及应用场景,助力开发者全面评估多模态模型性能。
- 306次使用
-
- 本地大模型反复输出同一句话怎么调整生成参数
- 2026-09-06 501浏览
-
- Python 调用大模型时如何用结构化输出校验 JSON:从解析失败到可重试
- 2026-08-29 501浏览
-
- AI写作工具免费版安装教程(含豆包Clawdbot)
- 2026-05-30 501浏览
-
- WPS AI能自动生成PPT吗?输入主题一键制作演示文稿
- 2026-05-27 501浏览
-
- Canva手机闪退解决方法及适配指南
- 2026-05-25 501浏览

