一文读懂智能汽车驾驶员监控系统
从现在开始,我们要努力学习啦!今天我给大家带来《一文读懂智能汽车驾驶员监控系统》,感兴趣的朋友请继续看下去吧!下文中的内容我们主要会涉及到等等知识点,如果在阅读本文过程中有遇到不清楚的地方,欢迎留言呀!我们一起讨论,一起学习!
驾驶员监控系统,缩写DMS,是英文Driver Monitor System的缩写,即驾驶员监控系统。主要是实现对驾驶员的身份识别、驾驶员疲劳驾驶以及危险行为的检测功能。
福特DMS系统
01 法规加持,DMS进入发展快车道
在现阶段开始量产的L2-L3级自动驾驶中,其实都只有在特定条件下才可以实行,很多状况下需要驾驶员能及时接管车辆进行处置。因此,在驾驶员太信任自动驾驶而放弃或减弱对驾驶过程的掌控时可能会导致某些事故的发生。而DMS-驾驶员监控系统的引入可以有效减轻这一问题的出现。
麦格纳DMS系统,截取自麦格纳介绍视频
因此,近年来各国的政策法规等多方面开始推进DMS的上车:欧盟和中国均出台法律法规。国内已率先对“两客一危”等商用车车型安装DMS系统作出强制要求,乘用车搭载要求也在推进制定中。而欧盟则将DMS纳入Euro NCAP五星安全评级的关键要素,而且是必要条件。几乎是从2020年开始,DMS系统的装车率快速提升,行业进入发展快车道。
21年7月由工信部、公安部和交通运输部联合印发的《智能网联汽车道路测试与示范应用管理规范(试行)》强调要求智能网联汽车要具备在线监控功能,可以反映驾驶人和人机交互状态的车内视频及语音监控情况。
02 视觉方案-DMS技术方案简介
DMS的核心功能主要是疲劳监测、分心监测、危险行为监测。早期的DMS方案主要通过非生物特征的技术来实现,比如通过方向盘及转向传感器,监测任何不稳定的方向盘运动、车道偏离或无故改变速度等。但由于系统复杂,非直观感知,整体的搭载率一直很低。
早期的DMS由于非直观感知,可能会误导系统判断。来源,知乎康斯坦丁.DC
现阶段的DMS则大多是基于摄像头的面部识别和眼球跟踪技术,通过红外光等采集驾驶员面部信息再经过算法分析出人员当下的身体状态,在检测到驾驶员处于不安全状态时,再通过闪烁红光或是方向盘震动等方案对驾驶者进行提醒。整个系统的硬件部分是由摄像头+集成座舱车机/域控制器解决方案组成;软件部分则主要涉及AI视觉算法。
图片来源 Eyesight
2D/3D的摄像头配置
目前大部分用于检测驾驶员疲劳的驾驶员监测系统均采用成本较低的传统2D可见光摄像头(配合IR红外LED)。
水晶光电DMS摄像头简介
理想L9的DMS系统
2022年,理想L9搭载了Melexis的3D-ToF传感器,并将之应用DMS系统。这种采用近红外光的3D光学传感技术可以构建驾驶员头部“深度图”,通过“深度图”可以精准的分析驾驶员的独特面部特征,性能远超2D技术。除了Melexis外,NXP、艾迈斯欧司朗等也都有类似的技术方案布局。
摄像头的集成
这一摄像头主要安装在正对驾驶员的位置,包括车内后视镜/行车记录仪,方向盘、仪表中控屏以及A柱等。考虑到整体内饰的美观性,摄像头的集成也成为一个备受关注的课题。
麦格纳将摄像头集成在后视镜中
天马发布可集成DMS摄像头的挖孔屏
DMS系统的功能拓展
驾驶员监控系统的基础功能是疲劳监测、分心监测、危险行为监测。但随着2D/3D摄像头的引入以及人脸识别算法的发展,DMS系统也在融合ADAS等自动驾驶技术的发展,催生出了一些创新人机交互HMI智能化的场景应用,提升高级别自动驾驶/智能网联汽车时代的驾乘体验。
大陆集团DMS系统,来源大陆官网
作为创新人机交互的传感器,这些DMS功能的拓展功能主要是获取驾驶员信息,从而进一步完善未来汽车座舱中的新应用,并实现定制化体验:
1、面部身份识别
当用户靠近传感器时,无需动作配合,即可快速完成活体判断并进行身份识别,主动为用户打开车门,调整座椅位置,并快速登陆车机系统,保障座舱系统高效运行。
面部识别的引入,不仅提升了驾驶的舒适体验,更可以提高车辆使用安全,比如说防盗功能。
2、眼球追踪
利用摄像头进行视野追踪、头部姿态跟踪技术,识别出驾驶员注视的区域(主驾挡风玻璃、副驾挡风玻璃、左后视镜……)。这一功能可以与当前热门的HUD抬头显示系统联动,可以实时调整并为驾驶员提供更合适的显示画面。
松下AR HUD
3、手势识别
手势识别,基于视觉手势识别技术,与车机系统相连,提供新的结合方式,通过车载摄像头完成全部功能。如做了相应手势之后,主机会进行歌曲切换或静音等操作,具体定义由各个主机厂自己定义。
手势交互方案属于在传统触摸控制方案之外的新交互方案,在宝马上已经应用多年。这个摄像头与DMS系统也可以产生一定联动。
4、表情识别,情绪感应
通过创新AI算法,识别出驾驶员当下的情绪,可以联动氛围灯、香氛系统。这种应用丰田在CES 2019上有展示。
丰田纺织的 AceS概念
5、娱乐互动
自动驾驶技术研发商MINIEYE在其I-CS座舱感知量产方案中创新性地打通了前后排的互动空间,借助视线、手势、头部动作等多种自然身体语言的交互方式,可实现多人多位置便捷互动。
图源MINIEYE
6、座舱乘员检测OMS
将专门对应驾驶员的摄像头拓展到整个座舱内部,可以进一步提升整体车内的安全性。
通过位于车顶的摄像头,并结合毫米波雷达的感知数据,系统可以综合分析人脸属性、人体骨骼比例以及身长信息,能够准确判断成人与儿童。当识别到儿童,系统将主动触发儿童看护功能,持续对儿童进行状态、行为监测,并实时反馈给前排家长,提醒其采取必要措施。
今天带大家了解了的相关知识,希望对你有所帮助;关于科技周边的技术知识我们会一点点深入介绍,欢迎大家关注golang学习网公众号,一起学习编程~

- 上一篇
- 生成式智能体——来自NPC们的独立宣言

- 下一篇
- AI模型告诉你,为啥巴西最可能在今年夺冠!曾精准预测前两届冠军
-
- 执着的芝麻
- 这篇文章内容太及时了,太详细了,很有用,码住,关注作者大大了!希望作者大大能多写科技周边相关的文章。
- 2023-05-13 05:19:33
-
- 落寞的月亮
- 赞 👍👍,一直没懂这个问题,但其实工作中常常有遇到...不过今天到这,帮助很大,总算是懂了,感谢up主分享技术文章!
- 2023-05-12 02:31:26
-
- 热心的香烟
- 这篇博文真是及时雨啊,师傅加油!
- 2023-05-11 11:26:31
-
- 凶狠的老鼠
- 太详细了,收藏了,感谢楼主的这篇技术贴,我会继续支持!
- 2023-05-10 08:05:58
-
- 科技周边 · 人工智能 | 2小时前 |
- 企业级AI证件照批量生成新方法
- 382浏览 收藏
-
- 科技周边 · 人工智能 | 2小时前 |
- 豆包AI实操:5分钟复制热点梗图模板,轻松获10万+
- 394浏览 收藏
-
- 科技周边 · 人工智能 | 4小时前 |
- 大众电动平台升级,2026年将采用磷酸铁锂电池
- 376浏览 收藏
-
- 科技周边 · 人工智能 | 6小时前 |
- AI证件照如何变得更真实?
- 275浏览 收藏
-
- 科技周边 · 人工智能 | 7小时前 |
- 东风日产N7防晕车认证“晕车党”福音
- 236浏览 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 542次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 508次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 497次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 484次学习
-
- PPTFake答辩PPT生成器
- PPTFake答辩PPT生成器,专为答辩准备设计,极致高效生成PPT与自述稿。智能解析内容,提供多样模板,数据可视化,贴心配套服务,灵活自主编辑,降低制作门槛,适用于各类答辩场景。
- 17次使用
-
- Lovart
- SEO摘要探索Lovart AI,这款专注于设计领域的AI智能体,通过多模态模型集成和智能任务拆解,实现全链路设计自动化。无论是品牌全案设计、广告与视频制作,还是文创内容创作,Lovart AI都能满足您的需求,提升设计效率,降低成本。
- 15次使用
-
- 美图AI抠图
- 美图AI抠图,依托CVPR 2024竞赛亚军技术,提供顶尖的图像处理解决方案。适用于证件照、商品、毛发等多场景,支持批量处理,3秒出图,零PS基础也能轻松操作,满足个人与商业需求。
- 29次使用
-
- PetGPT
- SEO摘要PetGPT 是一款基于 Python 和 PyQt 开发的智能桌面宠物程序,集成了 OpenAI 的 GPT 模型,提供上下文感知对话和主动聊天功能。用户可高度自定义宠物的外观和行为,支持插件热更新和二次开发。适用于需要陪伴和效率辅助的办公族、学生及 AI 技术爱好者。
- 31次使用
-
- 可图AI图片生成
- 探索快手旗下可灵AI2.0发布的可图AI2.0图像生成大模型,体验从文本生成图像、图像编辑到风格转绘的全链路创作。了解其技术突破、功能创新及在广告、影视、非遗等领域的应用,领先于Midjourney、DALL-E等竞品。
- 54次使用
-
- GPT-4王者加冕!读图做题性能炸天,凭自己就能考上斯坦福
- 2023-04-25 501浏览
-
- 单块V100训练模型提速72倍!尤洋团队新成果获AAAI 2023杰出论文奖
- 2023-04-24 501浏览
-
- ChatGPT 真的会接管世界吗?
- 2023-04-13 501浏览
-
- VR的终极形态是「假眼」?Neuralink前联合创始人掏出新产品:科学之眼!
- 2023-04-30 501浏览
-
- 实现实时制造可视性优势有哪些?
- 2023-04-15 501浏览