Melexis联合  emotion3D开发3D ToF驾驶员监控系统,动态对象校准增强HUD体验
据麦姆斯咨询报道,比利时传感器制造商Melexis和基于摄像头的车内分析软件领先开发商emotion3D合作将3D动态对象校准整合到单颗飞行时间(ToF)摄像头中,利用机器学习开发了一款基于3D ToF传感器的驾驶员监控系统(DMS)演示解决方案.这款解决方案将DMS与高精度3D驾驶员定位系统相结合,利用动态对象校准增强了先进的增强现实平视显示器(AR HUD).Melexis和emotion3D开发的这款DMS演示解决方案包括了所有基本功能,例如驾驶员睡意和注意力警告,符合欧盟通用的安全法规和欧洲NCAP的新测试标准.此外,这款演示解决方案还提供了驾驶员面部特征的3D定位.这是确保AR HUD最佳用户体验的关键之一.因为,HUD投影的对象需要与真实世界的对象精确对准,并跟随驾驶员的动态位置而变化.
Melexis产品营销经理Gualtiero Bagnouli说:"我们将应用于HUD的准确,稳健的3D眼睛位置检测与不受阳光干扰的视线和眼睛开闭检测相结合,实现了更精简的DMS算法.ToF技术的使用是其中的关键.利用3D ToF传感器获得准确的深度数据非常容易,处理工作量也很低.由此,DMS和HUD算法和宽视场镜头以及VGA分辨率ToF传感器芯片实现了完美协作."这款演示解决方案围绕Melexis的MLX75027 3D ToF传感器和emotion3D车内分析软件(E3D ICMS)构建而成.其软件可以灵活地集成到任何选择的汽车片上系统(SoC)中.
Melexis的MLX75027汽车级3D ToF传感器IC,提供一套完备的飞行时间传感解决方案,具有高达每秒135个距离帧的全VGA深度图像分辨率.这款传感器IC搭配90 nm BSI VGA 像素阵列并为照明单元提供控制信号,同时配有MIPI CSI-2高速串行接口,可将数据流传送到主机处理器.MLX75027支持高达100 MHz的照明调制频率,非常适合配合VCSEL照明制作高精度3D相机,同时芯片内置温度传感器.emotion3D首席执行官Florian Seitner表示:"汽车产业越来越完备的法规要求DMS必须集成到新车中,并且,AR HUD也正变得越来越流行.双方合作的完整系统为汽车制造商提供了一款高度精确且经济高效的解决方案."