
據麥姆斯咨詢報道,比利時傳感器制造商Melexis和基于攝像頭的車內分析軟件領先開發商emotion3D合作將3D動態對象校準整合到單顆飛行時間(ToF)攝像頭中,利用機器學習開發了一款基于3D ToF傳感器的駕駛員監控系統(DMS)演示解決方案。這款解決方案將DMS與高精度3D駕駛員定位系統相結合,利用動態對象校準增強了先進的增強現實平視顯示器(AR HUD)。
Melexis和emotion3D開發的這款DMS演示解決方案包括了所有基本功能,例如駕駛員睡意和注意力警告,符合歐盟通用的安全法規和歐洲NCAP的新測試標準。此外,這款演示解決方案還提供了駕駛員面部特征的3D定位。這是確保AR HUD最佳用戶體驗的關鍵之一。因為,HUD投影的對象需要與真實世界的對象精確對準,并跟隨駕駛員的動態位置而變化。
Melexis產品營銷經理Gualtiero Bagnouli說:“我們將應用于HUD的準確、穩健的3D眼睛位置檢測與不受陽光干擾的視線和眼睛開閉檢測相結合,實現了更精簡的DMS算法。ToF技術的使用是其中的關鍵。利用3D ToF傳感器獲得準確的深度數據非常容易,處理工作量也很低。由此,DMS和HUD算法和寬視場鏡頭以及VGA分辨率ToF傳感器芯片實現了完美協作。”
這款演示解決方案圍繞Melexis的MLX75027 3D ToF傳感器和emotion3D車內分析軟件(E3D ICMS)構建而成。其軟件可以靈活地集成到任何選擇的汽車片上系統(SoC)中。

Melexis的MLX75027汽車級3D ToF傳感器IC,提供一套完備的飛行時間傳感解決方案,具有高達每秒135個距離幀的全VGA深度圖像分辨率。這款傳感器IC搭配90 nm BSI VGA 像素陣列并為照明單元提供控制信號,同時配有MIPI CSI-2高速串行接口,可將數據流傳送到主機處理器。MLX75027支持高達100 MHz的照明調制頻率,非常適合配合VCSEL照明制作高精度3D相機,同時芯片內置溫度傳感器。
emotion3D首席執行官Florian Seitner表示:“汽車產業越來越完備的法規要求DMS必須集成到新車中,并且,AR HUD也正變得越來越流行。雙方合作的完整系統為汽車制造商提供了一款高度精確且經濟高效的解決方案。”
