物理世界中的視覺場景集成了多維信息(空間、時間、偏振、光譜等),它們通常表現出非結構化特征。傳統的圖像傳感器無法處理這種多維視覺數據,這就需要能夠從大量多維視覺數據中提取特征的視覺傳感器。近日,香港理工大學柴揚對用于信息處理的多維視覺傳感器進行了綜述研究。
本文要點:
1) 視覺傳感器能夠將非結構化的視覺場景轉換為特征信息,而無需依賴復雜的算法和復雜的硬件。傳感器的響應特性可以抽象為具有特定功能的算子,從而允許對感知信息進行有效處理。
2) 作者深入研究了多維視覺傳感器的硬件實現,并探索了它們的工作機制和設計原理,以及舉例說明了基于新興設備和硅基系統集成的多維視覺傳感器。作者進一步提供了多維視覺傳感器的基準測試指標,并總結了設備-系統協同設計和協同優化的原則。
Zhaoqing Wang et.al Multidimensional vision sensors for information processing Nature Nanotechnology 2024
DOI: 10.1038/s41565-024-01665-7
https://doi.org/10.1038/s41565-024-01665-7