據外媒報道,圖像信號處理(ISP)技術和攝像頭SOC公司iCatch Technology(iCatch)與先進神經形態(tài)視覺系統(tǒng)開發(fā)商Prophesee就基于事件的Metavision傳感項目達成合作。
該項目將iCatch的V57 AI視覺處理器與新的索尼半導體解決方案(Sony Semiconductor Solutions,SSS)堆疊的基于事件的視覺傳感器(Event-based Vision Sensor)IMX636集成在一起,實現SSS和Prophesee間的合作。
iCatch為所有算法合作伙伴和ODM客戶構建了OpenMVCam開發(fā)平臺,可在監(jiān)控、智能醫(yī)療、車內監(jiān)控系統(tǒng)、智能家居、工業(yè)自動化、智慧城市等多個細分市場設計各種AI產品、系統(tǒng)和應用程序。
iCatch還可提供高度定制化的服務和卓越的圖像質量系統(tǒng),以應用于未來所有機器視覺設備和智能設備。
SSS的基于事件的視覺傳感器可以作為iCatch AI視覺處理器的輸入源,基于iCatch內置的NPU加速引擎和專有的CV處理硬件引擎。它可以集成Prophesee 的Metavision Intelligence SDK和其他第三方的機器視覺算法,以支持終端客戶的AI視覺應用,例如汽車駕駛艙中的DMS和OMS、家庭醫(yī)療保健和醫(yī)院中的患者/老人跌倒檢測、家庭監(jiān)控的入侵檢測、工業(yè)自動化中的異常檢測、智能家電中的手勢控制,以及AR/VR中的眼動追蹤等。
Prophesee為計算機視覺應用開發(fā)出突破性的基于事件的視覺方法。受人類視網膜的啟發(fā),基于事件的視覺傳感器具有像素,且每個像素都由自己的嵌入式智能處理驅動,因此當檢測到照明強度的相對變化(即運動)時,像素可以獨立激活。這種新方法顯著降低了功耗和處理的數據量,同時提供了超高速采集、強弱光和HDR性能。
內置硬件事件解碼器的iCatch AI視覺處理器可以原生支持SSS的基于事件的視覺傳感器IMX636,無需外部FPGA或接口芯片作為事件解碼器,以降低系統(tǒng)成本。該處理器內置NPU加速引擎和CV處理引擎,可提供機器視覺算法所需的加速和優(yōu)化。除了能夠獲得iCatch在人類視覺和機器視覺應用的低功耗設計和優(yōu)化方面的高靈活性關鍵優(yōu)勢外,iCatch AI視覺處理器還可獲益于基于事件的視覺傳感器和第三方合作伙伴的機器視覺算法,可以滿足各種機器視覺應用和邊緣計算生態(tài)系統(tǒng)。
(轉載)