物聯(lián)傳媒 旗下網(wǎng)站
登錄 注冊(cè)

DARPA開始采用基于事件的智能紅外相機(jī)技術(shù)

作者:麥姆斯咨詢
來源:MEMS
日期:2021-07-23 09:29:13
摘要:據(jù)麥姆斯咨詢報(bào)道,美國國防高級(jí)研究計(jì)劃局(DARPA)近日宣布選擇由雷神(Raytheon)公司、BAE系統(tǒng)公司和諾斯羅普格魯曼(Northrop Grumman)公司領(lǐng)導(dǎo)的三個(gè)研究小組,開發(fā)基于事件的(神經(jīng)形態(tài))紅外(IR)相機(jī)技術(shù)。

美國國防高級(jí)研究計(jì)劃局(DARPA)近日宣布選擇由雷神(Raytheon)公司、BAE系統(tǒng)公司和諾斯羅普格魯曼(Northrop Grumman)公司領(lǐng)導(dǎo)的三個(gè)研究小組,開發(fā)基于事件的(神經(jīng)形態(tài))紅外(IR)相機(jī)技術(shù)。

image.png

該項(xiàng)目隸屬DARPA“基于快速事件的神經(jīng)形態(tài)相機(jī)和電子(Fast Event-based Neuromorphic Camera and Electronics, FENCE)”計(jì)劃?;谑录南鄼C(jī)是一種新興傳感技術(shù),相對(duì)于傳統(tǒng)相機(jī)具有很多明顯優(yōu)勢。這些先進(jìn)的成像模組異步工作,只傳輸發(fā)生變化的像素信息。這意味著它們生成的數(shù)據(jù)量明顯減少,工作延遲和功耗也大幅降低。

領(lǐng)導(dǎo)FENCE項(xiàng)目的Whitney Mason博士解釋稱:“神經(jīng)形態(tài)指的是模擬大腦運(yùn)作的硅基集成電路,它們可以提供低延遲、高能效的稀疏輸出。在處理稀疏場景時(shí),基于事件的相機(jī)也以一樣的原理運(yùn)行,但是,目前基于事件的相機(jī)缺乏更高級(jí)的‘智能’,無法應(yīng)對(duì)更困難更復(fù)雜的感知和控制任務(wù)?!?/p>

目前,最先進(jìn)的相機(jī)可以很好的應(yīng)對(duì)極少變化、成像相對(duì)簡單的場景。例如,一架飛機(jī)在湛藍(lán)的天空中飛行。最先進(jìn)的相機(jī)可以很容易地跟蹤飛機(jī)的運(yùn)動(dòng)。然而,對(duì)于高度雜亂和動(dòng)態(tài)的場景,它們就束手無策了,這限制了它們?cè)谠S多軍事領(lǐng)域的應(yīng)用。

FENCE項(xiàng)目旨在開發(fā)并驗(yàn)證一種低延遲、低功耗、基于事件的紅外焦平面陣列(FPA)以及新的數(shù)字信號(hào)處理和學(xué)習(xí)算法來解決上述難題,以使這類智能傳感器能夠處理更復(fù)雜的動(dòng)態(tài)場景。雷神公司、BAE系統(tǒng)公司和諾斯羅普格魯曼公司的團(tuán)隊(duì)將致力于開發(fā)一種低延遲的異步讀出集成電路(ROIC),以及一種與ROIC集成以識(shí)別相關(guān)空間和時(shí)間信號(hào)的處理層。ROIC和處理層的結(jié)合,將使集成的FENCE傳感器以低于1.5瓦的功率工作。

Mason指出:“我們的目標(biāo)是開發(fā)一種‘智能’傳感器,以智能化地降低由相機(jī)傳輸?shù)臄?shù)據(jù)量,只考量最相關(guān)的像素信息。”

FANCE技術(shù)最終可以應(yīng)用于從自動(dòng)駕駛、機(jī)器人到紅外搜索和跟蹤等許多軍事應(yīng)用。為了確保廣泛的適用性,研究人員還將重點(diǎn)開發(fā)一款靈活且適應(yīng)性強(qiáng)的解決方案,以便應(yīng)對(duì)各種不同的任務(wù)。