DARPA啟動FENCE計劃將尋求開發模仿人腦的相機技術
據外媒報導,美國國防部高級研究計劃局(DARPA)宣布啟動基於快速事件的神經形態相機和電子學(FENCE)計劃,該計劃旨在通過模仿人腦處理信息的方式使計算機視覺相機更有效率。由雷神公司(Raytheon)、BAE系統公司和諾思羅普·格魯曼公司領導的三個科學家團隊的任務是開發一種需要處理更少數據、操作更快、使用更少功率的紅外(IR )相機系統。
現代成像攝像機正變得越來越複雜,但它們也正成為其自身成功的受害者。雖然最先進的相機可以捕獲高分辨率的圖像,並能非常精確地跟踪物體,但它們是通過處理大量的數據來實現的,這需要時間和電力。
根據DARPA的說法,當任務是在晴朗的藍天上跟踪飛機時,這很好,但如果背景變得雜亂或開始變化,就像軍事行動中經常發生的那樣,這些相機很快就會被受影響。
FENCE計劃希望做的是創建基於事件的攝像機,由於使用了大腦模擬或神經形態電路,這些攝像機更加智能。這些電路的作用是,通過忽略圖像中不相關的部分,大幅減少需要處理的數據量。基於事件的相機不是處理整個場景,而是只關注發生變化的像素。
為了實現這一目標,FENCE團隊正在研究一個新的低延遲、低功耗、基於事件的紅外(IR)焦平面陣列(FPA),一個異步讀出集成電路(ROIC),以及一個幫助ROIC識別相關空間和時間信號的處理層。還需要新的數字信號處理和學習算法來處理複雜、變化的背景。
其結果可能是使用不到1.5瓦功率的FENCE傳感器。因為這項新技術的目標是軍事應用,包括自主車輛、機器人和紅外搜索和跟踪,傳感器將需要靈活和適應性強。
領導FENCE項目的項目經理惠特尼-梅森博士說:“我們的目標是開發一種’智能’傳感器,它可以智能地減少從攝像頭傳輸的信息量,將考慮的數據縮小到只有最相關的像素。”