據darpa網站2016年9月16日刊文,一個構成圖片、帶傳感器的像素大小如同一個血紅細胞的大小,一個指甲蓋大小的陣列上擁有100萬個主要的像素,DARPA新的可重構成像((ReImagine)項目可以想象成一次如下精神之旅:潛入到宿主所有這些像素半導體的表面,并驚嘆于每個像素的相關技術網格(超過1000個集成晶體管) ——為每個像素自身提供一個微小、可重新編程的大腦。
據ReImagine項目經理杰伊·劉易斯稱,其目標是開發(fā)一種單獨一個、多功能攝像機,它能夠檢測類似于熟悉的靜止和視頻成像器的視覺景像,但也可以適應和改變它們的屬性,并有效地變形為于給定情景下、提供最有用信息的成像器類型。這意味著于不同熱(紅外)輻射頻率,不同分辨率或幀頻,或甚至所采集、繪圖等用的3D激光雷達數據之間加以選擇。該攝像機最終依賴于自主留意其視場中所發(fā)生情況的機器學習,以及基于情境的上下文進行成像傳感器的重構能力。未來該傳感器將能夠并發(fā)地執(zhí)行這些功能中的許多功能。同樣,該可重構性應該能夠使同一傳感器在不同的敏感模式之間切換,從一幀快速閃電般地切換到下一個。目前尚沒有任何一個攝像頭可以做到這一點。
DARPA微系統技術辦公室工作的一大動力是使重要的軍用平臺縮小外形尺寸和降低成本,包括從太空軌道到海上的應用。這些更小、更價廉的平臺將使態(tài)勢感知達到某個高度——目前僅能通過置于大型機載、地面、太空和海上艦艇的數套專用傳感器實現;利用這種增強的態(tài)勢感知能力,可能獲得一個極高重要性的回報:做出更富含信息量的決策。
該ReImagine項目的關鍵特征之一是各工作組將要求開發(fā)基于通用數字電路和軟件平臺的軟件可配置APP,為期4年。由聯邦政府資助的研究與開發(fā)中心(FFRDC)——MIT-林肯實驗室將負責提供一個公用、可重構數字層,即該系統的三層傳感器硬件,成功的申請人將設計和制造各種不同的百萬像素傳感器層和“模擬接口”層,以及將多種相關信號轉換稱數字式數據的相關軟件和算法。另一方面,這些數字式數據應該適合處理和參與機器學習程序——通過此程序,這些傳感器可能自主意識視野內的特定目標、信息、意外事件及其他情況。使用一個公用數字層是希望它將促成一個開發(fā)APP的共同體,加速創(chuàng)新的過程和向軟件可重構成像儀輸出新APP。
在該項目的下一階段,執(zhí)行人將要求于戶外試驗驗證所開發(fā)技術的便攜性,相應地加以調整;并響應目視提示要求切換成熱探測模式。
劉易斯稱,既使擁有當前快速發(fā)展的機器學習和人工智能,軟件尚不能完全控制傳感器,不能訪問物質世界。通過該ReImagine項目,我們將擁有機器學習和圖像處理能力(修改或決定所收集傳感器數據的類型)。更重要的是,正如人類的眼睛和大腦那樣,這些信息可能以2種方式流動:傳感器將通知算法和算法將影響到傳感器。盡管該技術將首先應用于防務上,但也可軍轉民。
今天,DARPA發(fā)布了特別公告(DARPA-SN-16-68),有意申請ReImagine項目的人員將于9月30日參加申請人日。