MIT開發(fā)激光“鎖眼成像”技術(shù)：給我一個鑰匙孔，不進門我就能“看”到房間內(nèi)的一切

痛苦的周一又開始了。

對每個合格的“社畜”來說，摸魚可謂是一項必備技能了。

俗話說，知己知彼才能百戰(zhàn)****。

如果能清楚地看見坐在辦公室里的上司在干什么，準備什么時候出來巡視，那簡直就是如虎添翼。

還別說，現(xiàn)在還真有這么一項技術(shù)，能幫助“看”清房間里的一切。

這就是非視線（NLOS）成像方法。多年來，研究人員不斷完善這項技術(shù)，為了創(chuàng)造出能夠清晰看到角落的相機，由此生成不在視野內(nèi)的物體圖像，或者被障礙物擋住的物體圖像。

如今，斯坦福大學計算成像實驗室的研究人員對該技術(shù)進行了擴展，現(xiàn)在，只需讓一個激光點進入房間，就可以看到里面可能有哪些實物。

不過這可不是拿來摸魚用的。未來，該技術(shù)可以與自動駕駛等技術(shù)綁定，這樣司機就能提前發(fā)現(xiàn)隱藏在拐角處的潛在危險，提高安全性和避障能力。

論文鏈接：

https://www.computationalimaging.org/publications/keyhole-imaging/

MIT提出“鎖眼成像方法”

其實非視線成像由來已久了，但無法否認，這的確是一項聰明的技術(shù)。

此前，該技術(shù)已經(jīng)利用了像地板或墻壁這樣的平面，這些平面一般處于攝像機和被遮擋物體的視線范圍內(nèi)。然后，一系列來自攝像機的激光脈沖，在這些平面的表面上反彈，然后在隱藏的物體上反彈，最終回到攝像機的傳感器上。算法利用光反射的時間生成相機看不到的物體圖像。

遺憾的是，這些物體圖像的分辨率不高，盡管如此還是能一下子確認物體是什么。

這次，MIT的研究人員對其改善后提出了鎖眼成像（keyhole imaging）的方法。

從命名上我們也可以猜到，要“看”清封閉房間內(nèi)的物體，我們只需要一個小孔，比如鑰匙孔或窺視孔，讓激光束穿過，在里面的墻上形成一個光點。

與上述過程類似，激光會在墻上、房間物體上反彈，無數(shù)的光子最終通過小孔口反射回相機，相機利用一個單光子雪崩光電探測器測量它們返回的時間。

如果隱藏物體是靜態(tài)的，鎖眼成像無法得到足夠的信息。為了繞過這個問題，研究人員發(fā)現(xiàn)，他們可以用激光脈沖成像一個移動的物體，這種激光能夠在較長的曝光時間內(nèi)產(chǎn)生足夠的可行數(shù)據(jù)，從而為算法構(gòu)建物體的圖像提供足夠的信息。

如下圖所示，木制人體模型看起來像幽靈一樣，但當與經(jīng)過適當訓練的圖像識別人工智能相配時，確定房間里有一個人（或人形物體）倒是非常可行的。

除了自動駕駛技術(shù)外，該項研究未來還可以協(xié)助警方偵破案件。比如，要在破門而入前評估某個房間的風險，只需利用墻上的一個小裂縫或窗戶。

同時，這項新技術(shù)還可以為自主導航系統(tǒng)提供新的思路。在以前的無損檢測技術(shù)不實用的情況下，在威脅之前就發(fā)現(xiàn)隱藏的危險因素。

利用光傳播和陰影也能還原遮擋物

相關(guān)技術(shù)在MIT中也已有先例。

2019年，MIT計算機科學與人工智能實驗室提出，他們能通過細微的陰影和反射重現(xiàn)被遮擋的動作。也就是說，打開攝像機之后，即使是攝像機視野之外的物體或動作，也可以進行再現(xiàn)。

MIT的研究員們基于視域外的視頻投射在附近物體上的陰影，預測出視域外的內(nèi)容。上面一行顯示的是研究員使用這種方法重現(xiàn)的視覺元素，下面一行則是原始物體。

通過觀察陰影和幾何圖形之間的相互作用，新的算法可以預測光在場景中的傳播方式，即“光傳輸”。然后，再利用這種傳播方式從觀察到的陰影中估計被隱藏的內(nèi)容，甚至可以構(gòu)建真人表演的大致輪廓。

該技術(shù)是“被動的”，這意味著對場景沒有激光或其他干預，整個過程需要大約2個小時的處理時間。研究人員表示，該技術(shù)最終有助于重現(xiàn)視線之外的場景，包括但不限于上述應用。

“通過使用非視距成像設備（例如激光器）可以完成許多任務，但是在我們的方法中，只能使用自然到達相機的光線，并嘗試充分利用這些稀缺的信息，”前CSAIL博士后、NVIDIA現(xiàn)任研究科學家，新技術(shù)首席研究員Miika Aittala表示， “鑒于神經(jīng)網(wǎng)絡的最新進展，這似乎是一個很好的時機，可以解決在這個領(lǐng)域以前被認為是無法解決的一些挑戰(zhàn)。”

為了捕獲這些看不見的信息，團隊使用了細微的間接照明提示，例如被觀察區(qū)域雜亂的陰影和高光。在某種程度上，一堆雜物的行為有點像針孔照相機，類似于在小學科學課中可能會制作的東西：它阻擋了一些光線，但允許其他光線通過，并且無論在何處，它們都描繪出周圍環(huán)境的圖像。

但如果針孔相機被設計為僅允許通過足以形成可讀圖像的光線，那么一堆雜亂的雜物會產(chǎn)生無法識別的的圖像、（通過光傳輸）被擾亂的陰影的復雜運動。

可以將雜物想像成一面鏡子，使我們可以看到周圍的環(huán)境，尤其是在無法直接看到的角落。這個算法所解決的挑戰(zhàn)是要弄清并理解這些照明的提示。

怎么樣，是不是又“學廢了”？

種種跡象表明，或許，我們離擁有“****眼”的那天真的不遠了。