設置
  • 日夜間
    隨系統(tǒng)
    淺色
    深色
  • 主題色

跟 AI 玩躲貓貓更難了,他們向蒼蠅和蝙蝠學到了最先進的成像技術

我是科學家iScientist 2022/9/27 19:35:18 責編:遠生

來自加州大學洛杉磯分校(UCLA)的兩位生物工程師和一名前博士后學者,共同開發(fā)了一類新的仿生三維攝像系統(tǒng),可以模仿蒼蠅的多視角視覺和蝙蝠的自然聲納感應,實現(xiàn)深度可掃描盲點的多維成像。

在計算圖像處理技術的支持下,該相機可以識別隱藏在角落里或其他遮擋物后面的物體的大小和形狀。這項技術的傳感能力遠超當今前沿技術水平,有望應用于汽車自動駕駛或醫(yī)療成像領域,相關研究已經發(fā)表在《自然?通訊》上。

▲ 論文截圖

在黑暗中,蝙蝠可以通過使用回聲定位(聲納)的形式將周圍的生動畫面可視化。它們不斷發(fā)出高頻叫聲,被周圍的環(huán)境反射后會被耳朵接收到。通過接收回聲所需的時間和聲音強度的微小差異,蝙蝠可以實時確定行動路徑上物體的位置,以及與潛在獵物的距離。

許多昆蟲都有幾何形狀的復眼,其中每只“眼睛”由數(shù)百到數(shù)萬個獨立的視覺單位組成,這使得它們能夠從多個視角看到同一物體。例如,蒼蠅的球狀復眼盡管焦距固定,使它們很難看到遠處的物體 —— 比如高舉的蒼蠅拍 —— 但也讓它們擁有近 360 度的視野。

▲ 蒼蠅的復眼 | Wikimedia Commons, Thomas Shahan / CC BY 2.0(https://creativecommons.org/ licenses / by / 2.0)

受到這兩種動物的啟發(fā),加州大學洛杉磯分校(UCLA)領導的團隊開始設計一種具有先進功能的高性能 3D 攝像系統(tǒng)。研究負責人、UCLA 薩穆埃里工程學院(Samueli School of Engineering)的生物工程副教授高亮表示:“這個想法雖然之前已經嘗試過,但主要障礙則一直是長距離和圍繞遮擋物的識別。為了解決這個問題,我們開發(fā)了一個新的計算成像框架,它首次利用簡單的光學設備和一個小的傳感器陣列,獲得兼具寬度和深度的全景圖像?!?/p>

這一框架被稱為“緊湊光場成像”,或稱 CLIP(Compact Light-field Photography),允許相機系統(tǒng)在更大的深度范圍或環(huán)繞周圍觀察物體。在實驗中,研究人員證明他們的系統(tǒng)可以“看到”傳統(tǒng) 3D 相機無法發(fā)現(xiàn)的隱藏物體。

▲ 緊湊光場成像(CLIP)原理 | 參考資料 [1]

研究人員還使用了一種“光探測和測距” (Light Detection And Ranging, LiDAR)技術,使用激光掃描周圍環(huán)境以創(chuàng)建該區(qū)域的三維地圖。如果沒有 CLIP,傳統(tǒng)的激光雷達會對場景進行高分辨率的快照,然而會像人類的眼睛一樣,忽視隱藏的物體。

研究人員使用七臺帶有 CLIP 的 LiDAR 相機陣列拍攝一個場景的低分辨率圖像,處理各個相機的拍攝結果,然后在高分辨率三維成像中重建綜合該場景。結果顯示,該相機系統(tǒng)可以對包含多個不同距離物體的復雜三維場景進行成像。

▲ 拓展深度的激光雷達快照 | 參考資料 [1]

“如果你遮住一只眼睛,看向你的筆記本電腦,有一個咖啡杯只是稍微藏在電腦后面,你可能就看不到它,因為筆記本電腦擋住了視線?!蓖瑯邮羌又菁{米系統(tǒng)研究所成員的高亮解釋說,“但如果你同時用兩只眼睛看,你會得到一個更好的物體視圖。這有點像這里發(fā)生的事情,但現(xiàn)在想象一下用昆蟲的復眼看杯子?,F(xiàn)在,對物體的多視角觀察是有可能實現(xiàn)的。”

根據高亮的說法,CLIP 能夠幫助相機陣列以類似的方式對隱藏的物體進行觀察。與 LiDAR 相結合,該系統(tǒng)能夠實現(xiàn)蝙蝠回聲定位的效果,因此人們可以通過光反射到相機所需的時間來發(fā)現(xiàn)隱藏的物體。

參考文獻

  • [1] Feng X, Ma Y, Gao L. Compact light field photography towards versatile three-dimensional vision[J]. Nature Communications, 2022, 13(1): 1-10.

  • [2] https://phys.org/news/2022-08-bug-eyes-sonar-bioengineers-animal.html

  • 題圖來源:Intelligent Optics Laboratory, Liang Gao / UCLA

研究團隊

通訊作者 高亮:加州大學洛杉磯分校亨利?薩穆埃里工程學院副教授,主要研究方向為生物醫(yī)學光學、超快光學成像、計算光學成像等。

論文信息

發(fā)布期刊 《自然通訊》Nature Communications

發(fā)布時間 2022 年 6 月 9 日

論文標題 Compact light field photography towards versatile three-dimensional vision

(DOI:https://doi.org/10.1038/s41467-022-31087-9

文章領域 光學成像

本文來自微信公眾號:我是科學家 iScientist (ID:IamaScientist),編譯:矩陣星 編輯:靳小明  排版:尹寧流

廣告聲明:文內含有的對外跳轉鏈接(包括不限于超鏈接、二維碼、口令等形式),用于傳遞更多信息,節(jié)省甄選時間,結果僅供參考,IT之家所有文章均包含本聲明。

相關文章

關鍵詞:AI

軟媒旗下網站: IT之家 最會買 - 返利返現(xiàn)優(yōu)惠券 iPhone之家 Win7之家 Win10之家 Win11之家

軟媒旗下軟件: 軟媒手機APP應用 魔方 最會買 要知