香港科技大學的研究團隊研發出一款高解析度仿生眼,把全彩成像、視場角超過 160 度的像差校正視野,以及事件驅動動作偵測整合於單一系統。該仿生眼採用半球形串聯人工視網膜,像素密度為 1,905 ppi,總像素 367,500。研究團隊稱,這項成果突破了曲面影像感測器的關鍵解析度瓶頸,論文已刊於《Nature Materials》。

用 3D 激光加工在半球面製作像素陣列

新聞稿指出,視覺感測器是機器感知及互動環境的關鍵元件,但傳統相機多依賴平面影像感測器,需要多個光學元件及外部處理來校正光學像差,令系統複雜度與體積增加、功耗效率下降,並限制視場角。曲面影像感測器可跟隨生物視網膜的幾何形狀,支援緊湊的廣角成像;然而在高曲率表面製作高密度像素陣列一直困難,因為傳統微影製程主要為平面基板設計。

港科大團隊因此在半球形基底上開發新的 3D 激光加工方法,做出密集的感光像素陣列。新聞稿指出,團隊的像素數目由 2020 年論文的 100 個,增至目前系統的 367,500 個。

全彩成像與寬視場

新聞稿稱,新系統的半球形串聯人工視網膜包含對藍、綠、紅敏感的感光層,提供全彩成像,整體光譜響應範圍為 300 至 800 納米,並在超過 160 度的視場內保持像差校正成像。研究團隊表示,設計靈感來自鯉科魚類的三色視網膜與動作偵測能力。

動作偵測在感測器內完成

除影像捕捉外,串聯設計亦令動作偵測可在感測器內以事件驅動方式完成。新聞稿指出,傳統基於幀的方法要處理連串完整影像才取得動作資料,新系統則在感測器內偵測與動作相關的資訊,毋須為評估任務傳輸完整的影像序列。在研究測試條件下,這個做法把頻寬需求減少超過 99.95%,動作識別準確率為 98.6%。

研究團隊與論文

該研究由港科大電子及計算機工程學系、化學及生物工程學系講座教授、顯示與光電子全國重點實驗室主任范智勇教授領導。第一作者為龍正浩博士,他為港科大電子及計算機工程學系前博士生及前博士後研究員,現為復旦大學助理教授;范智勇教授為唯一通訊作者,研究與港科大(廣州)訾雲龍教授合作完成。論文題為 "An aberration-corrected bionic eye for full-color vision and event-driven motion detection"。

范智勇教授表示,2020 年第一代仿生眼只有 100 個感測像素,最新研究的 3D 激光輔助製程把感測像素增至接近 40 萬個,並配備 160 度超廣視場與事件驅動動作偵測。他相信隨着技術推進,下一代仿生眼可擁有超過 100 萬個感測像素,為機械人及自動駕駛的實際應用帶來新機會。

新聞稿的相片說明列出團隊成員:研究助理教授 Swapnadeep Poddar 博士,以及博士生王開晨、孫筱菲、葉子龍、李健燁及 Shivam Kumar。中文版新聞稿指出,團隊參考鯉科魚類的三色視網膜結構,設計出兼具全彩成像與事件驅動運動感知能力的系統。

應用前景

新聞稿指出,這類技術可望協助未來的機械人及自動系統,在減少視覺數據傳輸與處理需求的情況下,處理移動物體的動作資訊,為更高效的機器視覺系統鋪路。新聞稿未有提及醫療植入、人體試驗或商業化時間表,亦未有公布量產或授權安排。