【產(chǎn)通社，5月28日訊】南京大學(xué)（Nanjing University）官網(wǎng)消息，吳培亨院士團隊張蠟寶教授課題組聯(lián)合清華大學(xué)自動化系季向陽教授課題組，基于多維可調(diào)控的超導(dǎo)單光子探測器(SNSPD)，研制出高光子利用率的感算一體相機，平均每像素僅需0.12個光子，對三個字母圖案的分類準確率即可達到90%以上。

憑借單光子靈敏度和極低暗計數(shù)，超導(dǎo)納米線單光子探測器(SNSPD)在可見光到紅外波段都得到了廣泛的應(yīng)用。然而隨著像元數(shù)目的增加，低溫下逐像元的信號讀出將面臨挑戰(zhàn)。目前的陣列SNSPD讀出方案，如行列復(fù)用、時分復(fù)用等，普遍存在讀出效率低、數(shù)據(jù)量大的問題，難以勝任實時的成像與目標識別任務(wù)。突破探測-存儲-計算的傳統(tǒng)路徑而使用感算一體的架構(gòu)，是基于陣列SNSPD實現(xiàn)高光子利用效率的單光子相機的可行路徑之一。

針對上述難題，研究人員通過深入挖掘陣列SNSPD的多維可調(diào)控特性，研制出一種高光子利用率的感算一體超導(dǎo)單光子相機，其系統(tǒng)示意圖和工作原理如圖1所示。其總體思路是，通過調(diào)節(jié)陣列SNSPD的偏置電流以實現(xiàn)光計數(shù)率、脈沖幅值、脈沖恢復(fù)時間及光譜響應(yīng)度的調(diào)控，從而實現(xiàn)了光信號采集與計算的深度融合。在圖像分類任務(wù)中，首先基于字母圖案的數(shù)據(jù)集對網(wǎng)絡(luò)權(quán)重進行優(yōu)化，再通過調(diào)節(jié)各像素的偏置電流將網(wǎng)絡(luò)權(quán)重映射到陣列傳感器的計數(shù)率或脈沖波形中，最終多組偏置電流矩陣對應(yīng)的合成讀出信號即為圖像分類結(jié)果。

研究人員首先開發(fā)了高性能的陣列SNSPD并且基于該傳感器開發(fā)了兩種片上計算方案。如圖2(a-b)所示，該傳感器在405nm~1550nm波段都具備飽和的量子效率(量子效率接近100%)。在低偏置電流下，各像素的量子效率隨偏置電流的增加而非線性增加。當入射光強不變時，提高偏置電流會使得光計數(shù)率增加。因此基于光計數(shù)率進行計算，將計數(shù)率隨偏置電流的變化曲線進行歸一化即可得到權(quán)重和偏置電流的關(guān)系，根據(jù)多組偏置電流矩陣對應(yīng)的總計數(shù)率即可判斷圖像類別。

該方案的信號采集僅需單通道計數(shù)器即可完成，設(shè)備復(fù)雜度較低。隨著偏置電流繼續(xù)增加，量子效率不再隨偏置電流增加。在固定光強下增加偏置電流，光計數(shù)率會保持不變。此時響應(yīng)脈沖的形狀仍會隨著偏置電流變化，因此基于脈沖積分面積進行計算，其工作原理與基于計數(shù)率的方案基本一致，根據(jù)合成讀出信號的脈沖積分面積即可判斷圖像類別。該方案工作在量子效率飽和區(qū)域并且僅需單個脈沖即可實現(xiàn)權(quán)重的加載，因此具備更高的光子利用率。

結(jié)合上述兩種計算方案，研究人員基于該相機實現(xiàn)了26字母圖案的分類。盡管DMD串擾和背景噪聲導(dǎo)致投影圖案的質(zhì)量較差，該技術(shù)對大部分字母的分類準確率仍可達到95%以上。進一步的，研究人員基于可調(diào)控的光計數(shù)率實現(xiàn)了片上圖像預(yù)處理功能，包括高斯濾波、邊緣增強和圖像銳化。實驗結(jié)果和仿真結(jié)果高度一致，邊緣增強和圖像銳化操作都避免了分塊采集導(dǎo)致的塊狀響應(yīng)。此外，SNSPD具備本征的光譜分辨能力，不同波長入射光對應(yīng)的計數(shù)率曲線不同。

本文基于多維可調(diào)控的陣列SNSPD開發(fā)了具備高光子利用率的感算一體相機。該相機具備片上圖像分類、圖像預(yù)處理和光譜分辨功能，為極弱光環(huán)境下的實時視覺任務(wù)提供了全新的解決方案，如暗弱空間目標探測和活體細胞顯微成像等。未來結(jié)合超導(dǎo)邏輯電路與大規(guī)模陣列傳感器，有望實現(xiàn)更智能的高性能視覺系統(tǒng)。因此，本成果對于進一步提升現(xiàn)有設(shè)備的探測能力，服務(wù)于智能感知、量子成像、生物成像以及深空探索等前沿應(yīng)用以及科學(xué)研究，具有重要的意義。目前該工作仍存在優(yōu)化空間，后續(xù)需要擴充像素規(guī)模以提高分辨率，優(yōu)化外部光路來減少信號串擾。同時可以引入其它的片上計算單元來提高網(wǎng)絡(luò)復(fù)雜度，從而實現(xiàn)更高階的視覺任務(wù)。

相關(guān)成果近日以“Photon-efficientcamerawithin-sensorcomputing”為題發(fā)表于《NatureCommunications》。南京大學(xué)博士生管焰秋為本文第一作者；張蠟寶教授和季向陽教授為本文共同通訊作者。以上工作還得到了超導(dǎo)電子學(xué)研究所康琳教授、陳健教授、王華兵教授和吳培亨院士的大力支持，陳奇副研究員、王昊助理教授、涂學(xué)湊教授級高工、趙清源教授、賈小氫教授等在器件制備和論文撰寫等環(huán)節(jié)給予了幫助。該項目得到了國家自然科學(xué)基金、江蘇省自然科學(xué)基金等資助，實驗工作得到了極端性能光電技術(shù)教育部重點實驗室、江蘇省電磁波先進調(diào)控技術(shù)重點實驗室和微制造與集成工藝中心等支持。

查詢進一步信息，請訪問官方網(wǎng)站http://www.nju.edu.cn/info/1067/415611.htm，以及https://doi.org/10.1038/s41467-025-58501-2。（張怡，產(chǎn)通發(fā)布）    （完）