|
 【產(chǎn)通社,5月14日訊】樂鑫信息科技(上海)股份有限公司(Espressif Systems;股票代碼:688018)官網(wǎng)消息,Plumerai的AI軟件能夠基于ESP32-S3提供出色的深度學習,在低功耗硬件上完成推理。Plumerai成立于2017年,致力于在小型、低成本和低功耗硬件上實現(xiàn)深度學習。Plumerai相信這是讓機器學習(ML)在日常生活中為每個人提供幫助的有效途徑。Plumerai用于邊緣設(shè)備的人體檢測AI不僅準確度高,而且消耗資源少。 為了進一步優(yōu)化AI軟件,Plumerai將其與樂鑫ESP32-S3進行了結(jié)合。ESP32-S3是一款具有強大AI運算能力和可靠安全機制的SoC,專為AIoT應用設(shè)計。在 ESP32-S3的幫助下,Plumerai的AI軟件能夠提供出色的深度學習,并在低功耗硬件上完成推理。Plumerai的人體檢測模型經(jīng)過了3000多萬張圖片的訓練,能夠僅用一個核心在166kB RAM下,以每秒3.3幀的速度運行,可以在距離超過65英尺(≈20米)時,檢測出多達20個人; ESP32-S3 的第二個內(nèi)核可用于處理其他任務(wù)(應用于各種日常生活場景)。例如,基于ESP32-S3的微型智能家居攝像機會給您發(fā)送有人進入房子的通知;當人們到家時,燈光、空調(diào)會自動打開;交通信號燈可實時檢測路口處的行人。 Plumerai的人體檢測軟件在室內(nèi)、室外、昏暗光線、甚至移動背景下都能運作。Plumerai模型完全在邊緣運行,所有計算都在ESP32-S3上執(zhí)行,省去了高額的云計算費用。更重要的是無需聯(lián)網(wǎng),捕捉到的圖像會留存在設(shè)備中,增強了可靠性和隱私性。 ESP32-S3搭載Xtensa 32位LX7雙核處理器,主頻高達240MHz,內(nèi)置512KB SRAM (TCM)。ESP32-S3還集成了2.4GHz Wi-Fi和Bluetooth 5(LE),支持遠距離模式(Long Range)。Plumerai利用ESP32-S3 中的自定義向量指令(Custom Vector Instructions)有效優(yōu)化了人體檢測軟件,使其與使用標準的CPU指令集相比,運行速度顯著提高。 這是一個可以在ESP32-S3-EYE開發(fā)板上運行的Demo(聯(lián)系Plumerai獲取訪問權(quán)限,訪問Plumerai文檔了解使用方法)。ESP32-S3-EYE集成了一個200萬像素的攝像頭和一個LCD顯示屏,能夠顯示人的位置和時間的實時畫面。 此外,Plumerai的人體檢測軟件需要從Plumerai獲得許可。查詢進一步信息,請訪問官方網(wǎng)站 http://www.espressif.com。(張怡,產(chǎn)通發(fā)布) (完)
|