【產(chǎn)通社，7月27日訊】樂鑫信息科技（上海）股份有限公司（Espressif Systems；股票代碼：688018）官網(wǎng)消息，其ESP-RTC方案能夠?qū)崿F(xiàn)穩(wěn)定流暢、超低延時(shí)的語音和視頻實(shí)時(shí)通信，為用戶構(gòu)建低成本、低功耗的音視頻產(chǎn)品提供了理想的開發(fā)原型。ESP-RTC音視頻通信方案，能夠?qū)崿F(xiàn)穩(wěn)定流暢、超低延時(shí)的語音和視頻實(shí)時(shí)通信。


產(chǎn)品特點(diǎn)


ESP-RTC以樂鑫ESP32-S3-Korvo-2多媒體開發(fā)板為核心。ESP32-S3-Korvo-2搭載ESP32-S3 AI SoC，擁有雙麥克風(fēng)陣列，支持近/遠(yuǎn)場語音喚醒和語音識(shí)別。它還集成了攝像頭、Micro SD卡、LCD等外設(shè)，支持基于MJPEG視頻流的處理，為用戶構(gòu)建低成本、低功耗、可聯(lián)網(wǎng)的音視頻產(chǎn)品提供了理想的開發(fā)原型。

ESP-RTC方案基于樂鑫自研的SIP（Session Initialization Protocol，會(huì)話初始協(xié)議）協(xié)議棧，實(shí)現(xiàn)了實(shí)時(shí)的音視頻通信。協(xié)議棧包含傳輸層、事務(wù)層和會(huì)話層，其信令交互模塊支持UDP、TCP和TLS三種方式，媒體傳輸模塊支持RTP（UDP）、RTCP、SRTP、TURN等NAT透傳協(xié)議。值得一提的是，ESP-RTC方案還在傳輸模塊中增加了弱網(wǎng)對(duì)抗算法，如Jitter Buffer和PLC，有效解決了丟包、抖動(dòng)、擁塞、延時(shí)等問題，能夠充分保證音視頻通信的流暢性與實(shí)時(shí)性。

ESP-RTC方案也支持RTSP（Real Time Streaming Protocol，實(shí)時(shí)流協(xié)議）協(xié)議棧，其媒體傳輸模塊同時(shí)支持RTP/UDP和RTP over TCP。ESP-RTC方案既可以作為RTSP服務(wù)器，支持使用 VLC/FFMPEG/PotPlayer/KmPlayer等播放器進(jìn)行點(diǎn)播；也可以作為RTSP客戶端，支持對(duì)EasyDarwin等開源服務(wù)器進(jìn)行直播推流和拉流播放。

ESP-RTC基于樂鑫自研的音頻3A算法（AEC聲學(xué)回聲消除、ANS背景噪聲抑制、AGC音頻自動(dòng)增益），降低了通話中的噪音和回聲，使語音對(duì)講保持高質(zhì)量穩(wěn)定。它還采用樂鑫芯片級(jí)編解碼算法，為用戶提供了清晰畫質(zhì)的視頻通話體驗(yàn)。結(jié)合樂鑫AI SoC ESP32-S3，ESP-RTC可借助其出色的AI運(yùn)算能力，實(shí)現(xiàn)高性能語音喚醒與識(shí)別、圖像識(shí)別等應(yīng)用，廣泛適用于智能音箱、可視對(duì)講門鈴、智能家居控制面板、寵物監(jiān)控、車載行車記錄儀、兒童玩具等場景。

ESP-RTC方案支持FreeSWITCH、FreePBX等開源服務(wù)器，也可接入成熟的SFU云端服務(wù)器，實(shí)現(xiàn)多人同屏音視頻通話。用戶借助樂鑫開源物聯(lián)網(wǎng)開發(fā)框架ESP-IDF和音頻開發(fā)框架ESP-ADF，即可快速搭建音視頻通信相關(guān)應(yīng)用。


供貨與報(bào)價(jià)


查詢進(jìn)一步信息，請(qǐng)?jiān)L問官方網(wǎng)站http://www.espressif.com，以及http://github.com/espressif/esp-aws-iot。（張怡，產(chǎn)通發(fā)布）     （完）