【产通社，7月27日讯】乐鑫信息科技（上海）股份有限公司（Espressif Systems；股票代码：688018）官网消息，其ESP-RTC方案能够实现稳定流畅、超低延时的语音和视频实时通信，为用户构建低成本、低功耗的音视频产品提供了理想的开发原型。ESP-RTC音视频通信方案，能够实现稳定流畅、超低延时的语音和视频实时通信。


产品特点


ESP-RTC以乐鑫ESP32-S3-Korvo-2多媒体开发板为核心。ESP32-S3-Korvo-2搭载ESP32-S3 AI SoC，拥有双麦克风阵列，支持近/远场语音唤醒和语音识别。它还集成了摄像头、Micro SD卡、LCD等外设，支持基于MJPEG视频流的处理，为用户构建低成本、低功耗、可联网的音视频产品提供了理想的开发原型。

ESP-RTC方案基于乐鑫自研的SIP（Session Initialization Protocol，会话初始协议）协议栈，实现了实时的音视频通信。协议栈包含传输层、事务层和会话层，其信令交互模块支持UDP、TCP和TLS三种方式，媒体传输模块支持RTP（UDP）、RTCP、SRTP、TURN等NAT透传协议。值得一提的是，ESP-RTC方案还在传输模块中增加了弱网对抗算法，如Jitter Buffer和PLC，有效解决了丢包、抖动、拥塞、延时等问题，能够充分保证音视频通信的流畅性与实时性。

ESP-RTC方案也支持RTSP（Real Time Streaming Protocol，实时流协议）协议栈，其媒体传输模块同时支持RTP/UDP和RTP over TCP。ESP-RTC方案既可以作为RTSP服务器，支持使用 VLC/FFMPEG/PotPlayer/KmPlayer等播放器进行点播；也可以作为RTSP客户端，支持对EasyDarwin等开源服务器进行直播推流和拉流播放。

ESP-RTC基于乐鑫自研的音频3A算法（AEC声学回声消除、ANS背景噪声抑制、AGC音频自动增益），降低了通话中的噪音和回声，使语音对讲保持高质量稳定。它还采用乐鑫芯片级编解码算法，为用户提供了清晰画质的视频通话体验。结合乐鑫AI SoC ESP32-S3，ESP-RTC可借助其出色的AI运算能力，实现高性能语音唤醒与识别、图像识别等应用，广泛适用于智能音箱、可视对讲门铃、智能家居控制面板、宠物监控、车载行车记录仪、儿童玩具等场景。

ESP-RTC方案支持FreeSWITCH、FreePBX等开源服务器，也可接入成熟的SFU云端服务器，实现多人同屏音视频通话。用户借助乐鑫开源物联网开发框架ESP-IDF和音频开发框架ESP-ADF，即可快速搭建音视频通信相关应用。


供货与报价


查询进一步信息，请访问官方网站http://www.espressif.com，以及http://github.com/espressif/esp-aws-iot。（张怡，产通发布）     （完）