ESP32-S31 应用方案周报
10.1 英寸大屏动效 Demo 完成,喵伴 2.0 集成 Camera MCP Server 与蓝牙音箱
项目进展总览
ESP32-S31-Korvo 累计完成 500 套产测与送样,ESP32-S31-Function-CoreBoard 累计完成 65 套产测与送样。BSP、出厂固件已开源。
依托 480Mbps 物理带宽,深度适配并验证了从单路高清到最多 6 路图传、从高帧率扩展屏到全能交互终端的复杂应用,打造了极具竞争力的成熟高速互联方案。
依托强大的硬件加速流水线,打造涵盖智能家电、两轮车仪表与竖屏混音器台的丰富中控应用。方案在 1024 × 600 屏幕上稳定维持 20+ fps 的动效显示,并实现了无惧横竖屏形态的零开销实时画面旋转。
依托全新 20MHz 高频采样与三频同步抗扰架构,成功实现了低功耗矩阵键盘、电子皮肤等全栈触控方案。配套可视化调优工具,打破参数调试黑盒。已具备 EMC 测试条件,等待第三方机构验证。
作为可对话编程终端,其高度灵活的子板矩阵为 AI Coding 用户提供强大的敏捷生产力,更全面激活 ESP-Claw 的开源生态。目前已完成核心底板设计。
新增 Camera MCP 与蓝牙音箱功能。打通硬件级 JPEG 编解码与 AI 指令集加速,实现 Wi-Fi 6 图传与本地 YOLO 视觉推理。待进一步优化后开源。
本地视觉 AI demo 已打通“手势检测 + 手势识别 + LCD 显示”链路,当前约 2.78 fps;下一步推进人脸视觉跟踪方案。
风险与问题
高优先级集中在 Wi-Fi 连接稳定性与 PSRAM 初始化;中优先级为喵伴 2.0 综合方案性能;显示链路的图像格式与带宽需持续关注。
Wi-Fi 稳定性待跟踪
Wi-Fi 偶发无法稳定连接 AP 和丢包问题,持续跟进该问题。
方案亮点
对外可讲的成果集中在显示、触控、USB 与产品化硬件四条线。
HMI 形成丰富演示案例
兼容 RGB 与 SPI 显示架构,完成从轻量级 360×360 异形双屏到 1024×600 旗舰大屏的跨产品线跨形态适配,沉淀多套成熟交互案例。
- RGB565
- 43 fps
- RGB888
- 34 fps
- 双屏
- 30 fps
触控方案从工具走向应用
调试工具、tptool、底层组件已适配,电子皮肤 GUI 支持校准与轨迹显示。
USB 多设备能力可被市场化
5/18 完成 USB 方案系列 demo:USB 2.0 HS 从 12 Mbps 提升到 480 Mbps,扩展屏应用层有效速率 159 Mbps,800 x 480 可稳定 60 fps。
PCBA 正把 ESP-Claw 从框架推向产品
新硬件定义围绕创客与 AI Coding 用户展开,先以 PCBA 形态支持开发者,再演进到产品形态。
下周计划
将已验证能力转成 demo、文章、固件 release 和硬件打样动作。
AI 视觉跟踪
结合机械臂推进视觉跟踪/人脸跟踪,完成系统联调与稳定运行验证。
@Liang Hao显示方案推广
发布 ESP32-S31 显示性能优化文章,覆盖分辨率、帧率和 demo 展示。
@Lv HaiyuESP-VoCat 2.0 固件
集成表情、视觉 AI 识别、智能体、蓝牙音箱,准备完整固件发布。
@Xu Xin / @Lv Haiyu硬件开源
整理并开源 ESP-VoCat 2.0 硬件方案,形成可复用的硬件设计材料。
@Liang HaoPCBA 打样
优化核心底板布局,安排 PCB 打样,并启动结构设计。
@Ning Yuxiang周报时间线
按邮件发送时间倒推项目节奏:先完成开发板验证,再集中验证 USB,随后 Display/AI/VoCat 成熟,最后进入 BSP 发布、Touch 应用和 PCBA 产品化。
开发板验证完成,应用方案启动
Korvo 与 Function-CoreBoard 硬件验证完成,测试固件与默认工厂固件就绪;60 台 Korvo 套件可用于开发者采样。
- 项目从板级验证转入应用方案开发。
- 路线图明确:显示、USB、触控、音视频、AI、网关各建设 1-2 个关键 demo。
- 当周重点转向 USB 2.0 高速 OTG 与 UVC 摄像头接入。
USB 方案完成性能验证
65 台 Function-Coreboard 可供采样;DVP 摄像头、ADC 驱动合入,esp-dl v3.3.3 支持 ESP32-S31。
- USB 2.0 HS 物理层带宽从 ESP32-S3 的 12 Mbps 提升到 480 Mbps。
- 验证多路 UVC、USB 摄像头 + LCD、USB 多媒体扩展屏、USB 复合设备。
- 下一步计划发布初版 BSP/用户指南,并启动触控方案开发。
Display/AI/ESP-VoCat 进入 demo 阶段
100 台 Korvo + 65 台 Function-CoreBoard 完成烧录与量产测试;AE DemoKit_V0.1 完成硬件验证。
- RGB/SPI 显示通过显示与触控集成验证,进入可演示状态。
- 本地视觉 AI 手势检测/识别配合 LCD 完成,约 2.78 fps。
- ESP-Claw 已适配 Korvo;ESP-VoCat 2.0 完成硬件迁移,但智能体交互仍需开发。
BSP 发布,Touch/PCBA 产品化推进
266 台 Korvo 系列样品完成测试与交付;Korvo BSP 和工厂固件发布到 esp-dev-kits,开发者平台完成在线烧录测试。
- 显示:1024 x 600 RGB 验证完成,RGB565 43 fps、RGB888 34 fps;双圆屏 QSPI 最高 30 fps。
- 触控:调试工具/tptool 适配完成,60 mm x 60 mm 电子皮肤扫描周期为 2 ms。
- PCBA:完成对话式编程硬件终端定义,40 mm x 40 mm 核心底板初版布局完成。
开发板测试、验证与采样。
USB 方案:UVC 摄像头接入、多机型兼容性、USB 音视频 + AI 智能体 demo。
触控方案:厚盖板触摸、触摸唤醒、表情切换、AI 数字识别。
显示 + 音频:数码相框、双屏表情、蓝牙音箱。
IMU 鼠标、OpenCV 识别、轻量 AI 模型、Matter 网关等继续推进。