Osu

记录学习与生活

Pixiv · 111024784 ↗
← 所有项目
进行中 更新于 2026-10-10

SENTRA-S3|基于 ESP32-S3-BOX-3 的桌面语音助手

基于 ESP32-S3-BOX-3 和 SENSOR 底座开发的桌面语音交互终端,集成语音唤醒、双麦声源定位、离线指令、连续 AI 对话及触摸界面。通过 Wi-Fi 连接 Python 服务,实现语音识别、模型 API 调用、语音合成、天气查询和电脑控制,并结合雷达检测实现无人待机与自动恢复。

ESP32-S3、C、Python、ESP-IDF、FreeRTOS、LVGL、ESP-SR、WakeNet、MultiNet、I²S、I²C、Wi-Fi、HTTP/TCP、LLM API

SENTRA-S3 桌面语音助手#

SENTRA-S3 是基于 ESP32-S3-BOX-3 与 SENSOR 底座开发的桌面语音交互终端,将嵌入式音频处理、触摸显示、传感器采集与电脑端 AI 服务连接起来。

主要功能#

  • 语音唤醒:使用 WakeNet 检测“Hi ESP”,支持再次唤醒打断对话。
  • 声源定位:通过双麦时延估计声源左右方向,驱动眼睛跟随、眨眼及空闲动画。
  • 离线控制:使用 MultiNet 实现 11 项固定动作,包括页面切换、亮度和音量调节。
  • 连续对话:通过电脑端 ASR、LLM API 与 TTS 完成多轮语音问答。
  • 触摸界面:提供温湿度、天气、监测、网络、设置与对话六个功能页。
  • 环境感知:采集 AHT30 温湿度,利用 AT581x 雷达控制语音准入和无人待机。
  • 联网服务:支持时间、城市天气、网页搜索,以及打开配置的网站和电脑软件。

系统架构#

ESP32 负责唤醒检测、音频采集、本地指令、显示和播放;Python 服务负责语音识别、模型调用、语音合成及联网工具。

设备与电脑通过 Wi-Fi HTTP/TCP 通信,USB-C 用于供电、烧录和串口日志。

配置与维护#

ASR、TTS、LLM/API、Wi-Fi 和配对参数集中管理,私有配置与公开源码分离。代码按固件、电脑服务、配置、工具和测试划分目录。

© 2026 Lyosumic. All Rights Reserved. / RSS / Sitemap
Powered by Astro & Fuwari · Shirone / Atom

文章目录