问题从哪里开始
一个能开口的玩偶,需要设备、网络、语音服务、角色内容与配套应用一起工作。单个模块成功,并不意味着用户能顺畅完成一次对话。
我做了什么
我主导玩偶端云语音链路开发,参与设备、服务与 App 联调,推进角色资源组织、工厂对接、现场演示和客户技术沟通。
系统真正的单位,是一次完整的用户体验。
三个工程决策
01
用完整链路理解问题
围绕 ESP32-S3—WebSocket—ASR/LLM/TTS 串联离线唤醒、云端对话、打断与灯光工具调用。
02
把内容变成可检查的交付物
按角色、音色与语种组织资源,建立逐包内容校验;资源规模与真机通过数量保持清晰边界。
03
从故障走向工程机制
结合状态与依赖排查、触点超时隔离、服务部署、用量记账与熔断,把临时处理沉淀为可重复使用的方法。
走到了哪一步
- 截至 2026 年 10 月 22 日,62 个角色对应 186 套中、英、西语资源,并完成内容校验。
- 配套 Flutter App 的历史记录包含 151 项自动化测试通过;它不等同于 App 与机器狗的真机全流程验收。
- 两款产品参展;参与工厂、演示和客户沟通,将技术推进到实际业务环节。
验证与边界
设备链路与内容校验;App 测试与真机联调分开记录
接下来
继续分开推进一代触摸与摇晃交互、二代端侧对话探索;端侧完整 ASR/LLM/TTS 仍按实际验证进度呈现。
项目说明依据已核对的仓库、实验记录与本人确认整理。
内容核对:2026.10.28
