寝语智控:双核端云协同的宿舍 AI 语音交互终端

1. 个人介绍

基础信息

  • 我是谁:一名正在做嵌入式与 AI 硬件结合的 计算机/专业学生,【22 岁】,编程2年,Vibe Coding 实践12个月。
  • 标签:嵌入式折腾党、硬核双控强迫症、不想为了关灯下床的宿舍改造家、把毕业设计做成真家伙的大学生
  • 擅长与灵感:擅长 STM32 嵌入式开发、串口协议与多模块联调;这次作品的灵感来自我在宿舍的真实日常——把原本偏传统的单片机智能家居,升级成真正听得懂自然语言、又不会“断网就变砖”的桌面 AI 硬件终端。

2. 产品简介

  • 是什么

    《寝语智控》 是一款面向宿舍与桌面学习场景的 ESP32-S3 + STM32F103C8T6 双核 AI 语音交互与环境感知终端(采用安全低压桌面实物模型验证)。它通过端云协同与离线兜底的双模语音架构,解决传统宿舍设备控制分散、离线语音死板、纯云端设备断网易失效以及传感器异常时乱报假数据的问题。
    面向谁

    • 核心用户:高校住宿学生、桌面学习/自习人群、嵌入式 AIoT 爱好者。
    • 典型场景:
      1. 睡前 / 起床场景(上铺不动身):一句话触发多设备复合联动,告别爬下床关灯关窗或摸黑找开关。
      2. 书桌学习场景(抬头即感知):口头询问室内温湿度、相对光照和烟雾原始状态,无需切屏或翻手机。
      3. 断网 / 外出场景(多入口兜底):校园网波动时切到本地离线语音直控,离寝后通过机智云 APP 远程查看与控制。

3. 体验地址:三选一

本项目属于 AI 硬件赛道,涉及双单片机实体电路、串口双向通信与多路低压执行器联动,按赛制采用下方实物演示视频替代在线体验。

4. 演示视

5. TRAE 实践过程

  • 5. TRAE 实践过程

    完整开发流程

    整个项目采用 「需求拆解 → 协议与状态机设计 → 跨端代码实现 → 先红后绿自动化测试 → 编译瘦身与文档同步」 的闭环方式在 TRAE 中推进:

    1. 阶段一:打通 ESP32 与 STM32 串口控制与设备端 MCP 用 TRAE 在小智开源框架基础上,将 bread-compact-stm32-lcd(ESP32-S3、128×160 ST7735 屏)与 STM32F103C8T6 的 USART3(9600 8N1)打通,设计 F4 06 CMD FB 控制帧并注册受限设备 MCP 工具,同时接入 96×96 角色眨眼/说话动画与 8 秒空闲待机逻辑。
    2. 阶段二:升级双向环境遥测协议(v1 → v2) 借助 TRAE 设计 20 字节小端遥测帧(含温湿度、相对光照、烟雾 ADC 原始值、采样年龄与 XOR 校验),实现新旧协议向下兼容,并把 3000ms 超时失效逻辑写成跨端单元测试。
    3. 阶段三:复合场景联动与可靠性加固 用 TRAE 补齐“睡眠关窗”和“起床(0x0D / wakeup)”跨端联动,同步修复 STM32/ESP32 串口异常恢复、自动转手动清理顺序以及手机远程控制协议的 5 项边界缺陷。
    4. 阶段四:自动化回归与 Keil 32KB 空间优化 通过 TRAE 编写主机 C/C++ 回归脚本(覆盖串口帧解析、环境边界、场景状态机与机智云回调),并在触发 Keil 32KB 链接上限时,借助 TRAE 安全合并重复控制分支,实现 0 错误、0 警告构建

Session ID 怎么找:它是 TRAE 每段对话任务的唯一标识。请保留关键任务的对话记录,双击 TRAE 的对话复制对应 Session ID,发帖时附上。
3062607230541244:a58d2362d1702d5ad7365d4866210b89_6a53d3ca47bccadbd1851473.6a53d79047bccadbd1851475.6a53d7905fb5611d6be50e47:TraeWork CN.3.4.15.no_sid.no_ppe.T(2026/7/13 02:06:08)
3062607230541244:d960791e3d38531fd911163900bccb9d_6ad96725db035d5bf50089e6.6ad96a26db035d5bf5008ada.6ad96a26db035d5bf5008ad7:TraeWork CN.3.4.15.no_sid.no_ppe.T(2026/10/22 09:43:02)
3062607230541244:df45878223ce406290489c7d6b6afa76_6afac912e6b99c5e3a4c22fc.6afac913647ad29a92da72c0.6afac912e6b99c5e3a4c22fd:TraeWork CN.3.4.15.no_sid.no_ppe.T(2026/11/16 17:14:25)

image

[image]

也欢迎补充开发中的踩坑经历、解决方法和心得。

3 个赞

想法很不错哦,有点像小爱同学的思路

2 个赞

作品不是0-1制作的或者贴错ID,麻烦自查!

2 个赞

视频查看太局限了太麻烦了,最好网页端可以直接打开,比如放在b站上面,点开就能看

2 个赞