基础篇
进阶篇
高频篇
精选篇
手写篇
面经篇
AI 篇
原理篇
每日一题
小程序题库
  • 知识卡片碎片时间过考点
  • 场景篇按分类整理的大前端场景考点
  • 历年面经按年份追踪真实考点
  • 算法题库NEW在线编码即时判题
  • 专项自测100 题快速查漏
  • 前端基础
    • HTTP从报文一路讲到 HTTPS
    • 浏览器渲染、事件循环、进程
    • 计算机基础Linux、网络、操作系统
  • 进阶专项
    • 设计模式23 种模式怎么用
    • 前端系统进阶学习大型项目工程化
    • 前端综合文章长期沉淀的实践文
  • 工程与工具
    • Node学习指南从环境搭建到服务端
    • NPM工作流script、依赖与发布
    • Docker容器化部署上手
    • Canvas图形与动画实战
  • 路线与导图
    • 思维导图知识点全景图
    • 学习路线按图索骥不跑偏
  • 动态
    • 公众号动态公众号历史文章
    • 博客动态站长的技术博客
    • 开发者导航常用工具与文档站
    • AI 热点每日 AI 资讯与动向
AI 工作台
旧版
AIHT
内容
精选全部 AI 动态热点榜AI 日报收藏
分类
模型行业编程产品技术观点开源
更多
Agent 接入
返回首页开发者导航
AIHT
精选 / 资讯详情
8.0
热点
AI SCORE
技术实践2026-11-18 03:57

存量硬件加离线语音控制怎么选型

dev.to · AI#嵌入式#离线语音#架构选型
Editor brief · 编辑速览

文章按唤醒词、固定指令和开放式语音三类需求,对比关键词检测、自动语音识别、语音模块和可移植的 ONNX 或 TFLite 模型。少量固定指令可优先考虑关键词检测,涉及人名、数字或开放句式时可考虑语音识别加意图解析。

文章思维导图
Knowledge map
拖拽缩放
AI deep read

AI 深度解读

给已经定板的 IoT 产品加离线语音,先把用户会说的话写出来。只需要识别「开灯」「关灯」「调亮」,多关键词检测(KWS)就能直接给业务层一个指令标签。要听懂「把客厅灯调到 40%」这类带房间名和任意数值的话,才有理由评估自动语音识别(ASR)。

作者把这道选型题拆成了两个问题。先看用户能说什么,再看现有硬件能跑什么。即使同一个模型能在网页和开发板上运行,最终装进外壳后的误触发、响应时间和功耗,也得重新测。

四条固定指令,为什么先试 KWS

唤醒词模型只回答一个问题:有没有人说 Hey device?多关键词 KWS 会进一步判断用户说的是哪条预设指令。ASR 则先把语音转成文字,再交给后续逻辑提取动作、对象和参数。只有 start、stop、next、previous 这四条指令时,先转写再匹配文本多了一层处理,还可能增加模型体积、功耗和延迟。

作者给出的流程把语音识别接到了产品动作上。

Wake Word → command window → command label → product action

这一行里的 command window 是唤醒后接收指令的时间窗口,command label 则是交给应用层的结果。以灯具为例,业务层拿到「调亮」标签就能调用设备动作,无需解析一整句转写文本。

模组、SDK 和模型文件怎么选

语音模组适合尽快跑通原型。模组处理音频,再通过 UART 等接口返回指令事件。代价是词表、模型格式、麦克风链路、固件工具和商业条款都可能跟着供应商走。产品只有一个硬件 SKU 时,这笔账可能划算。要支持多块板子或多种语言,就要算上迁移成本。

闭源商业 SDK 可能省下检测和支持方面的工作。选型时要核对持续费用、按设备授权、支持语言、导出限制和离线行为,并确认现有处理器能跑。

团队需要在多种运行时交付时,作者建议评估可移植的 KWS 模型。ONNX 可用于 Android、Web、Linux 和桌面端,ESP32-S3 这类微控制器可评估 INT8 TFLite。模型格式确定之后,还得确认目标端能否使用 ONNX Runtime 或 TFLite Micro,以及识别结果怎么交给现有应用。

网页里能识别,装进外壳后还要测什么

先核对采样率、麦克风声道格式、音频缓冲和帧大小,再看 RAM、闪存、CPU 时间和常开检测的功耗预算。网页演示可以帮团队试词表。最终表现要用量产麦克风和外壳,在实际使用距离下测出来。

原文的 2026 年评估清单里,最实用的是把每条指令的召回率和每小时误触发次数分开记录。前者看用户发出指令后有多少次被识别,后者看设备平时会不会自己触发。再测重复触发、响应延迟、内存和功耗,把日常对话、电视、音乐、风扇、近音短语和不同说话人都纳入测试。

我的判断

我认同先写词表再选架构。这里最容易低估的是中文表达的变体。「调亮一点」可以作为有限词表里的指令,「亮到百分之四十」如果允许用户随口说任意比例,就要考虑怎么识别并提取数值。选型前把允许的表达和参数范围写清楚,比先定模型更有用。

原文没有给出同一设备上的对照实测,也没有报告召回率、误触发、延迟或功耗数据。KWS 更适合短词表、模组更利于快速做原型,都是有前提的工程经验。已有稳定 ASR 链路的团队,可以先测复用成本,再和单独接入 KWS 比较。作者也披露自己是 Voicute 的创建者,其在线训练和测试流程可以用来做首轮实验,模型表现仍要由目标设备上的数据判断。

能拿来做什么

  • 前端做语音原型时,可以先验证唤醒、指令窗口和动作反馈,把每条指令映射到已有的设备操作。再到目标板上测同一批指令的识别表现。
  • 如果应用要接多种硬件,可以让 UART 模组和本地模型都输出同一套业务指令标签,减少切换识别方案时需要改动的产品逻辑。
  • 如果团队用网页试词表、用开发板验收,可以用 Node 汇总两端的测试记录,按指令统计召回率,另外记录每小时误触发次数和响应延迟。
Original source

本文由 AI 通读原文后重新编写,观点部分为站内判断,细节以原文为准,来源 dev.to · AI,原文版权归原作者所有。

阅读原文
上一篇
Google AI Studio 打通安卓应用生成到发布
下一篇
4GB 显存下的本地文档压缩应用架构

资讯速览

dev.to · AI · 2026-11-18 03:57

AI 评分 8.0 / 10

相关标签

#嵌入式#离线语音#架构选型

继续阅读

  • 用本地 MCP 隔离调试日志里的密钥
  • Google AI Studio 打通安卓应用生成到发布
  • 4GB 显存下的本地文档压缩应用架构
  • GPT‑6.2 双模型亮相,Codex 收紧项目权限
  • 用 TypeScript 动手学 AI 工程的 30 天路线