// AI 新闻 · 2026-11-16 · Dev.to AI
Unmute项目实现无声患者唇语识别
团队在HackUMass期间开发了Unmute，一种基于普通笔记本电脑的离线唇语识别工具，用于帮助无法发声的ICU患者表达需求。患者通过嘴唇动作示意，系统利用本地摄像头和MediaPipe进行面部追踪，结合预录语料库与Auto-AVSR模型，实时生成最可能的句子并显示在屏幕上，患者通过点头、触碰等方式确认后，设备会将内容朗读出来。
原文发布 2026-11-16 01:27（北京时间）来源 Dev.to AI自动整理 · 已核对原文
01摘要
该系统无需校准、无需网络连接，支持离线运行。当识别到紧急语句如‘我无法呼吸’时，系统触发2秒倒计时，屏幕变红并推送警报至护士手机，误判可由单次操作取消。所有用户确认的语句均被保存为新模板，用于持续优化模型表现，确保对个体唇形变化（如肿胀、偏移）具备适应能力。
由开源模型根据原文自动整理，经数字/专名逐项核对（必须在原文中出现），以原文为准。
02要点
- 系统基于本地摄像头与MediaPipe实现离线唇语识别，无需网络或特殊硬件。
- 采用Auto-AVSR模型与动态时间规整匹配技术，结合20个固定短语进行概率评分，准确率在首次卡片显示达71.3%。
- 紧急请求如‘无法呼吸’触发倒计时和警报，误报率低，且支持用户手动纠正并持续学习个体唇形特征。
- 系统通过本地FastAPI服务处理数据，仅监听127.0.0.1，保障隐私安全，视频内容不上传至外部服务器。
03原文出处
Unmute: reading silent lips for ICU patients who can't make a sound (offline, on a laptop)
Dev.to AI · 发布于 2026-11-16 01:27（北京时间） · 上方为原标题
05相关新闻
出自智图 AI 新闻：从 1100 多个官方与媒体信源采集。摘要只转述原文内容，详情请看原文。 2026-11-16 全部新闻 · 按日期归档 · 全部 AI 新闻 · 今日