GitHub 热门

joeblau/subvox

多模态 在 GitHub 打开 ↗

用 AirPods 头部运动数据把无声默念转成文字的实验原型

Star732
24h 新增+7
7 天新增—
Fork97
Issue0
语言Swift

项目介绍

更新于 1 天前

Subvox 是一个 macOS 原型,用来验证一个想法:AirPods Pro 的头部运动传感器数据,能否把你在心里默念、嘴唇微动的词识别成文字。它不依赖语言模型,而是用小词表的模板匹配加统计检验,判断信号是否真实存在。你先对着它无声地念几个词,它把每次的头部加速度、旋转和姿态变化存成模板;之后再默念时,它用动态时间 warping 把新片段和模板比对,输出文字,旁边还并排显示麦克风的实时转写作对照。它还内置留一交叉验证和标签置换检验,告诉你识别准确率是否显著高于随机猜测,并能拆开看加速度、旋转、姿态哪个通道真正携带了信号。对做可穿戴交互、无声语音输入或传感器信号研究的工程师和研究者来说,这是个能快速验证假设的实验工具;如果你不关心这类前沿输入方式,和日常工作关系不大。

上手成本:中

Star 趋势

记录 7 个数据点 · 期间增长 +50

仓库信息

LicenseMIT
创建时间2026-10-31
最后推送5 天前
热度分21.0