HPSpeech: Silent Speech Interface for Commodity Headphones
HPSpeech: Silent Speech Interface for Commodity Headphones
复制标题
HPSpeech：商品耳机的无声语音接口
DOI：
10.1145/3594738.3611365
复制
发表时间：
2023
期刊：
影响因子：
--
通讯作者：
Zhang, Cheng
中科院分区：
文献类型：
--
作者：
Zhang, Ruidong;Chen, Hao;Agarwal, Devansh;Jin, Richard;Li, Ke;Guimbretière, François;Zhang, Cheng
我们提出HPSpeech，一个无声的语音接口的商品耳机。HPSpeech利用耳机的现有扬声器发出听不见的声音信号。讲话时颞下颌关节（TMJ）的运动会改变这些信号的反射模式，这些信号由位于耳机内的麦克风捕获。为了评估HPSpeech的性能，我们在两个耳机上测试了它，共有18名参与者。实验结果表明，HPSpeech成功识别了8种常用的静音语音命令，并成功控制了音乐播放器，识别率达到90%以上。虽然我们的测试使用修改后的商品硬件（有和没有主动噪声消除），但我们的结果表明，感测TMJ的运动可以像ANC耳机的固件更新一样简单，ANC耳机已经在耳杯内包含麦克风。这使我们相信，这项技术在不久的将来具有快速部署的巨大潜力。我们进一步讨论了在大规模部署HPSpeech之前需要解决的挑战。
We present HPSpeech, a silent speech interface for commodity headphones. HPSpeech utilizes the existing speakers of the headphones to emit inaudible acoustic signals. The movements of the temporomandibular joint (TMJ) during speech modify the reflection pattern of these signals, which are captured by a microphone positioned inside the headphones. To evaluate the performance of HPSpeech, we tested it on two headphones with a total of 18 participants. The results demonstrated that HPSpeech successfully recognized 8 popular silent speech commands for controlling the music player with an accuracy over 90%. While our tests use modified commodity hardware (both with and without active noise cancellation), our results show that sensing the movement of the TMJ could be as simple as a firmware update for ANC headsets which already include a microphone inside the hear cup. This leaves us to believe that this technique has great potential for rapid deployment in the near future. We further discuss the challenges that need to be addressed before deploying HPSpeech at scale.
登录
查看更多内容
DOI：
--
发表时间：
--
期刊：
--
影响因子：
--
作者：
Tanmay Srivastava;Phuc Nguyen
通讯作者：
Tanmay Srivastava;Phuc Nguyen
使用 SilentSpeller 进行移动、免提、无声语音短信
DOI：
--
发表时间：
2021
期刊：
影响因子：
--
作者：
Naoki Kimura;Tan Gemicioglu;Jonathan Womack;Richard Li;Yuhui Zhao;Abdelkareem Bedri;Alex Olwal;Jun Rekimoto;Thad Starner
通讯作者：
Thad Starner
DOI：
10.1109/taslp.2017.2758999
发表时间：
2017-12
期刊：
IEEE/ACM transactions on audio, speech, and language processing
影响因子：
--
作者：
Kim M;Cao B;Mau T;Wang J
通讯作者：
Wang J
使用卷积和循环神经网络的基于超声的无声语音接口
影响因子：
--
作者：
E. Juanpere;T. Csapó
通讯作者：
T. Csapó
ICCHP 主题演讲：基于肌电图识别无声和微弱言语
DOI：
--
发表时间：
2010
期刊：
International Conference on Computers for Handicapped Persons
影响因子：
--
作者：
Tanja Schultz
通讯作者：
Tanja Schultz