Mixed Reality Speaker Identification as an Accessibility Tool for Deaf and Hard of Hearing Users
Mixed Reality Speaker Identification as an Accessibility Tool for Deaf and Hard of Hearing Users
复制标题
混合现实说话人识别作为聋哑和听力障碍用户的辅助工具
DOI：
10.1145/3359996.3364720
复制
发表时间：
2019
期刊：
影响因子：
--
通讯作者：
Kushalnagar, Raja
中科院分区：
文献类型：
--
作者：
Glasser, Abraham;Mason Riley, Edward;Weeks, Kaitlyn;Kushalnagar, Raja
聋哑人或重听人（DHH）可以通过文本字幕来理解音频，但对于小组演示的复杂环境来说，仅靠字幕往往是不够的，因为多个演讲者之间的轮换是快速和不可预测的。对于DHH个人来说，观看带字幕的小组演讲是一项挑战和疲劳，导致误解和排斥的感觉。在这项工作中，我们研究了混合现实（MR）头戴式显示器的潜力，它可以提供带有视觉线索的字幕，以指示面板上的哪个人在说话。为了在实验研究中保持一致性，我们在虚拟现实（VR）中模拟了一个具有不同类型MR视觉线索的小组演示；在一项对18名DHH参与者的研究中，视觉线索更容易识别说话者。
People who are Deaf or Hard of Hearing (DHH) benefit from text captioning to understand audio, yet captions alone are often insufficient for the complex environment of a panel presentation, with rapid and unpredictable turn-taking among multiple speakers. It is challenging and tiring for DHH individuals to view captioned panel presentations, leading to feelings of misunderstanding and exclusion. In this work, we investigate the potential of Mixed Reality (MR) head-mounted displays for providing captioning with visual cues to indicate which person on the panel is speaking. For consistency in our experimental study, we simulate a panel presentation in virtual reality (VR) with various types of MR visual cues; in a study with 18 DHH participants, visual cues made it easier to identify speakers.
360 度视频中的字幕
DOI：
--
发表时间：
2017
期刊：
ACM International Conference on Interactive Experiences for TV and Online Video
影响因子：
--
作者：
Andy Brown;J. Turner;Jake Patterson;Anastasia Schmitz;M. Armstrong;M. Glancy
通讯作者：
M. Glancy
DOI：
--
发表时间：
2017
期刊：
International Conference on Human Factors in Computing Systems
影响因子：
--
作者：
K. Kurzhals;Emine Cetinkaya;Yongtao Hu;Wenping Wang;D. Weiskopf
通讯作者：
D. Weiskopf
电影虚拟现实中的动态字幕
DOI：
--
发表时间：
2018
期刊：
ACM International Conference on Interactive Experiences for TV and Online Video
影响因子：
--
作者：
Sylvia Rothe;Kim Tran;H. Hussmann
通讯作者：
H. Hussmann