Clew3D: Automated Generation of O&M Instructions Using LIDAR-Equipped Smartphones
Clew3D: Automated Generation of O&M Instructions Using LIDAR-Equipped Smartphones
复制标题
Clew3D：自动生成 O
DOI：
10.1145/3441852.3476564
复制
发表时间：
2021
期刊：
影响因子：
--
通讯作者：
Ruvolo, Paul
中科院分区：
文献类型：
--
作者：
Harriman, Hwei-Shin;Ahmetovic, Dragan;Mascetti, Sergio;Moyle, Darren;Evans, Michael;Ruvolo, Paul
经过认证的定向和移动专家（COMS）与盲人或视障人士（BVI）合作，帮助他们自信地独立旅行。这个过程的一部分涉及创建一个路线的叙述性描述，并使用特定的技术来帮助客户内化它。我们专注于基于智能手机的记录自动生成一个室内路线的叙述性描述的问题。这些自动生成的解说可用于COMS不可用的情况，或使客户能够独立练习最初在COMS帮助下学习的路线。具体来说，我们介绍了Clew3D，一个移动的应用程序，利用配备激光雷达的iOS设备来识别方向和移动性（O&M）地标及其沿沿着记录的路线的相对位置。然后使用所识别的地标来提供在传统的0 &M技术之后建模的口语叙述。我们的解决方案是与COMS共同设计的，并使用他们在为客户创建路线叙述时使用的方法和语言。除了展示Clew3D之外，我们还报告了与COMS进行的关于传统面对面O&M教学中使用的技术和术语的分析结果。我们还讨论了基于视觉的系统所带来的挑战，以实现可靠的自动叙述。最后，我们提供了一个自动生成的路由描述的例子，并将其与COMS提供的相同的路由进行比较。
Certified orientation and mobility specialists (COMS) work with clients who are blind or visually impaired (BVI) to help them travel independently with confidence. Part of this process involves creating a narrative description of a route and using specific techniques to help the client internalize it. We focus on the problem of automatically generating a narrative description of an indoor route based on a recording from a smartphone. These automatically generated narrations could be used in cases where a COMS is not available or to enable clients to independently practice routes that were originally learned with the help of a COMS. Specifically, we introduce Clew3D, a mobile app that leverages LIDAR-equipped iOS devices to identify orientation and mobility (O&M) landmarks and their relative location along a recorded route. The identified landmarks are then used to provide a spoken narration modeled after traditional O&M techniques. Our solution is co-designed with COMS and uses methods and language that they employ when creating route narrations for their clients. In addition to presenting Clew3D, we report the results of an analysis conducted with COMS regarding techniques and terminology used in traditional, in-person O&M instruction. We also discuss challenges posed by vision-based systems to achieve automatic narrations that are reliable. Finally, we provide an example of an automatically generated route description and compare it with the same route provided by a COMS.
登录
查看更多内容
影响因子：
1.1
作者：
Havik, Else M.;Kooijman, Aart C.;Steyvers, Frank J. J. M.
通讯作者：
Steyvers, Frank J. J. M.
利用增强现实为视觉障碍人士创建应用程序：室内导航案例研究
DOI：
10.1145/3308561.3353788
发表时间：
2019
期刊：
Proceedings of the 21st International ACM SIGACCESS Conference on Computers and Accessibility
影响因子：
--
作者：
Chris Yoon;Ryan Louie;Jeremy Ryan;MinhKhang Vu;Hyegi Bang;William Derksen;P. Ruvolo
通讯作者：
P. Ruvolo
预先路线说明和路线指示 - 公共交通中视障人士和盲人导航系统的可用性评估
DOI：
10.1007/978-3-642-39062-3_18
发表时间：
2013
期刊：
Int. J. Inf. Manag.
影响因子：
--
作者：
Elke E. Mattheiss;E. Krajnc
通讯作者：
E. Krajnc
DOI：
--
发表时间：
1976
期刊：
影响因子：
--
作者：
A. Everett;Purvis Ponder
通讯作者：
Purvis Ponder