Multi-modal Diagrammatic Information Presentation System for the Blind

盲人多模态图解信息呈现系统

• 批准号: 04558009
• 负责人: OHNISHI Noboru
• 金额: $ 1.86万
• 依托单位: Nagoya University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Developmental Scientific Research (B)
• 财政年份: 1992
• 资助国家: 日本
• 起止时间: 1992 至 1994
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-04558009/
• 关键词: Vision Substitution; Map Information; Multi-modality; Tactile Sense; Auditory Sense; Linguistic Information; Data Base; Rehabilitation Aids; マチルモダリティー

This project has developed a multi-modal vision substitution system, by which blind persons can access diagrammatic information such as a map, a figure etc.. Global information of a diagram, such as road layout, is presented on a tactile display (8 x 8 pin matrix) and fine one, such as landmarks, is outputted as synthesized voice. Thus a diagram is represented as a tactile audio diagram. Blind persons can read diagram through tactile and auditory senses by interactive communication with the system. Furthermore they can draw a diagram via the tactile display, setting pin's height and inputting voice. Generated diagram is stored in the system and is easily modified by adding new information or deleting.We conducted a preliminary field test by blind students to evaluate the system. Based on its results we made improvements the system ; decrease of operations by hands, use of earcon.

该项目开发了一个多模式视觉替代系统，盲人可以通过该系统获得地图、图形等图表信息。地图的全局信息（如道路布局）显示在触觉显示器（8 x 8引脚矩阵）上，而精细信息（如地标）则以合成语音输出。因此，图被表示为触觉音频图。盲人可以通过触觉和听觉与系统进行交互式交流来阅读图表。此外，他们可以通过触觉显示器绘制图表，设置引脚的高度和输入语音。生成的图形存储在系统中，可以方便地添加或删除新的信息。我们进行了初步的现场测试，盲人学生评价系统。在此基础上，我们对系统进行了改进，减少了手工操作，使用了耳标。

项目成果

皆川洋喜: "盲人の地図および環境の理解に関する実験と考察" 電子情報通信学会論文誌. (投稿中).

Hiroki Minakawa：“关于盲人理解地图和环境的实验和思考”电子、信息和通信工程师学会会刊（目前正在提交）。

皆川 洋喜: "触覚と聴覚による盲人用図表現システム" 電子情報通信学会論文誌DII. J77. (1994)

Hiroki Minakawa：“盲人使用触觉和听觉的图形表示系统”电子、信息和通信工程师学会杂志 DII (1994)。

皆川 洋喜: "盲人の地図表現に関する実験と考察" 第19回感覚代行シンポジウム. 103-106 (1993)

Hiroki Minakawa：“盲人地图表示的实验和考虑”第 19 届感官替代研讨会 103-106 (1993)。

Hiroki MINAGAWA: "A Vision Substitution System for Reading and Writing Diagrams using Tactile and Auditory Senses" Proc.of 3rd Int.Conference on Computers for Handicapped Persons. 353-362 (1992)

Hiroki MINAGAWA：“使用触觉和听觉来读写图表的视觉替代系统”，第三届残疾人计算机国际会议论文集。

皆川 洋喜: "触覚と聴覚による盲人用マルチメディアシステム" 第18感覚代行シンポジウム論文集. 106-109 (1992)

Hiroki Minakawa：“盲人的触觉和听觉多媒体系统”第 18 届感官替代研讨会论文集 106-109（1992 年）。