A multimedia communication system for the visually and hearing impaired

专为视听障碍人士设计的多媒体通讯系统

• 批准号: 11480042
• 负责人: MINAGAWA Hiroki
• 金额: $ 3.71万
• 依托单位: Tsukuba College of Technology
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Scientific Research (B).
• 财政年份: 1999
• 资助国家: 日本
• 起止时间: 1999 至 2000
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-11480042/
• 关键词: visually impaired; hearing impaired; communication; information support; network; chat; virtual reality; wearable computer

We studied about the possibilities and the problems of the way to supplying information for the visually impaired and the hearing impaired. So we evaluated and considered about the communication on computer network, face-to-face communication, and so on.1.Character Based Communication System on Computer NetworkWe developed a chat application that has the user interface for the visually and the hearing impaired. Then, we did a communication experiments by the subjects with visually or hearing impairments. It got obvious from the results, that the most priority task especially for visually impaired is the accessibility, that how it realizes a natural communication on the network for hearing impaired, and so on.2.Face-to-Face Communication Between Visually Impaired and Hearing ImpairedWe evaluated several situations of communication as (1) directly (as lip reading), (2) writing, (3) via sign language /voice interpreter, (4) using chat, and so on. Especially, the chat took a good evaluation because of the reliability. There was a request for down sizing of the system like PDA.3.Support System of Interactive Communication Between Hearing Impaired and Hearing PersonsWe examined the proper way to present the text information to support interactive communication. As a result, we had some suggestion that "it is important to clearly indicate the time order that the text data are presented to a hearing impaired person.", " it is necessary to take notice of the intensity of the relation between a speaker and his/her text information.", and so on.

我们研究了视障者和听障者信息提供方式的可能性和存在的问题。因此，我们对计算机网络上的通信，面对面的通信等进行了评估和考虑。1.基于字符的计算机网络通信系统我们开发了一个聊天应用程序，该应用程序具有针对视力和听力障碍者的用户界面。然后，我们对视觉障碍和听觉障碍的被试进行了交流实验。从研究结果可以看出，视障者的首要任务是无障碍，如何实现听障者在网络上的自然交流等。2.视障者与听障者的面对面交流我们评估了以下几种交流情况：（1）直接交流（如唇阅读）、（2）写、（3）通过手语/语音翻译、（4）使用聊天等。特别是聊天由于可靠性而获得了良好的评价。3.听力障碍者与听力正常者之间的交互式通信支持系统我们研究了如何正确地呈现文本信息以支持交互式通信。因此，我们有一些建议，“重要的是要清楚地表明文本数据呈现给听力受损的人的时间顺序。“，“有必要注意说话人与他/她的文本信息之间的关系强度。”，等等。

项目成果

西岡知之 他: "視覚障害・聴覚障害者間の文字通信によるコミュニケーションに関する考察"電子情報通信学会 信学技報(教育工学研究会). ET2000-126. 99-102 (2001)

Tomoyuki Nishioka 等人：“视觉和听觉障碍者之间的文本通信的考虑”电子、信息和通信工程师研究所 IEICE 技术报告（教育技术研究组）。

Makoto Kobayashi: "Chatting system that supports communication between the visually and the hearing impaired"Proceedings of International Conference on Computers Helping People with Special Needs. ICCHP2000. 497-502 (2000)

Makoto Kobayashi：“支持视觉和听觉障碍者之间交流的聊天系统”国际计算机帮助有特殊需要的人会议记录。

Tomoyuki Nishioka: "Character Based Communication Between Visually Impaired and Hearing Impaired"IEICE Technical Report. ET2000-126. 99-102 (2001)

Tomoyuki Nishioka：“视障者和听障者之间基于性格的沟通”IEICE 技术报告。

三好茂樹: "音声-文字変換技術を利用した聴覚障害者のための対話支援システムの検討"電子情報通信学会 信学技報(教育工学研究会). ET2000-125. 91-97 (2001)

Shigeki Miyoshi：“使用语音到文本转换技术的听力障碍人士对话支持系统的研究”IEICE 技术报告（教育技术研究组） 91-97（2001）。

西岡知之: "視覚障害・聴覚障害者間の文字通信によるコミュニケーションに関する考察"電子情報通信学会 信学技報(教育工学研究会). ET2000-126. 99-102 (2001)

Tomoyuki Nishioka：“视觉障碍和听力障碍者之间的文本通信研究”电子、信息和通信工程师研究所 IEICE 技术报告（教育技术研究组）。