权益分类	功能权益	普通用户	{{item.name}}会员
{{category.name}}	{{benefitItem.name}}

マルチメディアの相互補完的協調利用による感覚障害者間の伝達支援に関する研究

多媒体互补协作使用对感觉障碍人群沟通支持的研究

基本信息

批准号：
12780140
负责人：
清田公保
金额：
$ 1.22万
依托单位：
Kumamoto National College of Technology
依托单位国家：
日本
项目类别：
Grant-in-Aid for Encouragement of Young Scientists (A)
财政年份：
2000
资助国家：
日本
起止时间：
2000 至 2001
项目状态：
已结题

项目摘要

本研究は,感覚障害者間の双方向コミュニケーションを実現するためのコミュニケーションエイドとなる通信端末インタフェースを開発すると共に,映像・音声・テキストが有意的に結合されたマルチメディア言語の基本設計思想の確立とその有効性を明らかにすることを目的とする.本研究では,日本版PICと呼ばれる絵図画に音声情報と動作情報を含めたものをマルチメディア言語として新たに定義し,この言語を利用したコミュニケーション支援システムの構築を検討した.提案するマルチメディア言語では,日本版PICを基にPICカードをスキャナーで取り込み画像ファイルとし,これに音声出力用WAVファイル(読み上げファイル),テキスト情報を付加した.この情報ファイルをマルチメディアカードと呼び,視覚障害者と聴覚障害者の両方に共通に利用可能なコミュニケーション言語の基本用語として定義化し,データベースを作成した(現在,登録語1071種).さらに,静止画では表現しにくい動詞を表す用語については動画を採用することを提案し,効果的な速度,コマ数,動作表現法などの評価実験を行い,最適な設定値の選定を行った.このようにして作成したマルチメディアカードには,名詞や動詞,副詞,形容詞など会話に必要な基本用語が登録されており,感覚障害者間の双方向のコミュニケーションを行うのに必要な日常会話に用いられる用語や動作,感情表現,固有名詞などを表すマルチメディアカードの基本言語を確立することができた.しかし,このマルチメディア言語を用いてコミュニケーションを行うためには視覚障害者と聴覚障害者の固有の障害を吸収するために別々のユーザインタフェースが必要となった.そこでマルチメディアカードの選別法として,聴覚障害者には,視覚ベース(絵カード),視覚障害者にはペン入力ベースのユーザインタフェースを構築し,簡単な会話に対しては本言語の有用性を確認した.さらに,双方のコミュニケーションを支援するための擬人化エージェントのサポート効果が非常に有効であるとの知見が得られた.

This study aims to establish the basic design idea of the two-way communication terminal between the sensory and the sensory impaired, and to establish the objective of the communication terminal through the intentional combination of image, sound and speech. This study is aimed at exploring the construction of sound and motion information in Japanese version of PIC, including the use of sound and motion information. The proposal is based on PIC, and the sound output is based on WAV ( The basic terms of speech and language are defined and created in common with the information of the victim and the victim (currently, 1071 registered terms). In this case, the static painting is performed in the verb table, the term is used in the animation, the proposal is adopted, the speed of the effect is determined, the number of movements is determined, the evaluation is performed, and the optimal setting is selected. This is the first time that a person has ever been involved in a conversation, and the first time he has ever been involved in a conversation, he has been involved in a conversation. For example, if you want to use the language, you can use the language. The method of selecting the language from the target language is to identify the target language for the target language, and to identify the target language for the target language. The two sides of the agreement have reached a consensus.