指点字の感情認識システムの開発

手指盲文情感识别系统的开发

• 批准号: 16700430
• 负责人: 松田 康広
• 金额: $ 1.15万
• 依托单位: Kanagawa Institute of Technology
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Young Scientists (B)
• 财政年份: 2004
• 资助国家: 日本
• 起止时间: 2004 至 2006
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-16700430/
• 关键词: 盲ろう者; 指点字; 感情認識; コミュニケーション支援

1.16年度に実施、17年度に分析を行なった、盲ろう者通訳・介助員の感情を表現に関する実験について、被検者を増やして実施した。被打点者の手を圧力センサ上に置き、計測された荷重変化から、打点荷重と打点時間、休止時間を算出した。分析の結果、「喜び」はリズミカルに打点時間を短く、「悲しみ」は打点時間を長く、打点荷重を弱く、「怒り」は打点荷重を強く打点する、感情表現方法は共通していた。被打点者が装着した加速度センサで、打点によって生じる衝撃加速度を計測し、衝撃加速度の振幅と、打点開始から次の打点開始までの区間長(打点時間と休止時間の和)を算出した。その結果、振幅と区間長による感情の判別分析によって文の感情を判別する手法を導出し、感情認識の可能性が示された。2.16〜17年度開発した打点認識システムを改良した。被打点者が装着した加速度センサで、打点によって生じる衝撃加速度を計測し、打点された指と打点位置を認識する。打点された指の変化から、点字表記の日本語の構文解析を行ない、日本語の文字列に変換し、それを合成音声で出力する。盲ろう者通訳・介助員の打点を認識する評価実験を行なった。平均打点速度37.0文字/minの打点で、打点指の認識率は94.3%、打点位置の認識率は94.9%であった。3.16〜17年度開発した打点教示システムを改良し、指点字習得視覚障害者と健常者のコミュニケーション実験を実施した。1分間あたりのコミュニケーション速度が21.8文字/minと限定されたものの、健常者が指点字習得視覚障害者と、指点字で直接コミュニケーションができた。

1.16 Annual implementation, 17 years of analysis, blind communication, support for the performance of the feelings of the staff, implementation of the implementation of the inspection The force of the hand of the person to be hit is calculated from the position above, the load is measured, the hit time is calculated, and the rest time is calculated Analysis results,"happy" and "sad" and "RBI time","RBI load" and "anger" RBI load ", emotional expression methods are common The acceleration of the target is measured, the impact acceleration is measured, the amplitude of the impact acceleration is measured, and the interval length of the starting time of the target is calculated. The result, amplitude and interval length of emotion discriminant analysis, the method of emotion discriminant analysis, and the possibility of emotion recognition are shown. 2.16 ~ 17 years of development to improve the understanding of the system. The impact acceleration is measured and the position of the dot is recognized. Japanese text analysis of dot notation, Japanese text conversion, and synthetic sound output The management of blind persons and assistants should be evaluated and implemented. The average dot speed is 37.0 words/min, the dot recognition rate is 94.3%, and the dot recognition rate is 94.9%. 3.16 - 17 years of development of the management system to improve, pointing to the acquisition of visual impairment and normal people to implement the system 1 minute time limit: 21.8 words/min, normal: 30 words/min

项目成果

Finger Braille Teaching System for People who Communicate with Deafblind People

与聋盲人交流的手指盲文教学系统

• 发表时间: 2007
• 期刊: Proceedings of IEEE International Conference on Mechatronics and Automation 2007 (掲載予定)
• 作者: Sakamoto M;Harada T;et al.;田平 隆行;田平 隆行;田平 隆行;田平 隆行;田平 隆行;松田康広;松田康広;田崎 洋光;Yasuhiro Matsuda
• 通讯作者: Yasuhiro Matsuda

指点字の打点教示プログラムの開発〜音声認識と点字表記への変換〜

开发手指盲文点字教学程序-语音识别及盲文符号转换-

• 发表时间: 2004
• 期刊: 第2回生活支援工学系学会連合大会講演予稿集
• 作者: Sakamoto M;Harada T;et al.;田平 隆行;田平 隆行;田平 隆行;田平 隆行;田平 隆行;松田康広;松田康広;田崎 洋光;Yasuhiro Matsuda;Yasuhiro Matsuda;松田康広;松田康広;Yasuhiro Matsuda;松田康広;松田康広;松田康広;松田康広;松田康広;Yasuhiro Matsuda;松田康広;松田康広;松田康広
• 通讯作者: 松田康広

指点字通訳者による感情表現の特徴

手指盲文解译员情感表达特征

• 发表时间: 2007
• 期刊: 全国盲ろう者教育研究会会報 4(掲載予定)
• 作者: Sakamoto M;Harada T;et al.;田平 隆行;田平 隆行;田平 隆行;田平 隆行;田平 隆行;松田康広
• 通讯作者: 松田康広

指点字の打点教示システムの開発~音声認識を利用した打点指と打点位置の教示~

开发手指点字点字教学系统～通过语音识别来教学点手指和点位置～

• 发表时间: 2007
• 期刊: ライフサポート 19・3(掲載予定)
• 作者: Sakamoto M;Harada T;et al.;田平 隆行;田平 隆行;田平 隆行;田平 隆行;田平 隆行;松田康広;松田康広
• 通讯作者: 松田康広

皮膚接触コミュニケーションにおける感情伝達に関する研究~指点字通訳者と未習得者の感情表現~

肌肤接触中的情感传递研究~手指盲文翻译者和未学过手指盲文者的情感表达~

• 发表时间: 2006
• 期刊: ヒューマンインターフェースシンポジウム2006論文集
• 作者: Sakamoto M;Harada T;et al.;田平 隆行;田平 隆行;田平 隆行;田平 隆行;田平 隆行;松田康広;松田康広;田崎 洋光;Yasuhiro Matsuda;Yasuhiro Matsuda;松田康広
• 通讯作者: 松田康広