聴覚障害児の学習を促進する動物園の鳴き声オノマトペシステムの開発

开发动物园声音拟声词系统以促进听障儿童的学习

• 批准号: 21K18482
• 负责人: 生田目 美紀
• 金额: $ 4.08万
• 依托单位: Tsukuba University of Technology
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Challenging Research (Exploratory)
• 财政年份: 2021
• 资助国家: 日本
• 起止时间: 2021-07-09 至 2024-03-31
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-21K18482/
• 关键词: 動物園; オノマトペ; 音; 視覚化; 聴覚障害児; 動物の鳴き声; 音の視覚化

聴覚障害児が音に興味を持つ機会として動物園を活用するために、動物の鳴き声に関する情報を、鳴き声の視覚化と創作オノマトペであらわすアプリを開発した。このシステムでは、聴こえる聴こえないに関わらず誰もが、固定概念にとらわれない動物のリアルな鳴き声をイメージできるように創作オノマトペの活用を行った。就学前の児童が感じたままの鳴き声オノマトペを保護者の協力でクラウド上のデータベースに投稿してもらった。本システムでは、クラウドデータベースに投稿された文字がアプリに表示される。さらに音源に合わせて音の４要素（高さ、大きさ、長さ、音色）を反映して画像を提示するプログラムを開発し音の視覚化を行った。聴覚障害児のユーザーエクスペリエンス(UX)デザインとして、動物の気持ちをわかりやすく伝えるコンテンツを制作しアプリに搭載した。聴覚障害のある大学生を対象にユーザービリティテストを行い、改良したものを用いて動物園において聴覚障害児とそのご家族に対して評価実験を行った。

Hearing handicap of where が sound に tumblers を hold つ opportunity と し て zoo を use す る た め に, animal の sound sound き に masato す る intelligence を, sound sound き の regard 覚 と creation オ ノ マ ト ペ で あ ら わ す ア プ リ を open 発 し た. こ の シ ス テ ム で は, 聴 こ え る 聴 こ え な い に masato わ ら ず who も が, fixed concept に と ら わ れ な い animal の リ ア ル な singing sound き を イ メ ー ジ で き る よ う に creation オ ノ マ ト ペ の use line を っ た. の before school where children's sense of が じ た ま ま の singing sound き オ ノ マ ト ペ を protector の together で ク ラ ウ ド on の デ ー タ ベ ー ス contribute に し て も ら っ た. This システムで, ラウドデ ラウドデ タベ タベ スに スに submission された text がアプリに indicates される. さ ら に audio に close わ せ て sound の 4 elements (high さ, big き さ, long さ, timbre) を reflect し て portrait を prompt す る プ ロ グ ラ ム を open 発 し sound の visual line 覚 change を っ た. Hearing handicap of where の ユ ー ザ ー エ ク ス ペ リ エ ン ス (UX) デ ザ イ ン と し て, animal の 気 hold ち を わ か り や す く 伝 え る コ ン テ ン ツ を making し ア プ リ に carry し た. Hearing handicap of の あ を る college students like に seaborne ユ ー ザ ー ビ リ テ ィ テ ス ト を い, improved し た も の を with い て zoo に お い て hearing handicap of where と そ の ご family に し seaborne て review 価 be 験 を line っ た.

项目成果

Development of an animal sound onomatopoeia system that is fun to watch

开发有趣的动物声音象声词系统

• 发表时间: 2023
• 作者: Lincon S. Souza;Naoya Sogi;Bernardo B. Gatto;Takumi Kobayashi;Kazuhiro Fukui;渡辺知恵美
• 通讯作者: 渡辺知恵美