話者と発話の選択的視聴覚認知に関する基礎的研究

说话者和话语选择性视听感知的基础研究

• 批准号: 11J08278
• 负责人: 金谷 翔子
• 金额: $ 1.22万
• 依托单位: The University of Tokyo
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for JSPS Fellows
• 财政年份: 2011
• 资助国家: 日本
• 起止时间: 2011 至 2013
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/grant/KAKENHI-PROJECT-11J08278/
• 关键词: バインディング; 視覚; 聴覚; 時間周波数限界; 同時性知覚

本研究課題のテーマは, 一対の視聴覚情報の発生源としての話者を, 効率的に定位, 認識できるメカニズムについて, 人間の感覚情報処理に関する基礎的知見から説明することである。話者の特定には, 発話内容の知覚, 構音動作の知覚, および, これらの視聴覚情報の統合という段階的な処理過程が関与しているが, これら全ての過程では, 共通して, 何らかの感覚情報間の対応付けが行われている。そこで, 私は, 感覚モダリティ内, および感覚モダリティ間の対応付けに用いられるメカニズムの性質を明らかにすることを目的としている。先行研究では, バインディング(対応付け)課題を用いた実験によって, 視覚の異属性(e.g. 色と運動)間, および異種感覚モダリティ(e.g. 視覚と聴覚)間の対応付けが, 約2.5Hzという共通の時間限界を示し, ゆえにこれらの対応付けが, 高次の共通のメカニズムで行われている可能性が示唆されている。よって, 視覚以外の感覚モダリティ(e.g. 聴覚)においても, 異属性(e.g. 振幅と音高)間の対応付けの時間限界が上記と共通の値になるのであれば, 感覚モダリティを問わず, 独立のモジュールで処理された感覚情報の対応付けは, 共通のメカニズムで行われると推察することができる。前年度までの研究においては, 三種類の聴覚属性を用いて, 属性間の対応付けの時間限界を測定した。その結果, 属性間の対応付けの時間限界は約2.5～4Hzであり, 条件によっては, 2.5Hzよりも有意に高い値となった。しかし, この実験においては, 聴覚末梢系で生じる何らかの手掛かりによって, 対応付けの可否によらず課題が遂行できていた可能性があった。そこで, 聴覚末梢系で生じる手掛かりを可能な限り統制できる刺激を用い, さらに刺激の顕著性を操作して, 聴覚属性間の対応付けの時間限界について, 再検討を行った。その結果, 聴覚属性間の対応付けの時間限界は約3～4Hzであり, この若干高い時間限界は末梢の手掛かりや刺激の顕著性によらず安定していることが分かった。このことから, 聴覚においては, 異なる属性間の対応付けであっても, 視覚属性間および異種感覚モダリティ間の対応付けに用いられる共通のメカニズムよりも低次の, 聴覚系内部のメカニズムで行われるものと考えられる。

This research topic の テ ー マ は, a moral の depending on hearing intelligence の 発 students と し て を の words, sharper rate に positioning, meet で き る メ カ ニ ズ ム に つ い て, human sense の 覚 intelligence 処 Richard に masato す る basic knowledge か ら illustrate す る こ と で あ る. Words の specific に は, 発 tell content の 覚, compose sound action の 覚, お よ び, こ れ ら の depending on hearing intelligence の integration と い う Duan Jie of な 処 が during processing and masato し て い る が, こ れ ら full て の process で は, common し て, what ら か の feeling between 覚 intelligence の 応 seaborne pay け が line わ れ て い る. は そ こ で, private, feeling 覚 モ ダ リ テ ィ, お よ び feeling 覚 モ ダ リ テ ィ between の 応 seaborne pay け に with い ら れ る メ カ ニ ズ ム の nature を Ming ら か に す る こ と を purpose と し て い る. Leading research で は, バ イ ン デ ィ ン グ (応 pay け seaborne) subject を い た be 験 に よ っ て, regard 覚 の different attributes (um participant. Color と movement), お よ び dissimilar feeling 覚 モ ダ リ テ ィ (e.g. 覚 と hearing) between の 応 seaborne pay け が, about 2.5 Hz と い う common の time limit を し, ゆ え に こ れ ら の 応 seaborne pay け が, high order の common の メ カ ニ ズ ム で line わ れ て い が る possibility in stopping さ れ て い る. Youdaoplaceholder0, vision other than 覚, sensation 覚モダリティ(e.g. Youdaoplaceholder3)にお て て て, different attributes (e.g.) Amplitude と pitch) between の 応 seaborne pay け の time limit が written と の common numerical に な る の で あ れ ば, feeling 覚 モ ダ リ テ ィ を asked わ ず, independent の モ ジ ュ ー ル で 処 Richard さ れ た feeling 覚 intelligence の 応 seaborne pay け は, common の メ カ ニ ズ ム で line わ れ る と push examine す る こ と が で き る. Before the annual ま で の research に お い て は, three kinds の hearing attribute を with い て, properties between の 応 seaborne pay け の time limit を determination し た. そ の as a result, the properties between の 応 seaborne pay け の time limit は is about 2.5 ~ 4 Hz で あ り, conditions に よ っ て は, 2.5 Hz よ り も intentionally に high い numerical と な っ た. し か し, こ の be 験 に お い て は, hearing endings is born で じ る what ら か の hands hang か り に よ っ て, 応 seaborne pay け can の に よ ら が ず subject carries out で き て い た possibility が あ っ た. そ こ で, hearing endings で raw じ る hands hang か り を may な limits り control で き る stimulus を い, さ ら に stimulus の 顕 the sexual を operation し て, hearing properties between の 応 seaborne pay け の time limit に つ い て, line again beg を 検 っ た. そ の results, hearing properties between の 応 pay seaborne け の time limit は about 3 ~ 4 hz で あ り, こ の several high い time limit は endings の hands hang か り や stimulus の 顕 the sexual に よ ら ず settle し て い る こ と が points か っ た. こ の こ と か ら, hearing に お い て は, different な る properties between の 応 seaborne pay け で あ っ て も, apparent 覚 properties between お よ び dissimilar feeling 覚 モ ダ リ テ ィ between の 応 seaborne pay け に with い ら れ る common の メ カ ニ ズ ム よ り も の low time, hearing system internal の メ カ ニ ズ ム で line わ れ る も の と exam え ら れ る.

项目成果

Temoral frequency limits for within- and cross-attribute binding in vision and audition.

视觉和听觉中属性内和跨属性绑定的时间频率限制。

• 发表时间: 2012
• 作者: Kanaya;Fujisaki;Nishida. Yokosawa
• 通讯作者: Nishida. Yokosawa

The way of spatial processing with audio-visual speech stimuli differs in single and bilateral visual presentations

视听语音刺激的空间处理方式在单侧和双边视觉呈现中有所不同

• 发表时间: 2011
• 作者: Kanaya;S.;Yokosawa;K.
• 通讯作者: K.

視覚と聴覚のバインディング課題における時間限界の比較

视觉和听觉绑定任务的时间限制比较

• 发表时间: 2012
• 作者: 金谷翔子;藤崎和香;西田眞也;横澤一彦
• 通讯作者: 横澤一彦

聴覚モジュール内、モジュール間の対応付けの時間限界の比較

听觉模块内部和之间的通信时间限制的比较

• 发表时间: 2013
• 作者: Kanaya;S.;Fujisaki;W.;Nishida;S. Furukawa;S. & Yokosawa;K.;田中マリア;田中マリア;藤崎和香;金谷翔子,藤崎和香,西田眞也,古川茂人,横澤一彦
• 通讯作者: 金谷翔子,藤崎和香,西田眞也,古川茂人,横澤一彦

視覚と聴覚の属性内および属性間の対応付けにおける時間周波数限界の比較

视觉和听觉属性内和属性间对应的时频限制比较

• 发表时间: 2012
• 作者: 金谷翔子;藤崎和香;西田眞也;横澤一彦
• 通讯作者: 横澤一彦