Development of Design Support Tools in Virtual Space Focusing on Sound and Space Perception

虚拟空间中以声音和空间感知为重点的设计支持工具的开发

• 批准号: 22K18145
• 负责人: 北本 英里子
• 金额: $ 3万
• 依托单位: Ritsumeikan University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Early-Career Scientists
• 财政年份: 2022
• 资助国家: 日本
• 起止时间: 2022-04-01 至 2027-03-31
• 项目状态: 未结题
• 来源: https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-22K18145/
• 关键词: 空間デザイン; XR; インタラクション; 空間知覚; 没入型仮想環境; プロジェクションマッピング; 音; デザイン支援; 没入型仮想空間

本研究は，空間知覚に強く関係がある視覚と聴覚に着目し，没入感を有した仮想空間で感覚的・直感的に操作をしながら，インタラクティブにデザインができるシステムの開発を目指している．今年度は実験システムとして，リアルタイムレンダリングを用いて現実空間で発生した音に対して，仮想空間のオブジェクトの形状がインタラクティブに変化する空間を制作し，ヘッドマウントディスプレイ（以下，HMDと称する）およびプロジェクションマッピングを用いて体験できるシステムを構築した．特に，人の呼吸や声をパラメーターとして，空間のオブジェクトだけでなく，テクスチャやライティングも変化させるシステムを構築することができた．刺激に対する生理的反応として，呼吸や声の他に人の動きやそれによって発生する音なども対象に検討を行った．さらに現実空間の音だけでなく，仮想空間内で効果音や音楽を発生させるシステムも構築し，複数のパターンが検討できるシステムを構築した．加えて，構築したシステムを利用してフィジカルとバーチャルがインタラクティブに変化するコンテンツを制作し，学会や研究会で発表を行った．具体的には，ゲームやアートを対象に，まずは体験者の心身を変化させ得るコンテンツを複数制作し，体験した感想を調査し改善を行った．また，体験するディバイスの違いで，同じコンテンツであっても評価が異なるという知見を得ることができた．更にシステムの操作として，コントローラーやハンドジェスチャーの使用の違いも検討を行った．

Strong は of this research, the space know 覚 に く masato is が あ る visual 覚 と hearing に mesh し, mergence feeling を some し た 仮 want to space で feeling 覚, Xenia に operation を し な が ら, イ ン タ ラ ク テ ィ ブ に デ ザ イ ン が で き る シ ス テ ム の open 発 を refers し て い る. Our は be 験 シ ス テ ム と し て, リ ア ル タ イ ム レ ン ダ リ ン グ を with い て now be space で 発 raw し た sound に し seaborne て, 仮 space の オ ブ ジ ェ ク ト の shape が イ ン タ ラ ク テ ィ ブ に variations change す る space を し, ヘ ッ ド マ ウ ン ト デ ィ ス プ レ イ (the following, HMD と said す る) お よ び プ ロ ジ ェ ク シ ョ ン マ ッ ピ ン グ を with い て body 験 で き る シ ス テ ム を build し た. に, people の breathing sound や を パ ラ メ ー タ ー と し て, space の オ ブ ジ ェ ク ト だ け で な く, テ ク ス チ ャ や ラ イ テ ィ ン グ も variations change さ せ る シ ス テ ム を build す る こ と が で き た. Stimulate に す seaborne る physiology of 応 と し て, breathing sound や の he に の dynamic き や そ れ に よ っ て 発 raw す る sound な ど も like に seaborne 検 line for を っ た. さ ら に now be space の sound だ け で な く, で 仮 want to space unseen fruit sounds や joy を 発 raw さ せ る シ ス テ ム も し, plural の パ タ ー ン が beg で 検 き る シ ス テ ム を build し た. Add え て, constructing し た シ ス テ ム を using し て フ ィ ジ カ ル と バ ー チ ャ ル が イ ン タ ラ ク テ ィ ブ に variations change す る コ ン テ ン ツ を し, academic や で 発 table line を っ た. Specific に は, ゲ ー ム や ア ー ト を like に, seaborne ま ず は body 験 is の psychosomatic を variations change さ せ must る コ ン テ ン ツ を plural し, body 験 し た feeling を survey line し improve を っ た. ま た, body 験 す る デ ィ バ イ ス の violations い で, with じ コ ン テ ン ツ で あ っ て も review 価 が different な る と い う knowledge を have る こ と が で き た. More に シ ス テ ム の operation と し て, コ ン ト ロ ー ラ ー や ハ ン ド ジ ェ ス チ ャ ー の use の violations い も 検 line for を っ た.

项目成果

生理的反応を取り入れた没入型仮想環境におけるデザイン生成システムの提案－Breathing Design System の開発と活用事例－

在融入生理反应的沉浸式虚拟环境中设计生成系统的提案 - 呼吸设计系统的开发和使用示例 -

• 发表时间: 2022
• 期刊: 第45回 情報・システム・利用・技術 シンポジウム論文集（日本建築学会）
• 作者: H. Takeuchi;R. Homma;Y. Onodera;A. Noda;S. Sameshima;Y. Arai and F. Nishimura;楊寧;近藤康子;近藤康子;近藤康子;近藤康子;猪股圭佑;北本英里子，山田悟史
• 通讯作者: 北本英里子，山田悟史

ダンスする建築（ユーザーインタラクティブに変化する空間）

跳舞的建筑（与用户交互变化的空间）

• 发表时间: 2023
• 作者: H. Takeuchi;R. Homma;Y. Onodera;A. Noda;S. Sameshima;Y. Arai and F. Nishimura;楊寧;近藤康子;近藤康子;近藤康子;近藤康子;猪股圭佑;北本英里子，山田悟史;北本英里子
• 通讯作者: 北本英里子