遠隔実習教育のためのマルチメディア教材作成利用技術に関する研究

远程培训教育多媒体教材制作与使用技术研究

基本信息

批准号：
16700569
负责人：
市村哲
金额：
$ 1.47万
依托单位：
Tokyo University of Technology
依托单位国家：
日本
项目类别：
Grant-in-Aid for Young Scientists (B)
财政年份：
2004
资助国家：
日本
起止时间：
2004 至 2006
项目状态：
已结题

项目摘要

平成18年度においては,サーモ情報を用いたマルチメディアコンテンツ評価に関する研究,および,視線情報を用いたマルチメディアコンテンツ作成に関する研究を実施した.人間の心理的な情報は外部から直接観測することができないが,外界から情報を受容することに伴って生じる生体反応は観測が可能であるものが多い.本研究では,サーモカメラ,および,視線計測装置を利用してマルチメディアコンテンツに対する人の反応を測定し,この測定結果をコンテンツ作成にフィードバックできるシステムを構築した.1.非接触型であるサーモカメラ(アビオニクス製サーモカメラ)を用いた情動検出システムを構築した.鼻部には上動脈吻合血管が皮膚直下に多数存在するため,情動ストレスに起因する血流量の変化が皮膚温度に顕著に現れることが知られている.予備実験として情動を鼻部温度から検出できるか確認するために,被験者に聴覚刺激によって動揺を与え,その時の鼻部温度を測定した.この実験の結果,動揺を与えた直後に温度低下が確認されたことから,これを利用した顔面皮膚温の変化による情動検出システムを構築した.特に,本システムでは,画像認識により鼻部部分をリアルタイムに追跡し,計測中に被験者が動いても温度を測定できるように実装したことが特徴となっている.また,顔面皮膚温度から情動を検出してユーザの嗜好を検出し,その人の好みのアイテムを推薦するシステムを試作した.成果を学会にて報告した.2.眼球運動を利用した映像編集システムを構築した.本システムは,固定ハイビジョンカメラで撮影した映像を,眼球測定器(Nac製視線計測装置)を装着した状態で視聴するだけで,あたかもカメラマンが撮影したようなカメラワークの加わった映像へと自動的に編集するシステムである.撮影は固定カメラを用いるため,カメラワークなどの撮影作業にとらわれることがない.撮影した映像はハイビジョン映像サイズで保存されるが,その映像の中から注視領域を切り出すことにより,カメラワークの加わった映像を作成している.切り出した領域を移動させることで,パン・チルト,拡大率を変化させることでズーミングの効果を仮想的に作り出した.視線の動きはつねに小刻み震えているため,5フレーム分の平均値をとり,その値を適用することで震えを低減させた.また,一定時間,視線が同じ場所に停滞している場合には,ズームを行うことにした.成果を学会にて報告した.

2006年，使用热信息信息和使用凝视信息进行多媒体信息进行了多媒体内容评估的研究。尽管无法直接从外部观察到人类的心理信息，但是可以观察到从外界接收信息时发生的许多生物反应。在这项研究中，建立了一个系统，该系统使用热摄像机和凝视测量设备来衡量人类对多媒体含量的响应，并将测量结果馈送到含量创建中。1。使用非接触式热摄像机（Avionics Thermo Camera）构建了情绪检测系统。由于鼻子正下方的皮肤正下方有许多上等动脉吻合的血管，因此在皮肤温度下，由于情绪压力引起的血液流动变化。众所周知，作为一个初步实验，为了确认是否可以从鼻子温度中检测到情感，受试者被听觉刺激动摇并在当时测量鼻子温度。该实验的结果是，在应用搅动后立即确认温度下降，并使用此方法构建了情绪检测系统。特别是，该系统的特征是使用图像识别实时跟踪鼻子面积，以便即使受试者在测量过程中移动也可以测量温度。此外，创建了一个原型系统来检测面部皮肤温度的影响，以检测用户偏好，并推荐该人喜欢的项目。结果在社会上报告了。 2。构建了使用眼动的视频编辑系统。该系统使用使用固定高清摄像头拍摄的图像来测量眼球测量仪器（由NAC制造）。该系统会自动编辑摄像头（凝视测量设备）时仅拍摄的摄影作品的图像，并将其自动编辑为带有摄影师的图像，就好像它们是由摄影师拍摄的一样。因为拍摄是固定的相机，所以您不受相机工作或其他摄影任务的约束。捕获的图像存储在高清视频尺寸中，但是通过从视频中切出凝视区域，可以创建带有摄影师的图像。通过移动切口区域，PAN，倾斜和放大率，可以实际创建缩放的效果。由于凝视的运动总是发抖，因此采取了五帧的平均值，并通过应用这些值来降低颤抖。另外，如果凝视在一定时间段内停滞在同一位置，则进行缩放。我们向社会报告了结果。