ディジタルメディアの認知障害いついての研究

数字媒体导致的认知障碍研究

• 批准号: 07680429
• 负责人: 田村 博
• 金额: $ 1.41万
• 依托单位: Kyoto Institute of Technology
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for General Scientific Research (C)
• 财政年份: 1995
• 资助国家: 日本
• 起止时间: 1995 至 无数据
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-07680429/
• 关键词: ディジタルメディア; マルチメディア; アルチモーダル; 話者映像効果; ISDN映像; MPEG; MJPEG

映像と音声を統合的に利用するマルチモーダル環境において,音声理解における話者映像の提示効果について着目し,その評価方法を検討した.本研究ではまず,通常映像とISDN映像について,話者映像効果を比較分析し,ISDN映像では,話者映像効果が低いこと,特に唇音においてその傾向が顕著であること,また多数の視聴者の中にISDN映像では話者映像効果の認められないものが30%程度あることを報告した.通信環境におけるISDNと共に,蓄積メディアにおいては JPEG, MPEGなどデジタル圧縮・再生技術が広く活用されるものと期待されており,これらの圧縮・再生映像についての比較評価が求められている,JPEGとは,静止画に利用される世界的に標準のアルゴリズムである.このJPEGで圧縮した映像を,実時間再生(30フレーム/sec. )するMJPEG(Motion JPEG)が実用化されている.本研究ではMJPEGで再生した話者映像の提示効果についての実験をおこない,MJPEG映像では話者映像効果がISDNと異なっており,唇音に映像の効果が顕著であるが,非唇音では低いことが明らかになった.MJPEGの話者映像では,実時間再生が保証されているので,画質が多少劣化しても,動きが検知できる程度であれば,動的効果は十分に発揮される,それに対して画質は圧縮率と共に劣化するので,静的効果は低下すると理解される.これらの結果はテレビ会議や映像エンタテイメント等マルチメディアの開発に重要な知見である.

This paper discusses the use of sound and image integration in the context of sound and image understanding, and the presentation of speaker images and their evaluation methods. This study compares and analyzes the effects of voice mapping between ISDN mapping and general mapping. ISDN mapping has a tendency to lower the effects of voice mapping than ISDN mapping. Communication environment ISDN and network, storage media, JPEG, MPEG, digital compression and reproduction technology are expected to be used in the future, and the compression and reproduction technology is expected to be used in the future. This JPEG image is compressed, and the reproduction time is 30 minutes/sec. MJPEG (Motion JPEG) is used in many applications. In this study, the effect of MJPEG reproduction on the speaker image is discussed. The effect of MJPEG reproduction on the speaker image is discussed. The effect of MJPEG reproduction on the speaker image is discussed. The effect of MJPEG reproduction on the speaker image is discussed. The effect of MJPEG reproduction on the speaker image is discussed. For example, the image quality is reduced and the static effect is reduced. The results of the meeting are as follows: The meeting is as follows:

项目成果

呉 俊: "通常映像およびISDN映像の話者映像効果の比較研究" 電子情報通信学会論文誌. J79-D-II. (1996)

吴军：“普通视频和ISDN视频的扬声器图像效果的比较研究”电子、信息和通信工程师学会学报J79-D-II（1996）。

呉 俊: "顔映像の音声理解促進効果" 第11回ヒューマン・インタフェース・シンポジウム論文集. 11. 167-172 (1995)

吴军：“面部图像对促进语音理解的影响”第十一届人机界面研讨会论文集。11. 167-172 (1995)。

Hiroshi TAMURA: "Verbal and non-verbal behaviors in face and TV conferences" Advances in Psychology. 113. 361-374 (1996)

Hiroshi TAMURA：“面部和电视会议中的言语和非言语行为”心理学进展。

YuSHIBUYA: "A media supported playland and interactions among players" Advances in Human Factors/Ergonomics. 20A. 101-106 (1995)

YuSHIBUYA：“媒体支持游乐场和玩家之间的互动”人为因素/人体工程学的进展。

Hiroshi TAMURA: "Quantitative evaluation of media quality by method of competitive priority" Advances in Human Factors/Ergonomics. 20B. 305-310 (1995)

Hiroshi TAMURA：“通过竞争优先级方法对媒体质量进行定量评估”人为因素/人体工程学进展。