顔画像の知的符号化による高次コミュニケーションの基礎研究

利用面部图像智能编码的高阶通信基础研究

• 批准号: 01633002
• 负责人: 原島 博
• 金额: $ 2.24万
• 依托单位: The University of Tokyo
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Scientific Research on Priority Areas
• 财政年份: 1989
• 资助国家: 日本
• 起止时间: 1989 至 无数据
• 项目状态: 已结题
• 来源: https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-01633002/
• 关键词: 知的通信; 知的画像符号化; 構造モデル; 顔面表情の分析合成; メディア変換

本研究は、知的画像符号化の開発を通じて、将来の知的通信や知的マンマシンインタフェースの基盤となる高次コミュニケーション技術を確立することを目的としている。本年度は、人物顔画像を対象とした知的画像符号化のキーテクノロジーである次の項目について検討した。1.動画像からの3次元構造情報の自動抽出に関する検討知的画像符号化において汎用的な符号器を実現するには、予めモデルを用意するのではなく、動画像そのものから3次元構造情報が自動的に抽出できることが望ましい。ここでは、次の2通りの手法を検討した。(1)単眼動画像からの3次元構造・運動推定(2)ステレオ動画像からの3次元構造・運動推定2.顔画像の表情パラメータの抽出ならびに表情合成の検討顔画像の知的符号化方式における顔面表情の分析と合成手法として、次の2通りのアプローチを検討した。(1)FACSに基づく表情分析・合成手法の検討(2)中割りに基づく表情分析・合成手法の検討3.音声・テキスト情報からの口唇画像の合成に関する検討知的画像符号化におけるメディア変換の一例として、音声およびテキスト情報から受信側において口唇画像を合成する手法を開発した。さらに、この手法と2.で述べた顔面表情の合成法を組み合わせることにより、よりリアルな顔画像を合成することを試みた。

This study aims to establish the communication and communication technologies of image symbolization of knowledge in the future. This year, the portrait of the person is symbolized and discussed. 1. Automatic extraction of 3D structure information from animated images is expected to occur in the general use of symbolizers for image symbolization. The second time, the second time, the second time. (1)3-D structure and motion estimation of single eye movement image (2) 3-D structure and motion estimation of animation image (2) 3-D structure and motion estimation of facial expression of facial image (2) 3-D structure and motion estimation of facial image (2) 3-D structure and motion estimation of facial image ( (1) Basic expression analysis and synthesis method for FACS (2) Basic expression analysis and synthesis method for FACS (3) Symbolization of images discussed in connection with synthesis of lip images of sound and voice information (1) Introduction of method for synthesis of lip images of sound and voice information (2) Introduction of method for synthesis of lip images of sound and voice information (3) Introduction of method for synthesis of lip images of sound and voice information (3) Introduction of method for synthesis of lip images of sound and voice information (3) Introduction of method for synthesis of lip images of sound and voice information (3) Introduction of method for synthesis of lip images of sound and voice information (4) Introduction of method for synthesis of lip images of sound and voice information (3) Introduction of method for synthesis of lip images of sound and voice information (4) Introduction of method for synthesis of lip images of sound and voice information (4) Introduction of method for synthesis of lip images of sound and voice information (5) 2. The composition of facial expressions

项目成果

Aizawa,K.: "Analysis and synthesis of facial images in a model-based coding system" Znd International Workshop on 64kbit/s Coding of Moving Video. (1989)

Aizawa,K.：“基于模型的编码系统中面部图像的分析和合成”Znd 64kbit/s 移动视频编码国际研讨会。

Harashima,H.: "Model-based analysis synthesis coding of videotelephone images-Conception and basic study of intelligent image coding-" The Trans.of IEICE. E72. 452-459 (1989)

Harashima，H.：“基于模型的可视电话图像分析合成编码——智能图像编码的概念和基础研究——”IEICE Trans.。

相沢清晴: "構造モデルを用いた画像の分析合成符号化方式" 電子情報通信学会論文誌. J72ーBー1. 200-207 (1989)

Kiyoharu Aizawa：“使用结构模型的图像分析、合成和编码方法”，电子、信息和通信工程师学会汇刊 J72-B-1 (1989)。

Morishima,S.: "An intelligent facial image coding driver by speech and phoneme" ICASSP'89. 3. 1795-1798 (1989)

Morishima,S.：“通过语音和音素进行智能面部图像编码驱动程序”ICASSP89。

Aizawa,K.: "Model-based analysis synthesis image coding system for a person's face." Signal Processing:IMAGE COMMUNICATION. 1. 139-152 (1989)

Aizawa,K.：“基于模型的人脸分析合成图像编码系统。”