权益分类	功能权益	普通用户	{{item.name}}会员
{{category.name}}	{{benefitItem.name}}

メディア間の相補的関係を用いたクロスメディア画像検索

利用媒体之间的互补关系进行跨媒体图像检索

基本信息

批准号：
17700166
负责人：
井上雅史
金额：
$ 2.24万
依托单位：
National Institute of Informatics
依托单位国家：
日本
项目类别：
Grant-in-Aid for Young Scientists (B)
财政年份：
2005
资助国家：
日本
起止时间：
2005 至 2007
项目状态：
已结题

项目摘要

本研究では,典型的な非テキスト情報である静止画像-特に単語で内容説明(アノテーション)が付けられた画像-をテキストで問い合わせるクロスメディア検索を対象とし,問い合わせと画像とを対応付ける検索モデルを開発している.そこでの中心的課題は検索モデル自動構築の際のデータガ疎であることであり,複数メディアの組み合わせによりデータを補完するプロセスを構築することで,このボトルネックの解消を図る.昨年度に引き続き,検索の対象をこれまでのような単一異言語コレクションと想定するのではなく,複数の言語が混在するようなコレクションに対する検索,すなわちマルチリンガルクロスメディア検索を想定して,検索手法の開発を行った.具体的には以下のとおりである.まず,問い合わせと異なる言語でアノテーションが付加された画像全てを,アノテーションが欠落した画像とみなす.そして,検索対象となる異言語混在画像全てを,画像の視覚的情報のみに基づきクラスタリングする.次に,問い合わせと同一言語でのアノテーションを持つ画像のみを対象にしてテキストに基づいた単言語検索を行う.最後に,既に行った視覚的クラスタリングの結果を元に,異なる言語でアノテーションが付与された画像を,単一言語に基づくランキング結果の中に挿入する.これは,原ランキング上位の画像と同一クラスターに所属する画像を同位置に配置することにより,新たなランキングを作り出すという,再ランキング事後処理である.本年度は,このテキスト情報の不足を補うために画像情報を,前処理及び後処理において使用して,複数情報源を処理の異なる段階で使用する手法にどのようなトピック依存性(問い合わせの主題により性能が変化する)があるか,また視覚的な特徴量の適切な抽出手法やクラスタリングの閾値について検討した.

In this study, the typical non-standard information is still picture-specific information. The central task of this project is to construct the system automatically, and to complete the system. Last year, the target of the search was identified as a single language, a different language, and a different language. Specific. The words are different, and the pictures are different. In addition, the search for images and different speech mixed in the image, the image and the visual information of the basic information. Second, ask the same question, ask the same question. Finally, both the line of vision and the results of the search, different language and the application of the image, a single language and the results of the search are included. The original image of the upper position and the image of the same position are arranged in the same position, and the new image of the upper position and the image of the same position are arranged in the same position, and the new image of the upper position and the image of the same position are arranged in the same position. This year, we will make up for the lack of information on the image information, pre-processing and post-processing, and the use of different stages of processing multiple information sources.