Management and Integration for Linked Open Multimedia Data

链接的开放多媒体数据的管理和集成

• 批准号: 21H03555
• 负责人: 駒水 孝裕
• 金额: $ 10.98万
• 依托单位: Nagoya University
• 依托单位国家: 日本
• 项目类别: Grant-in-Aid for Scientific Research (B)
• 财政年份: 2021
• 资助国家: 日本
• 起止时间: 2021-04-01 至 2025-03-31
• 项目状态: 未结题
• 来源: https://kaken.nii.ac.jp/en/grant/KAKENHI-PROJECT-21H03555/
• 关键词: データ統合; マルチメディア; テキスト; Linked Open Data; 異種データ; テキスト分類; 画像キャプショニング; グラフデータベース; 不均衡データ; データ分類; 異種データ統合; データ循環

本研究は，様々な種類のデータが公開されており，テキスト，画像，動画などのコンテンツが Web 上に散在している現状に対して，データの統合管理を実現することが大きな目標である．この目標に対して，データ統合と横断的な検索を実現することが目的である．本年度は，データ統合技術に関連して，(!) 意図の読みにくいテキストを効果的に分類し，テキストを効果的に扱う研究，(2) 画像からその内容をデータ化する画像キャプショニングに関する研究を行った．また，異種データの横断的な検索については，最終的に LOD と同系統のグラフデータベースでデータを構成することを見据え，(3) グラフデータベースにおける効率的な問合せに関する研究を行った．具体的には，(1) テキスト分類において，分類の手がかりとなる情報を分類モデルに取り込む方法として，マルチタスク学習の方法論を活用した手法を提案した．この研究は，多クラス分類問題において，クラスごとのインスタンスの出現頻度が大きくばらつく不均衡なデータにおいて特に，最新研究よりも良い性能をしめした．(2) 画像データの内容を自動的に生成する画像キャプショニングにおいて，キャプションの内容が学習データに依存しすぎてしまう問題に対して，キャプションの内容を被写体に応じて調整する枠組みに関する研究を行った．これにより，画像に含まれる情報を様々な粒度で取得可能となり，様々な分析などに応用可能となる．また，画像単体では文脈を持たないキャプションが作成できるが，他の関連する画像と合わせてキャプショニングすることで，共通点などの文脈から画像集合に対するキャプショニング手法を構築した．(3) グラフデータベースにおいて，経路に基づく検索は多く用いられおり，効率的な検索システムがもとめられている．これに対し，適切な索引を構築することで効率的な検索を実現する研究を行った．

This study aims at the realization of the integrated management of data types, such as open data, video, animation, and so on. The goal is to achieve the goal. This year, we will continue to work together to improve the quality of our products. (2) Research on the content of the portrait. (3) Research on the relationship between LOD and system structure, and the relationship between LOD and system structure. Specific,(1) classification, classification of information, selection of methods, application of methods. This research is aimed at the problem of multi-class classification. The frequency of appearance of multi-class classification is large and unbalanced. The latest research is aimed at the problem of multi-class classification. (2)The content of the image is automatically generated. The content of the image is automatically generated. The content of the image is automatically generated. The picture contains information, granularity, acquisition possibilities, analysis possibilities. The common point is that the context of the portrait is maintained, and the method of making the portrait is constructed. (3)In the middle of the road, the base of the road. This is the first time I've ever seen one.

项目成果

固有表現タグおよびPOSタグによる交換制約付きデータ拡張手法

使用命名实体标签和POS标签的具有交换约束的数据扩展方法

• 发表时间: 2023
• 作者: 寺本 優香;駒水 孝裕 ;波多野 賢治
• 通讯作者: 波多野 賢治

PiDP：処方箋に対するGCNの対照学習に基づく錠剤検出

PiDP：基于处方 GCN 对比学习的药丸检测

• 发表时间: 2023
• 作者: グエン チュンタイン;グエン フィレ;川西 康友;駒水 孝裕;井手 一郎
• 通讯作者: 井手 一郎

Action Semantic Alignment for Image Captioning

• DOI: 10.1109/mipr54900.2022.00041
• 发表时间: 2022-08
• 期刊: 2022 IEEE 5th International Conference on Multimedia Information Processing and Retrieval (MIPR)
• 作者: Da Huo;Marc A. Kastner;Takahiro Komamizu;I. Ide

Multi-task Learning-based Text Classification with Subword-Phrase Extraction

• DOI: 10.1145/3568562.3568635
• 发表时间: 2022-12
• 期刊: Proceedings of the 11th International Symposium on Information and Communication Technology
• 作者: Yusuke Kimura;Takahiro Komamizu;K. Hatano

文書分類における効果的なマルチタスク学習のための汎用的サブタスクの要件分析

文档分类中有效多任务学习的通用子任务的需求分析

• 发表时间: 2023
• 作者: 木村 優介;駒水 孝裕 ;波多野 賢治
• 通讯作者: 波多野 賢治