Acquisition, Retrieval and Synthesis of Information Semantics by Machine Learning

本研究は，短文テキスト，地図，画像・映像からの「意味」の抽出と，抽出された「意味」と類似する意味をもつ情報の検索・生成を行う仕組みについて研究を行うものである．初年度の2022年度では，短文テキストとして俳句，短歌，惹句（キャッチコピー），地図データとしてOpenStreetMapデータや一般の地図・略地図データ，画像・映像データとして絵画画像および映画データを対象として，これらのデータを機械学習して，「意味」を獲得できるような機械学習法の開発に取り組んだ．さらに，獲得された情報の意味を用いて，意味類似する情報を検索したり新規生成できるような仕組みの開発に着手した．(1) 機械学習による短文テキストの意味類似検索と生成の研究を行った．俳句・短歌，キャッチコピー（惹句）といった短文テキストを対象として，機械学習にもとづく「文」の意味の計算法を開発した．この意味の計算法に基づき，類似の意味を有する文の検索が可能となった．(2) 機械学習による地物の意味類似検索と生成の研究を行った．地図における情報の基本単位は，建物，道路，河川，街区などの「地物」であり，地物の「意味」はその地物本体の性質とともに，その地物の周辺にある地物集合から規定されることに留意して，地物の意味の分散表現法を新たに開発した．さらに，地物の意味の分散表現を言語化する方式も新たに開発した．(3) 機械学習による画像・映像の意味類似検索と生成の研究を行った．敵対的生成ネットワーク（GAN）を用いて，制作時期の異なる絵画画像群を訓練データとして機械学習し，制作時期の異なる絵画画像を予測・自動生成できる機能を開発した．さらに，機械学習にもとづく映画の映像文法の自動獲得の研究を行い成果を得た．研究成果を国内学会にて発表した論文に対して学生プレゼンテーション賞などを受賞した．

本研究は，短文テキスト，地図，画像・映像からの「意味」の抽出と，抽出された「意味」と類似する意味をもつ情報の検索・生成を行う仕組みについて研究を行うものである．初年度の2022年度では，短文テキストとして俳句，短歌，惹句（キャッチコピー），地図データとしてOpenStreetMapデータや一般の地図・略地図データ，画像・映像データとして絵画画像および映画データを対象として，これらのデータを機械学習して，「意味」を獲得できるような機械学習法の開発に取り組んだ．さらに，獲得された情報の意味を用いて，意味類似する情報を検索したり新規生成できるような仕組みの開発に着手した．(1) 機械学習による短文テキストの意味類似検索と生成の研究を行った．俳句・短歌，キャッチコピー（惹句）といった短文テキストを対象として，機械学習にもとづく「文」の意味の計算法を開発した．この意味の計算法に基づき，類似の意味を有する文の検索が可能となった．(2) 機械学習による地物の意味類似検索と生成の研究を行った．地図における情報の基本単位は，建物，道路，河川，街区などの「地物」であり，地物の「意味」はその地物本体の性質とともに，その地物の周辺にある地物集合から規定されることに留意して，地物の意味の分散表現法を新たに開発した．さらに，地物の意味の分散表現を言語化する方式も新たに開発した．(3) 機械学習による画像・映像の意味類似検索と生成の研究を行った．敵対的生成ネットワーク（GAN）を用いて，制作時期の異なる絵画画像群を訓練データとして機械学習し，制作時期の異なる絵画画像を予測・自動生成できる機能を開発した．さらに，機械学習にもとづく映画の映像文法の自動獲得の研究を行い成果を得た．研究成果を国内学会にて発表した論文に対して学生プレゼンテーション賞などを受賞した．