Research on Defense Against Propaganda Strategies by Malicious Cut-out Editing Process

公式に公開される動画において，悪用される恐れのある箇所およびその前後関係を示す箇所を自動的に識別して，意図的な切り取り処理の有無を検知する枠組みを本研究では対象として，関連技術のサーベイを行った．国内だけでなくグローバルな研究とするために，対象とする言語を英語に絞り，公式動画して首脳国家の公式動画を扱うこととして，誰でもアクセス可能で公式に公開されている動画データセットを取得した．次に，それらの動画の発言箇所から文字起こしを行い，その文章に対して形態素解析を実行して，単語レベルで分割したデータセットを作成するための環境を構築した．文章の意味を解析するために適した手法に関して公開ライブラリやソフトウエアをいくつか検証してきた．動画中の発言に応じて，いくつかのセグメントに分割させて，各セグメントに対して前後関係の初期解析を実施し，発言内容が本来の意味から逸脱していないかを主観評価実験により手動でも検証を行った．今後は，この処理を自動化させるための手法を考案する予定である．動画中の映像解析とフレーム間で生じる整合性についても，情報ハイディング技術とフォレンジクス技術を拡張させる形で適用させるアプローチについても並列して行った．本研究で想定している解析手法を意図的に誤らせるための敵対的攻撃に対する対策を考慮して，悪意のある改ざんやノイズ付加の有無を調べる手法を考案した．深層学習技術を用いて，人工的に動画の発言内容の音声を変更して，それに応じて映像箇所を改変する形で作成されるフェイクコンテンツへの対策を検討し，その解決策を考案した．

公式に公開される動画において，悪用される恐れのある箇所およびその前後関係を示す箇所を自動的に識別して，意図的な切り取り処理の有無を検知する枠組みを本研究では対象として，関連技術のサーベイを行った．国内だけでなくグローバルな研究とするために，対象とする言語を英語に絞り，公式動画して首脳国家の公式動画を扱うこととして，誰でもアクセス可能で公式に公開されている動画データセットを取得した．次に，それらの動画の発言箇所から文字起こしを行い，その文章に対して形態素解析を実行して，単語レベルで分割したデータセットを作成するための環境を構築した．文章の意味を解析するために適した手法に関して公開ライブラリやソフトウエアをいくつか検証してきた．動画中の発言に応じて，いくつかのセグメントに分割させて，各セグメントに対して前後関係の初期解析を実施し，発言内容が本来の意味から逸脱していないかを主観評価実験により手動でも検証を行った．今後は，この処理を自動化させるための手法を考案する予定である．動画中の映像解析とフレーム間で生じる整合性についても，情報ハイディング技術とフォレンジクス技術を拡張させる形で適用させるアプローチについても並列して行った．本研究で想定している解析手法を意図的に誤らせるための敵対的攻撃に対する対策を考慮して，悪意のある改ざんやノイズ付加の有無を調べる手法を考案した．深層学習技術を用いて，人工的に動画の発言内容の音声を変更して，それに応じて映像箇所を改変する形で作成されるフェイクコンテンツへの対策を検討し，その解決策を考案した．