ファインチューニングを用いた筆跡鑑定手法

本研究で究明せんとする対象は、大規模画像データによる事前学習によって、筆跡サンプルの少ない筆跡者の判定精度向上をいかに達成するかである。前年度は、過学習を避けるための方策として、特定の距離関数を用いた対象ドメインのデータ外類似データを用いた事前学習の有効性を検証した。対象となる筆跡 データの分類に有効なネットワークの学習にとって、有効に事前学習を可能にするためのデータ選択方法について分析した。具体的にはImageNetやXceptionなど の大規模画像データセットと対象筆跡データの類似度を様々な尺度を用いて計算し、事前学習したことによる精度向上を検証した。本年度は、パブリックデータによる検証から一歩進んで、ドイツバッハ資料財団でのみアクセスできる多様な筆跡データを用いた有効性検証をおこな予定であった。コロナ下の移動制限の制約を受けて、実験予定を変更し、主にファインチューニング結果の説明可能性に関する検討を行った。所々の画像データベース間距離尺度によって得られた近傍データを用いたファインチューニングの結果を解釈し、ドメインエキスパートに説明するための手法を検討した。主に身体性と筆跡の関係性に着目し、人体の類型を行動中心となる腰椎に着目して分析を行った。また深層学習の説明可能性を向上させるための種々の手法を比較検討し、その中で特に、敵対的学習を援用した反実仮想説明の実効性が際立っているという知見を得ることができた。

本研究で究明せんとする対象は、大規模画像データによる事前学習によって、筆跡サンプルの少ない筆跡者の判定精度向上をいかに達成するかである。前年度は、過学習を避けるための方策として、特定の距離関数を用いた対象ドメインのデータ外類似データを用いた事前学習の有効性を検証した。対象となる筆跡 データの分類に有効なネットワークの学習にとって、有効に事前学習を可能にするためのデータ選択方法について分析した。具体的にはImageNetやXceptionなど の大規模画像データセットと対象筆跡データの類似度を様々な尺度を用いて計算し、事前学習したことによる精度向上を検証した。本年度は、パブリックデータによる検証から一歩進んで、ドイツバッハ資料財団でのみアクセスできる多様な筆跡データを用いた有効性検証をおこな予定であった。コロナ下の移動制限の制約を受けて、実験予定を変更し、主にファインチューニング結果の説明可能性に関する検討を行った。所々の画像データベース間距離尺度によって得られた近傍データを用いたファインチューニングの結果を解釈し、ドメインエキスパートに説明するための手法を検討した。主に身体性と筆跡の関係性に着目し、人体の類型を行動中心となる腰椎に着目して分析を行った。また深層学習の説明可能性を向上させるための種々の手法を比較検討し、その中で特に、敵対的学習を援用した反実仮想説明の実効性が際立っているという知見を得ることができた。