Improvement of layout analysis and character area recognition for extracting digital text from modern books

本研究は主に近代の書籍を対象としたデジタルテキスト化の精度向上を目標として、レイアウト解析および文字領域認識の精度向上を目的としている。特に近代書籍特有の原本の悪さやフォントの違い、また特有のレイアウト構造に起因する既存のOCRシステムの文字領域に関する誤認識に対し、その文字領域の周辺情報を用いて自動的に訂正することにより、それを用いて再度OCRを行うことによる精度向上を目的としている。令和3年度はこれまで開発を行なってきた領域認識誤り訂正システムをベースにして、引き続き領域認識誤り訂正の訂正アルゴリズムの検討を行い、周辺の文字領域の大きさ・位置情報などを用いて自動的に行うシステムの研究開発を行った。アルゴリズムとしては、既存のOCRシステムから出力されたXML形式のOCR結果に対し、各文字領域の認識誤り判定、周辺の文字領域のサイズ情報に基づく修正後の文字領域位置・サイズの推定を順に処理を行なうアルゴリズムとなっている。用いる情報としては、文字誤りは文中の少数の文字で起こると仮定し、主に同一文中にある文字の文字領域のサイズや位置情報を用いて誤り判定、位置・サイズ情報の推定を行う。また、特に文字サイズは漢字・ひらがな・カタカナといった文字種によって違いがあるため、文字種ごとに異なる誤り判定基準、推定方法を用いて処理を行なっている。これらのアルゴリズムについて実際に実装を行い、作成済のテストデータを用いて実験を行った。

本研究は主に近代の書籍を対象としたデジタルテキスト化の精度向上を目標として、レイアウト解析および文字領域認識の精度向上を目的としている。特に近代書籍特有の原本の悪さやフォントの違い、また特有のレイアウト構造に起因する既存のOCRシステムの文字領域に関する誤認識に対し、その文字領域の周辺情報を用いて自動的に訂正することにより、それを用いて再度OCRを行うことによる精度向上を目的としている。令和3年度はこれまで開発を行なってきた領域認識誤り訂正システムをベースにして、引き続き領域認識誤り訂正の訂正アルゴリズムの検討を行い、周辺の文字領域の大きさ・位置情報などを用いて自動的に行うシステムの研究開発を行った。アルゴリズムとしては、既存のOCRシステムから出力されたXML形式のOCR結果に対し、各文字領域の認識誤り判定、周辺の文字領域のサイズ情報に基づく修正後の文字領域位置・サイズの推定を順に処理を行なうアルゴリズムとなっている。用いる情報としては、文字誤りは文中の少数の文字で起こると仮定し、主に同一文中にある文字の文字領域のサイズや位置情報を用いて誤り判定、位置・サイズ情報の推定を行う。また、特に文字サイズは漢字・ひらがな・カタカナといった文字種によって違いがあるため、文字種ごとに異なる誤り判定基準、推定方法を用いて処理を行なっている。これらのアルゴリズムについて実際に実装を行い、作成済のテストデータを用いて実験を行った。