本文にスキップ
AI News HubLIVE
サイト内リライト2 分で読了

エンドツーエンドのテキスト行検出と順序付け

記事の要約

本論文では、テキスト行検出と読書順序の予測を単一の画像から系列へのタスクとして統合するエンドツーエンドモデルOrli(Ordered Regression of Lines)を紹介する。10種類の文字体系にわたる196,691ページで訓練されたOrliは、データセット固有の訓練なしにcBAD行検出で最新技術をわずかに超え、複数の読書順序ベンチマークでゼロショットでほぼ完全なカバレッジと順序付けを達成し、限定的な微調整で専門的なドメイン外のレイアウトに適応する。コードと重みはオープンソースで公開されている。

ソースarXiv Computer Vision著者: Benjamin Kiessling (ALMAnaCH)
エンドツーエンドのテキスト行検出と順序付け
誤りを報告

訂正窓口はまだ利用できません。記事情報をコピーして保存できます。

訂正案内
本文へ

歴史的文書のテキスト認識パイプラインでは、通常、レイアウト分析を行検出と独立した読書順序ステップに分解し、後者は手書きの幾何学的ヒューリスティックで処理されることが多く、傍注、マルチカラム、表、およびソース固有の編集規則に苦戦していました。この課題に対処するため、研究者らはOrli(Ordered Regression of Lines)を提案しました。これは、2つのサブタスクを、ページ画像から読書順序で直接テキスト行のベースラインを自己回帰的に生成する単一の画像系列問題として扱うエンドツーエンドモデルです。

Orliのベースラインは、弦フレームパラメータ化で表現され、垂直オフセットによって局所形状をエンコードします。この表現は簡潔でありながら、曲線や傾斜のあるテキスト行にも自然に対応できます。反復改良ヘッドがオフセットを段階的に調整し、局所視覚リファイナが画像特徴に基づいて曲線をさらに最適化します。この設計により、行の位置、方向、範囲を正確に捉え、複雑なレイアウトにも適応できます。モデルは、196,691ページからなる10種類の文字体系(ラテン、キリル、アラビア、中国語など)の異種コーパスで訓練され、幅広い適用可能性が確保されています。

実験結果によると、データセット固有の訓練なしで、OrliはcBAD行検出ベンチマークで以前報告された最新技術をわずかに上回りました。さらに印象的なのは、複数の読書順序ベンチマークでゼロショットでほぼ完全なカバレッジと順序付けを達成したことです。これは、Orliが特定のデータセットのパターンを記憶するのではなく、汎用的な読書順序の知識を学習したことを示しています。また、限定的な微調整により、学術的な組版や写本などの専門的なドメイン外のレイアウトにも効果的に適応でき、強力な汎化能力を示しました。

この研究のコードとモデル重みはMITライセンスの下で公開されており、研究者や開発者は自由に利用・拡張できます。デジタル人文科学の研究者にとって、Orliは大規模な歴史文書コレクションを自動処理し、テキスト抽出の効率を大幅に向上させることができます。さらに、オープンソースであるため、コミュニティが特定のニーズに合わせてカスタマイズすることが可能で、この分野の発展をさらに促進します。Orliの提案は、歴史文書の自動処理に効率的な新しいソリューションを提供し、デジタル人文科学やアーカイブのデジタル化におけるテキスト認識のワークフローを簡素化し、手動設計ルールへの依存を減らすことが期待されます。

要点と分析を開く

記事インテリジェンス

エンジニア上級

要点

  • Orliは行検出と読書順序を単一の画像系列問題として扱う
  • 弦フレームパラメータ化を使用し、反復改良ヘッドと局所視覚リファイナで曲線を生成
  • 10種類の文字体系の196,691ページで訓練され、複数のベンチマークでゼロショットでSOTAを達成
  • オープンソースのコードと重みで専門的なレイアウトに適応可能

要点と分析は自動生成され、誤りを含む場合があります。原典をご確認ください。