本文にスキップ
AI News HubLIVE
サイト内リライト2 分で読了

GB-LSR: 単一のグローバルバンド幅を持つ高速局所スペクトル画像表現による連続再構成と超解像

記事の要約

GB-LSRは、固定グリッドの局所スペクトル表現を用いて連続画像再構成を行う手法です。単一の訓練可能なグローバルバンド幅をすべてのパッチで共有することで、モデルを簡素化し計算コストを削減します。標準的なネイティブ再構成ベンチマークでは、LIIF、LTE、WIREなどの手法と比較してPSNRが2.8-3.6 dB向上し、推論コストは最も遅いベースラインの4分の1です。超解像タスクでは、4倍スケールでLIIF-RDNの1.44倍、LTE-SwinIRの3.25倍の速度を実現しています。また、局所アンサンブル平均を省略したバリアントは、PSNRの低下を無視できるレベルに抑えつつ、1.77倍の高速化と35%のメモリ削減を達成しています。

ソースarXiv Computer Vision著者: Max Shad, Naeem Khoshnevis
GB-LSR: 単一のグローバルバンド幅を持つ高速局所スペクトル画像表現による連続再構成と超解像
誤りを報告

訂正窓口はまだ利用できません。記事情報をコピーして保存できます。

訂正案内
本文へ

GB-LSR(Global-Bandwidth Local Spectral Representation)は、固定グリッドの局所スペクトル表現を用いた連続画像再構成手法です。画像領域を重複しない正方形パッチに分割し、各パッチは共有の畳み込みエンコーダ特徴から予測された打ち切りフーリエ基底の係数を持ちます。重要な革新は、単一の訓練可能なスカラーバンド幅をすべてのパッチと画像間でグローバルに共有することです。これにより、任意の連続座標での再構成は固定サイズの基底収縮となり、計算コストは画像サイズに依存しません。この特性により、GB-LSRは高解像度画像の処理において特に効率的です。

著者らは、訓練可能なグローバルスカラー(メイン)、固定グローバルスカラー、パッチごとのバンド幅フィールドの3つのバンド幅処理バリアントを研究しました。Kodak、Set14、Urban100データセットを用いた標準的なネイティブ再構成ベンチマークでは、メインバリアントが同等の計算量のLIIF、LTE、WIREの再実装と比較してPSNRで2.8-3.6 dB向上し、LPIPSで0.11-0.15改善しました。推論コストは最も遅いベースラインの約4分の1です。実験により、単一のグローバルスカラーで経験的に十分であり、パッチ適応型のバンド幅代替案は閉形式の局所性診断やエンドツーエンドのアブレーションにおいて改善をもたらさないことが示されました。これは、グローバル共有バンド幅の簡潔さと有効性を裏付けています。

超解像タスクでは、GB-LSRは任意スケール超解像(ASR)拡張として、標準的なSRプロトコルの下で競争力のあるPSNR-Yを達成し、4倍スケールでLIIF-RDNの1.44倍、LTE-SwinIRの3.25倍の速度で動作します。同じ拡張内で、4隅の局所アンサンブル平均を省略したバリアントは、1.77倍の高速化と35%のピークメモリ削減を達成し、PSNRの変化は無視できます。さらに、RDNエンコーダを64チャネルから96チャネルに拡張すると、1.58倍の高速化と31%のメモリ削減とともに、わずかなPSNR向上が見られます。

ネイティブ再構成の主張はマッチドバジェットの償却プロトコルに限定され、ASRの主張は別の標準的なSRプロトコルに限定されます。これらの範囲設定により、評価の公平性と再現性が確保されています。GB-LSRはコンピュータビジョン、グラフィックス、機械学習の分野で応用が期待され、特に高効率・高品質な画像再構成と超解像が求められるシナリオで有用です。

要点と分析を開く

記事インテリジェンス

エンジニア上級

要点

  • GB-LSRは単一の訓練可能なグローバルバンド幅を全パッチで共有し、モデルを簡略化して計算量を削減。
  • ネイティブ再構成でPSNRが2.8-3.6 dB向上し、推論コストは最遅ベースラインの1/4。
  • 超解像では4倍スケールでLIIF-RDNの1.44倍、LTE-SwinIRの3.25倍の速度。
  • 局所アンサンブル平均を省略したバリアントで1.77倍高速化、メモリ35%削減、PSNR損失は無視可能。

要点と分析は自動生成され、誤りを含む場合があります。原典をご確認ください。