本文にスキップ
AI News HubLIVE
サイト内リライト2 分で読了

Oxygen-TryOn:あらゆるアイテムのバーチャル試着に対応するファッション・ネイティブ基盤モデル

記事の要約

Oxygen-TryOnは、汎用画像編集ツールを流用するのではなく、試着専用に設計された統一基盤モデルです。専用のデータエンジンと試着特化のトレーニングを活用し、多様なファッションカテゴリにわたって、被写体がアイテムを着用したフォトリアルな画像を生成します。従来のシングルカテゴリや衣服中心のアプローチとは異なり、Oxygen-TryOnは全身・半身ビュー、可変数の参照、自由なマルチアイテム合成をサポートし、被写体のアイデンティティとアイテムの外観を忠実に保持します。3段階トレーニング(CPT、SFT、RL)を採用し、RL段階では内部試着報酬モデルと専用ルールベース汎用モデルを組み合わせたハイブリッド報酬を使用します。公開ベンチマークと内部ベンチで、シングルアイテム試着で最先端、マルチアイテムでリーダーとなり、主要なプロプライエタリシステムやオープンソースモデルに匹敵または凌駕する性能を示しました。

ソースarXiv Computer Vision著者: Yong Liu, Xiaolong Fu, Zihang Xu, Wen Xue, Xueheng Li, Lin Song, Yuan Zhang, Chuyang Zhao, Haoyang Huang, Nan Duan, Yipeng Sun, Yan Li, Simiu Gu
Oxygen-TryOn:あらゆるアイテムのバーチャル試着に対応するファッション・ネイティブ基盤モデル
誤りを報告

訂正窓口はまだ利用できません。記事情報をコピーして保存できます。

訂正案内
本文へ

Oxygen-TryOnは、あらゆるアイテムに対応するバーチャル試着のための新しい基盤モデルであり、従来の試着システムが単一カテゴリーや衣服に限定されていた限界を打ち破ります。汎用画像編集ツールを流用した手法とは異なり、Oxygen-TryOnはデータからトレーニングまで試着タスクに特化して構築されており、まさに「ファッション・ネイティブ」です。このモデルの中核となる革新は、「マルチ参照理解駆動型生成」フレームワークです。1つ以上の参照アイテム(製品写真や日常の着用写真)と1枚の対象人物画像が与えられると、Oxygen-TryOnは人物がそれらのアイテムを着用したフォトリアルな画像を合成します。全身・半身ビュー、可変数の参照、複数アイテムの自由な組み合わせなど、さまざまなシナリオに対応し、人物のアイデンティティとアイテムの外観を忠実に保持します。

この強力な能力を実現するために、研究チームは高品質な試着データを大規模に収集・生成・アノテーション・フィルタリングする専用データエンジンを構築しました。トレーニングは3段階で行われます:継続事前学習(CPT)、教師ありファインチューニング(SFT)、強化学習(RL)。RL段階では、内部試着報酬モデルと専用ルールベース汎用モデルを組み合わせたハイブリッド報酬モデルを採用し、細粒度の一貫性と命令レベルの品質を共同で監督します。これにより、基本的な試着に加えて、ポーズ変更などの一般的な編集指示にも従うことが可能です。

公開ベンチマークと内部構築のOxygen-TryOn Benchにおいて、本モデルはシングルアイテム試着で最先端の一貫性とリアリズムを達成し、マルチアイテム試着でリーダーとなりました。Nano Banana Pro、GPT-Image-2、Seedream5 Liteなどの主要なプロプライエタリシステムや、FLUX.2などのオープンソースモデルと比較しても、匹敵または凌駕する性能を示しています。Oxygen-TryOnはバーチャル試着の新たなベンチマークを打ち立て、その汎用性と高性能により、電子商取引やファッションデザインなどの分野で重要な役割を果たすことが期待されます。

要点と分析を開く

記事インテリジェンス

エンジニア上級

要点

  • Oxygen-TryOnは、汎用画像編集ツールに頼らず、あらゆるアイテムのバーチャル試着を可能にする初の基盤モデル。
  • 3段階トレーニング(CPT、SFT、RL)とハイブリッド報酬により、高い忠実度と指示追従を実現。
  • 全身・半身のシナリオでマルチ参照・マルチアイテム合成をサポート。
  • GPT-Image-2やFLUX.2など複数のベンチマークで優れた性能を示す。

要点と分析は自動生成され、誤りを含む場合があります。原典をご確認ください。