Technology Preview
See-Through: 単一画像のレイヤー分解
静的なアニメイラストを操作可能な2.5Dモデルに変換
静的なアニメイラストを操作可能な2.5Dモデルに自動的に変換するフレームワークを紹介します。私たちのアプローチは、単一の画像を完全に補完され、意味的に区別されたレイヤー(描画順序を推論)に分解します。髪、顔、目、衣服、アクセサリーなど、最大23のレイヤーに分割します。

仕組み
See-throughは、透明レイヤー生成のためのLayerDiff 3Dモデルと、擬似深度推論のための微調整されたMarigoldモデルを適用する完全なパイプラインを実行し、キャラクターを最大23の意味的レイヤーに階層化してレイヤー化されたPSDファイルをエクスポートします。
LayerDiff 3D
SDXLを使用した拡散ベースの透明レイヤー生成。
Marigold Depth
アニメ用に微調整された擬似深度推定。
セマンティック解析
正確なレイヤー階層化のための身体パーツのセマンティックセグメンテーション。
今すぐ本番品質のキャラクターレイヤーを手に入れる
この研究デモは数分かかることがあり、実験的な結果を出力します。髪、顔、服、アクセサリーなど信頼性の高いすぐに使えるレイヤーには、本番向けのCharacter into Layersツールをご利用ください。
Character into Layersを試す