InstaDrag はドラッグ操作による AI 自動画像編集を実現します

)。しかし、以前自分でデモを試した際には非常に遅かったです。最近、シンガポール国立大学(NUS)とバイトダンスが類似のプロジェクト InstaDrag を公開しましたが、処理速度はかなり速いとのことです。コードはまだオープンソースになっておらず、デモも動作しない状態ですが、プロジェクトや論文の原理を先に確認することができます。

効果

Single-Round Dragging

Multi-Round Dragging

比較

スピード向上

原理

INSTADRAG の処理プロセスには3つのコンポーネントが含まれます:

  1. :非遮蔽領域が不変であることを保証するために使用;
  2. :リファレンス画像のアイデンティティを保持するために使用;
  3. :(操作点、目標点)ペアをエンコードするために使用。