Drag Your GAN の紹介: オブジェクトをドラッグして新しい画像を作成

AI と画像編集の世界におけるエキサイティングなニュース: 画期的な研究である Drag Your GAN が、 Pan らによって紹介されました。 ！

この新しいアプローチにより、点を A から B にドラッグするだけで画像を変更でき、画像編集の方法に革命をもたらします。これは単なる編集ではなく、実際にはまったく新しい画像を作成し、オブジェクトの位置や被写体のポーズなどを変更することができます。

Drag Your GAN は、画像生成やテキスト操作よりも正確なオブジェクトのドラッグを優先します。

AI は画像全体を現実的に適応させ、オブジェクトの位置、ポーズ、形状、表情、その他のフレーム要素を変更します。

🐶🌄 犬の表情を編集したり、座らせたり、人間のポーズを調整したり、風景をシームレスに変更したりすることもできます。 Drag Your GAN は、画像編集を実験するための革新的でインタラクティブな方法を提供します。

どのように機能するのでしょうか? Drag Your Gan は、NVIDIA による最先端のGANアーキテクチャである StyleGAN2 を活用しています。 AI は特徴空間 (潜在コード) で動作することで、一連のステップと損失計算を通じて画像を適切に編集する方法を学習します。

以下に示すように、結果は素晴らしいものですが、現時点では生成された画像のみを編集できるなど、Drag Your Gan にはいくつかの制限があることに注意することが重要です。画像は配布物の一部です。その他の制限として、ポイントの選択はピクセルの色とコントラストに基づいているため、実際には何もドラッグできないことが挙げられます。赤い車の一部を取り出して、赤い車に乗ったまま動かしても、動かしたことをまったく理解できないかもしれません。

試してみるのが待ちきれませんか?

著者らは、コードは 6 月に利用可能になるはずだと述べています。

DragYourGan を使用したこの新しい画像操作スタイルについて詳しくは、ビデオをご覧ください。

ビデオを見て詳細を確認し、トランスクリプトから好きな部分にスキップしてください