Apresentando Drag Your GAN: Arraste objetos para criar novas imagens

Notícias emocionantes no mundo da IA e edição de imagens: Drag Your GAN, uma pesquisa inovadora, acaba de ser apresentada por Pan et al. !

Esta nova abordagem permite alterar imagens simplesmente arrastando pontos de A para B, revolucionando a forma como interagimos com a edição de imagens. Isso não é apenas edição, mas na verdade a criação de imagens completamente novas, permitindo que você altere as posições dos objetos, as poses dos sujeitos e muito mais.

Drag Your GAN prioriza o arraste de objetos precisos sobre a geração de imagens ou manipulação de texto

A IA adapta realisticamente toda a imagem, modificando a posição, pose, forma, expressões e outros elementos do quadro do objeto.

🐶🌄 Edite expressões de cães, faça-os sentar, ajuste poses humanas ou até mesmo altere paisagens perfeitamente. Drag Your GAN oferece uma maneira inovadora e interativa de experimentar a edição de imagens.

Como funciona? O Drag Your Gan aproveita o StyleGAN2, uma arquitetura GAN de última geração da NVIDIA. Ao operar no espaço de recursos (código latente), a IA aprende como editar imagens adequadamente por meio de uma série de etapas e cálculos de perda.

Ainda que os resultados sejam fantásticos, como você verá a seguir, é fundamental observar que o Drag Your Gan tem algumas limitações, inclusive só poder editar as imagens geradas por enquanto. As imagens fazem parte da distribuição. Outras limitações são que a seleção de pontos é baseada em cores de pixel e contraste, então você não pode realmente arrastar nada. Se você pegar uma parte de um carro vermelho e movê-lo permanecendo no carro vermelho, ele pode não entender que você o move.

Mal posso esperar para experimentá-lo?

Os autores mencionam que o código deve estar disponível em junho.

Sintonize o vídeo para saber mais sobre este novo estilo de manipulação de imagem com DragYourGan!

Saiba mais assistindo ao vídeo e pule para qualquer parte que desejar por meio da transcrição