Le modèle Deepfake le plus puissant au monde vient d'être publié par Google

Ce nouveau modèle de Google Research et de l'Université de Tel-Aviv est incroyable. MyStyle est un modèle de deepfake très puissant qui peut pratiquement tout faire.

Prenez une centaine de photos de n'importe quelle personne et vous avez son personnage encodé pour fixer, éditer ou créer n'importe quelle image réaliste que vous voulez.

C'est à la fois incroyable et effrayant, si vous me demandez, surtout quand on regarde les résultats. Regardez la vidéo pour voir plus de résultats et comprendre le fonctionnement du modèle !

Voir la vidéo

Références

►Lire l'article complet : https://www.louisbouchard.ai/mystyle/
►Nitzan, Y., Aberman, K., He, Q., Liba, O., Yarom, M., Gandelsman, Y.,
Mosseri, I., Pritch, Y. et Cohen-Or, D., 2022. MyStyle : Un
Prieur génératif. prétirage arXiv arXiv:2203.17272.
►Lien du projet : https://mystyle-personalized-prior.github.io/
►Code (à venir) : https://mystyle-personalized-prior.github.io/
►Ma Newsletter (Une nouvelle application d'IA expliquée chaque semaine à vos mails !) : https://www.louisbouchard.ai/newsletter/

Transcription vidéo

0:00

ce nouveau modèle par google research et

0:02

l'université de tel aviv est incroyable toi

0:05

peut le voir comme un profond très très puissant

0:07

faux qui peut tout faire prendre une centaine

0:10

photos de n'importe quelle personne et vous avez son

0:12

personnel encodé pour corriger modifier ou créer

0:15

toute image réaliste que vous voulez c'est

0:18

à la fois incroyable et effrayant si vous me demandez

0:20

surtout quand on regarde les résultats

0:23

prenez juste une seconde pour les admirer

0:36

[Musique]

0:50

le modèle utilise simplement un pré-formé

0:52

architecture d'armes à feu de style que j'ai couverte

0:54

dans de nombreuses vidéos donc je n'entrerai pas dans

0:56

le détail de ce réseau étoile rapidement

0:58

gun prend une image l'encode en utilisant

1:01

réseaux de neurones convolutifs et est

1:03

formés pour régénérer la même image si

1:05

cela ressemble à une autre langue pour vous

1:08

prenez juste deux minutes pour regarder la vidéo

1:10

j'ai fait un pistolet de style couvrant

1:12

puis quand tu l'as bien entraîné avec

1:15

un grand ensemble de données de nombreuses personnes que vous pouvez

1:17

lui apprendre à transformer directement l'image

1:20

de l'espace encodé comme je l'ai expliqué dans

1:22

mes vidéos pour que vous n'ayez pas besoin de les estomper

1:24

images plus vous pouvez simplement jouer avec

1:27

ce que nous appelons le générateur cela signifie

1:29

vous pouvez lui apprendre à changer le tout

1:31

image comme un transfert de style

1:33

application où vous feriez par exemple

1:35

prendre une photo réaliste et l'encoder

1:38

ou commencer dès l'encodage et

1:40

transformez-le en un anime comme numérique

1:43

image formée et manipulée correctement

1:45

vous pouvez également modifier uniquement certains paramètres locaux

1:48

caractéristiques comme la couleur des cheveux ou

1:50

toute autre modification pour vous faire paraître votre

1:52

meilleur

1:53

donc ce nouveau modèle appelé mon style utilise

1:56

le modèle de base du pistolet de style et le modifie

1:59

pour réaliser non seulement un transfert de style

2:01

tâche mais toute tâche pouvant être associée

2:04

avec ton visage comme je l'ai dit littéralement

2:06

apprend à quoi vous ressemblez et peut faire joli

2:08

beaucoup n'importe quoi dans la peinture super

2:11

résolution ou montage imaginer peindre

2:13

est l'endroit où vous auriez un objet dans le

2:15

coup couvrant ton visage et tu enlèverais

2:17

le sujet de l'image et faire

2:19

ton visage réapparaît comme si tu

2:22

permettre la transparence dans un jeu vidéo pour

2:24

voir à travers leurs murs image super

2:27

la résolution est un défi incroyablement difficile

2:29

tâche lorsque vous essayez de généraliser à plusieurs

2:31

différents visages mais beaucoup plus facile lorsque vous

2:33

se concentrer sur une personne ici le but est de

2:36

prendre une image en très basse définition et

2:38

mettez-le à l'échelle en haute résolution afin

2:41

vous avez essentiellement cette image floue

2:43

de vous-même et vous essayez de le faire paraître

2:46

comme ça, vous pouvez voir comment ces deux

2:48

les applications sont assez difficiles pour un

2:50

machine car elle a besoin de comprendre

2:52

personne afin de combler de grosses lacunes ou

2:55

ajouter des pixels pour rendre le visage plus net

2:57

le modèle doit essentiellement être à la fois un

2:59

un ami très proche à vous et un grand

3:02

artiste en même temps qu'il le faut

3:04

savoir à quoi ressemble votre visage de n'importe quel

3:06

angle ainsi que pouvoir le dessiner

3:08

de façon réaliste alors que je ferai toujours le

3:11

tout ce que je peux pour être le meilleur ami

3:13

possible de m'oublier en dessinant un

3:15

version exacte de votre visage si vous

3:17

veux de bons résultats c'est juste un autre

3:19

niveau donc en prenant ce style de base de pistolet

3:22

s'entraîner avec un énorme ensemble de données générales de

3:24

des milliers de personnes et une centaine

3:26

des photos de toi mon style apprendra

3:29

un espace encodé unique à votre visage

3:32

vous trouvera essentiellement dans le inclus

3:35

représentation de tous les visages et être

3:37

recyclé pour pousser le modèle à se concentrer sur

3:39

vos différentes fonctionnalités alors vous serez

3:42

capable de le nourrir incomplet ou échoué

3:44

photos de vous et demandez-lui de corriger

3:46

c'est pour toi à quel point c'est cool que ça demande

3:49

beaucoup d'images de vous-même mais un

3:52

cent photos signifient juste un grand jour

3:54

dehors avec un ami et vos téléphones pour

3:56

ont de bien meilleurs résultats que les

3:58

modèles généraux qui tentent de généraliser

4:00

tout le monde c'est aussi beaucoup moins cher que

4:02

l'embauche d'un professionnel sur photoshop et

4:05

demander de retoucher toutes vos futures photos

4:08

vous pouvez toujours voir comment ce genre de modèle

4:10

peut être dangereux pour les personnes célèbres ou

4:12

ceux qui ont beaucoup de photos instagram

4:15

quelqu'un pourrait les utiliser pour former un modèle

4:17

et fondamentalement créer super réaliste

4:19

des photos de vous compromettantes

4:21

situations c'est pourquoi je dis souvent que

4:24

nous ne pouvons plus faire confiance à ce que nous voyons

4:26

surtout sur internet ne soyons pas

4:29

penser à tous les problèmes possibles lorsque

4:31

ce sera aussi dans le monde réel avec

4:33

lunettes de réalité augmentée quand même

4:36

les résultats sont fantastiques et beaucoup

4:38

mieux que ce que nous avons vu auparavant

4:40

étant donné qu'il ne nécessite qu'une centaine

4:43

des photos de vous au lieu d'heures de

4:45

tournage vidéo pour le visage profond plus âgé et

4:48

a beaucoup moins d'artefacts que ceux

4:50

nécessitant moins d'images effectuant seulement un

4:53

tâche unique et voira c'est comme ça que mon

4:57

styliser un nouveau modèle de la recherche Google

4:59

et l'université de tel aviv est capable de

5:01

effectuer imagerie peinture image super

5:04

résolution et édition d'image à l'aide d'un

5:06

architecture unique et programme de formation

5:09

par rapport à d'autres approches car il

5:11

se concentre sur la personne plutôt que sur le

5:13

tâche elle-même, ce qui la rend beaucoup plus

5:16

précis réaliste et généralisable à

5:18

vous j'espère que vous avez apprécié cette vidéo permettez-moi

5:21

savoir ce que vous pensez de ce court et

5:22

format plus simple si vous l'aimez ou pas de

5:25

Bien sûr, ce n'était qu'un aperçu de cela

5:27

nouveau papier et je recommande fortement

5:29

lire le journal pour mieux

5:31

compréhension de leur programme de formation

5:33

et le modèle je vous verrai la semaine prochaine

5:35

avec un autre papier incroyable

[Musique]