Dans un passé récent, avec la genèse de grands modèles de langage, nous débattons de manière critique de la question de savoir si   comme l'art IA, les vidéos IA, etc., détruira la créativité des créateurs de contenu ou pourra améliorer la qualité et les aider. Dans mon   , j'ai expliqué comment les outils de génération de code d'IA peuvent contribuer à ajouter de la valeur au cycle de développement logiciel. Dans cet article, je soulignerai principalement comment, en utilisant des outils d'IA, la création de contenu vidéo devient non seulement facile et rapide, mais aussi créative. . le contenu généré par l'IA, blog précédent  Avant de comprendre comment exploiter les modèles de vidéo et d'image actuels pour générer du contenu créatif et attrayant, il est important de comprendre à quoi ressemble l'état actuel. Nous pouvons superposer le paysage actuel de la génération de vidéos IA comme ci-dessous :     dans leur flux de travail comme Adobe, Canva, etc. Éditeurs vidéo existants essayant d'intégrer l'IA    comme Fliki.ai, unscreen.com, synthesia.ai, hourone.ai, etc. Outils de montage vidéo nouvel âge basés sur l'IA    dédiée à un cas d'utilisation unique dans le flux de travail de génération vidéo, par exemple   aide à créer des images réalistes pour les vidéos,   fournit une plate-forme pour convertir une image en vidéo ou une image en image,   aide à ajouter une animation à une image, etc. Couche d'abstraction Midjourney RunwayML Did    qui constitue la base de l'ensemble du paysage, les équipes logicielles peuvent exploiter cette couche pour la personnaliser en fonction de leurs cas d'utilisation. Couche de modèle  Au fur et à mesure que nous progressons dans la flexibilité des calques pour personnaliser diminue tandis que la facilité d'utilisation augmente, dans le contexte de cet article, nous allons plonger en profondeur pour comprendre comment nous pouvons utiliser la   pour générer des vidéos créatives puisque cette couche se situe au milieu de la flexibilité et facilité d'utilisation, et en tant qu'artiste, il faut le meilleur des deux mondes. couche d'abstraction  Création d'un pipeline texte-vidéo    d'apprendre comment créer un pipeline pour générer   à l'aide des outils de la couche d'abstraction, il est important de noter quelles seront les étapes de génération de la vidéo et quels outils peuvent être utilisés dans chaque couche.  Avant du texte en vidéo  La génération de texte en vidéo par l'IA implique les étapes suivantes :  1. Générer des scènes à partir du script à l'aide des invites GPT  La première étape que j'ai faite a été d'inviter GPT à diffuser le script hindi sous la forme de dialogues entre les personnages impliqués dans chaque scène.     Saisir     Sortir  2. Générer des images à partir des scènes  C'est l'étape cruciale et implique la création des images pour la scène qui a été décomposée du script, tout se résume à la façon dont nous pouvons nous exprimer de manière créative en utilisant les directives d'invite de   , l'exemple ci-dessous mentionne l'invite donnée à Midjourney pour générer une image pour une scène. Midjourney     Un dessin animé d'une scène où un vieux saint hindou indien demande de l'aide à Lord Cloud ; Lord Cloud est personnifié et a le bonheur sur son visage, l'environnement autour est plein d'arbres avec des nuages sombres et des éclairs tout autour  3. Ajout d'une animation à l'image  Si vous devez ajouter une animation à l'image, vous pouvez utiliser   ou   pour ajouter le mouvement des personnages et l'animation de la scène. DiD RunwayML  4. Générer une voix IA pour la narration de la scène  Dans cette étape, vous pouvez générer la voix IA pour la narration à l'aide de onze laboratoires. Généralement, il s'agit de modèles de narration de synthèse vocale utilisant derrière ce qui peut sembler un peu robotique mais qui résout le but de la génération de voix, on peut la rendre plus expressive et réaliste. à partir de onze laboratoires version payante, pour cette histoire, j'avais besoin d'une narration vocale en hindi pour laquelle la narration   fait un excellent travail. textuelle Ai4Bharat  5. Assembler les clips vidéo et synchroniser la voix  Il s'agit de la dernière et la plus simple étape pour ajouter les images dans un éditeur vidéo et synchroniser la voix selon la scène et la chronologie de la narration. Des outils comme Canva et Adobe Express font un excellent travail ici.  Coût approximatif de la production vidéo  Ci-dessus se trouve la description la plus simple de la façon dont vous pouvez générer rapidement une vidéo à partir de texte à l'aide de quelques outils de base. Pour mon exemple, j'ai généré une vidéo de près de 3 minutes avec 16 scènes uniques. Il serait intéressant de voir le temps et l'argent que j'ai payés. générer cette vidéo :  Coût à mi-parcours ~ 0,05 $/image - 16*0,05 = 0,8 $  RunwayML ~ 0,02 $/image - 16*0,02 = 0,32  Canva ~ Gratuit car non utilisé leurs artefacts premium   Coût total ~ 1 $/vidéo  En comparaison avec les éditeurs vidéo IA nouvel âge comme   qui facturent près de 28 $/mois pour 180 minutes de création, ce qui   pour une durée de vidéo mentionnée ci-dessus. Fliki coûterait environ 0,5 $  Besoin de regrouper l'offre  Bien que le coût final de génération de la vidéo dans les éditeurs vidéo basés sur l'IA semble inférieur au coût total encouru par l'utilisation d'outils tels que Midjourney, RunwayML, etc., avec un coût supplémentaire, ces outils offrent flexibilité et créativité à un créateur de contenu vidéo et peuvent aider en générant des vidéos étonnantes qui peuvent être comparables à une scène étonnante d'un film hollywoodien, il semble que si ces outils d'IA peuvent être regroupés et intégrés au flux de travail des agences vidéo ou des maisons de production vidéo, ils peuvent produire une valeur maximale dans la production vidéo, comme Justine Moore, partenaire   dans   fil reflète également la même chose.  @a16z ce

Walkthroughs, tutorials, guides, and tips. This story will teach you how to do something new or how to do something better.

This story will praise and/or roast a product, company, service, game, or anything else people like to review on the Internet.

AI Stack pour la génération de texte en vidéo

About Author

COMMENTAIRES

ÉTIQUETTES

CET ARTICLE A ÉTÉ PARU DANS

Related Stories

La fuite de l'invite du système Claude Sonnet 3.5 : une analyse médico-légale

Nomades numériques, écoutez : ce que vous devez savoir sur le nouveau visa DTV de la Thaïlande

Les couches invisibles : pourquoi les entretiens avec les utilisateurs sont un atout irremplaçable

La fuite de l'invite du système Claude Sonnet 3.5 : une analyse médico-légale

Nomades numériques, écoutez : ce que vous devez savoir sur le nouveau visa DTV de la Thaïlande

Les couches invisibles : pourquoi les entretiens avec les utilisateurs sont un atout irremplaçable

Light-Mode

Classic

Newspaper

Dark-Mode

Neon Noir

Minty

HN StartUps