L'application de montage vidéo Captions , soutenue par a16z, Kleiner Perkins et Sequoia Capital, a lancé une nouvelle fonctionnalité qui prend une vidéo non éditée existante et ajoute des graphiques personnalisés, des zooms, de la musique, des effets sonores, des transitions et des arrière-plans animés en fonction du contenu.
Il existe quelques restrictions pour le montage par l'IA : il doit s'agir d'une vidéo verticale d'une personne qui parle, avec une seule personne dans le cadre.
L'essentiel est que même si vous n'avez pas de telles vidéos ou si ce n'est pas votre style de tournage vidéo, vous pouvez utiliser les avatars IA de Captions pour créer une vidéo avec une courte invite, puis transmettre cette vidéo à la fonction d'édition IA pour obtenez une vidéo entièrement éditée en quelques minutes avec différentes transitions et effets.
Gaurav Misra, co-fondateur et PDG de Captions, a déclaré à TechCrunch que lorsqu'il a quitté Snap en 2021, il avait pensé à faciliter le processus de création vidéo avec pour objectif principal la communication.
« Notre objectif principal a été de permettre aux gens de faire passer un message. Si vous réfléchissez au parcours qu'il faut faire pour dire ce que vous voulez dire en vidéo, c'est compliqué. Cela commence par l’idée de ce que je veux réellement dire, préparer le script, enregistrer la vidéo et la monter pour rendre le clip attrayant », a-t-il déclaré en référence à la réflexion derrière la création d’un pipeline de fonctionnalités utilisant l’IA pour créer des vidéos.
Utiliser l'IA pour créer des vidéos
Misra a déclaré qu'avec Captions, la société souhaite fournir trois types d'outils d'enregistrement vidéo aux gens. Premièrement, il vise à fournir la meilleure boîte à outils de caméra pour faciliter l’enregistrement. Deuxièmement, il propose également des outils d'édition tels que des corrections basées sur l'IA pour les vidéos enregistrées manuellement. Et enfin, Captions propose un niveau génératif dans lequel un utilisateur n'a pas du tout besoin d'enregistrer une vidéo.
La société propose actuellement 12 personnages IA. Mais à l’avenir, la société souhaite ajouter trois à quatre personnages à son portefeuille chaque semaine. A terme, l'objectif de la startup est de permettre aux utilisateurs de créer leurs propres personnages IA.
Misra considère que ces outils sont principalement utilisés pour les canaux de vente, de marketing et de communication par les entreprises axées sur le consommateur. Des sociétés telles que D-ID et Synthesia permettent aux organisations de créer des avatars numériques pour les vidéos. Plus tôt ce mois-ci, TikTok a également permis aux créateurs de créer des avatars IA tout en proposant son propre personnage IA pour les publicités. Misra estime que les sous-titres offrent une meilleure qualité et que vous pouvez accéder à tous les outils de création vidéo sur le téléphone.
La tension entre l’IA et les créateurs
L'ensemble des fonctionnalités de l'application Sous-titres permet aux utilisateurs de créer très facilement des vidéos. Nous avons créé la vidéo ci-dessous uniquement avec l'invite « Dangers de l'IA pour les créateurs » et avons appuyé sur quelques boutons pour la création et les modifications. C'est assez choquant d'entendre un avatar d'IA parler des dangers de l'IA.
Ces outils permettent aux utilisateurs d'inonder facilement les réseaux sociaux et Internet en général de contenu, qu'il soit bon ou mauvais. Cela pourrait créer un problème de découvrabilité pour les créateurs qui consacrent des heures à la création de contenu.
Misra reconnaît qu'il s'agit d'une préoccupation valable, mais pense que les personnes créant avec des outils d'IA devront toujours s'assurer que la vidéo a un bon contenu et quelque chose qui intéresse les gens.
« La production de masse de contenu serait possible, mais pour se démarquer, il faut avoir un message ou une histoire unique, sur laquelle les gens passeront désormais la plus grande partie de leur temps. Un peu comme la façon dont la musique numérique permettait de créer plus facilement de la musique sans jouer d’un instrument, mais au lieu de diminuer la qualité de la musique, elle permettait simplement à davantage de personnes de devenir musiciens et de relever la barre de la créativité », a-t-il déclaré.
La société prévoit de publier de nouvelles fonctionnalités pour ses créations vidéo basées sur des avatars IA, comme une fonctionnalité de sketch où deux (ou deux identiques) avatars peuvent se parler.