L'IA Générative Brise les Barrières Linguistiques dans les Vidéos

L'IA générative fait des avancées significatives pour briser les barrières linguistiques dans le contenu vidéo. Un exemple fascinant vient de Hany Farid, professeur à l'UC Berkeley et conseiller de l'Initiative d'Authentification du Contenu (CAI). Farid a présenté une vidéo captivante montrant comment l'IA peut créer des versions multilingues de lui-même parlant en français et en allemand, tout en conservant sa voix unique et en réalisant une synchronisation labiale presque parfaite. Cet effort est détaillé dans un article de blog de l'Initiative d'Authentification du Contenu.

Le processus de création est à la fois complexe et fascinant. Il se compose de quatre étapes principales: la transcription de l'audio original, sa traduction dans les langues souhaitées, la synthèse de la voix dans chaque langue, et enfin, la génération de la vidéo avec des mouvements labiaux synchronisés. Cette technique avancée représente un saut significatif par rapport aux technologies de manipulation vidéo antérieures. Un exemple d'efforts antérieurs est une vidéo deepfake réalisée par Farid et Maty Bohacek de Anderson Cooper de CNN, qui a pris près de trois mois à être complétée. En contraste frappant, la récente vidéo multilingue a pris seulement environ trois minutes, témoignant des avancées rapides dans la technologie de l'IA.

La vidéo de Farid a suscité un mélange d'émerveillement et d'appréciation. Sa mère a remarqué à quel point la version française ressemblait même à un français parisien, la qualifiant de "tout simplement incroyable." Pendant ce temps, une collègue française, Tina Nikoukhah, a observé que l'accent semblait un peu daté, reflétant les améliorations continues nécessaires dans ces technologies.

Mais avec de telles capacités viennent d'importantes responsabilités et risques. Une étude conjointe du FBI et de Medius a souligné une augmentation substantielle des arnaques liées aux deepfakes. En particulier, les incidents dans le secteur des cryptomonnaies ont connu une augmentation de 654 % entre 2023 et 2024. La menace posée par les deepfakes ne concerne pas seulement l'altération des vidéos mais aussi la création de potentielles arnaques et la diffusion de désinformation. On reconnaît l'urgence des mesures de sécurité numérique. Comme indiqué dans l'article, l'accent doit être mis sur la preuve de l'authenticité des individus en ligne tout en préservant la confidentialité et en restant accessible.

Plusieurs solutions ont été proposées pour contrer ces risques. Celles-ci incluent l'utilisation plus large des Crédences de Contenu pour garantir l'authenticité, un investissement accru dans les technologies d'identification judiciaire, l'adoption d'un état d'esprit de sécurité dès la conception dans le développement de l'IA, et l'éducation publique sur la compréhension et la reconnaissance des deepfakes.

Hany Farid, l'esprit derrière cette vitrine technologique, est une figure clé dans les domaines de la désinformation et de l'expertise judiciaire numérique. Sa carrière impressionnante inclut des postes à l'UC Berkeley et au Berkeley AI Lab, ainsi que la co-fondation de GetReal Labs. Le travail de Farid lui a valu de nombreux prestigieux prix et distinctions, soulignant son influence et son engagement envers cette aire technologique en évolution.

Le voyage de l'IA générative dans la transformation des interactions multilingues ne fait que commencer. Au fur et à mesure de sa progression, il faudra à la fois se concentrer sur l'exploitation positive de son potentiel tout en se prémunissant contre ses abus.