Runway présente l'IA "Gen-3 Alpha", son nouveau modèle de base pour la génération de vidéos. Selon Runway, Gen-3 Alpha permet de créer des vidéos très détaillées avec des changements de scène complexes, un large éventail de choix cinématiques et des directions artistiques détaillées.Runway AI est une entreprise américaine spécialisée dans la recherche et les technologies d'intelligence artificielle générative. L'entreprise se concentre principalement sur la création de produits et de modèles pour la génération de vidéos, d'images et de divers contenus multimédias. Elle est surtout connue pour avoir développé les premiers modèles commerciaux d'IA générative texte-vidéo Gen-1 et Gen-2 et pour avoir co-créé la recherche pour le système populaire d'IA de génération d'images Stable Diffusion.
Runway présente Gen-3 Alpha, le premier d'une série de modèles formés par Runway sur une nouvelle infrastructure conçue pour la formation multimodale à grande échelle. Il s'agit d'une amélioration majeure de la fidélité, de la cohérence et du mouvement par rapport à Gen-2, et d'une étape vers la construction de modèles mondiaux généraux.
Formé conjointement sur des vidéos et des images, Gen-3 Alpha alimentera les outils Texte vers Vidéo, Image vers Vidéo et Texte vers Image de Runway, les modes de contrôle existants tels que Motion Brush, Advanced Camera Controls, Director Mode ainsi que les outils à venir pour un contrôle plus fin de la structure, du style et du mouvement. Gen-3 Alpha sera publiée avec un nouvel ensemble de garanties, y compris le nouveau système de modération visuelle interne amélioré et les normes de provenance C2PA.
Voici quelques particularités de ce modèle :Introducing Gen-3 Alpha: Runway’s new base model for video generation.
— Runway (@runwayml) June 17, 2024
Gen-3 Alpha can create highly detailed videos with complex scene changes, a wide range of cinematic choices, and detailed art directions.https://t.co/YQNE3eqoWf
(1/10) pic.twitter.com/VjEG2ocLZ8
Un contrôle temporel précis : Gen-3 Alpha a été formé avec des légendes hautement descriptives et temporellement denses, permettant des transitions imaginatives et un cadrage précis des éléments de la scène.
Humains photoréalistes : Gen-3 Alpha excelle dans la génération de personnages humains expressifs avec une large gamme d'actions, de gestes et d'émotions, ce qui ouvre de nouvelles possibilités de narration.
Pour les artistes, par les artistes : La formation de Gen-3 Alpha est le fruit d'une collaboration entre une équipe interdisciplinaire de chercheurs, d'ingénieurs et d'artistes. Il a été conçu pour interpréter un large éventail de styles et de terminologies cinématographiques.
Personnalisation de l'industrie : Dans le cadre de la famille des modèles Gen-3, Runway a collaboré et établi des partenariats avec les principaux organismes de divertissement et de médias pour créer des versions personnalisées de Gen-3. La personnalisation des modèles Gen-3 permet d'obtenir des personnages plus cohérents et mieux contrôlés sur le plan stylistique, et de répondre à des exigences artistiques et narratives spécifiques, entre autres caractéristiques.
Et vous ?
Quel est votre avis sur cette annonce ? Pensez-vous que Gen-3 Alpha est crédible ou pertinent ?Voir aussi :
Sora : OpenAI lance un modèle d'IA qui serait capable de créer une vidéo avec des scènes réalistes et imaginatives à partir d'instructions textuelles, mais la durée est limitée à 60 secondes Kling, un nouvelle modèle d'IA chinois de création de vidéos, fait l'objet de comparaisons avec Sora d'OpenAI et vient allonger la liste d'outils d'IA susceptibles de bouleverser la filière du cinéma Stability.ai présente Stable Video 3D, un outil d'IA générative pour le rendu de vidéos en 3D qui permet aux utilisateurs de générer une courte vidéo à partir d'une image ou d'un texte