Avec des dizaines de générateurs d’images sur le marché capables de produire des images hyperréalistes à partir de textes, de nombreux développeurs ont commencé à s’attaquer à un nouveau défi : la génération de vidéos.
Le laboratoire d’IA Odyssey a lancé un générateur de vidéo qui ouvre la voie à un nouveau type d’expérience interactive.
Vidéo interactive
Mercredi, Odyssey a lancé un aperçu de sa première expérience vidéo interactive, qui génère des vidéos entièrement par l’IA en temps réel. La visualisation et la navigation dans cette vidéo interactive sont similaires à celles d’un jeu vidéo, en utilisant le clavier, la manette et le son.
Odyssey décrit cette vidéo interactive comme un « nouveau moyen de raconter des histoires ». L’entreprise affirme que ce support transformera les formes de contenu vidéo telles que nous les connaissons aujourd’hui. Plus précisément, le modèle génère de nouvelles images toutes les 40 ms.
Cette expérience s’appuie sur un modèle de monde en temps réel, qui diffère d’un modèle vidéo traditionnel. Un modèle mondial génère la prochaine image vidéo en combinant l’état actuel, l’historique récent et les dernières actions. Le modèle du monde complète ce processus étape par étape, en se mettant à jour au fur et à mesure de l’arrivée de nouvelles actions. Cette approche autorégressive permet une interaction et une réactivité en temps réel. En comparaison, un modèle vidéo génère l’expérience complète en une seule fois, ce qui rend l’interactivité impossible.
L’architecture d’un modèle de monde. Odyssey
« L’exploration d’un rêve glitchy – brut, instable, mais indéniablement nouveau »
Le modèle mondial pose des problèmes d’instabilité, c’est pourquoi la preview utilise à la place un modèle de distribution étroite, qui a été pré-entraîné et affiné sur des données vidéo plus spécifiques provenant d’un plus petit ensemble de lieux.
Il convient de noter que l’expérience n’est pas parfaite. Odyssey décrit l’expérience comme « l’exploration d’un rêve glitchy – brut, instable, mais indéniablement nouveau ».
Après l’avoir moi-même mise à l’épreuve, je peux dire que cette description est pertinente. L’entreprise vise à créer des mondes interactifs hyperréalistes à l’avenir. Odyssey a également présenté en preview son modèle de monde de nouvelle génération, qui semble être une amélioration par rapport à la version actuelle.
Dans les 24 heures qui ont suivi son lancement, 85 000 flux de vidéos interactives ont été générés dans le monde entier, ce qui, selon Odyssey, équivaut à 250 millions d’images vidéo. Vous pouvez essayer l’expérience gratuitement.
Comment l’essayer
Pour essayer le générateur, visitez le site d’expérience du monde Odyssey. Vous n’avez même pas besoin d’un compte pour commencer. Il vous suffit de cliquer sur ce qui ressemble à un bouton d’alimentation, puis de naviguer dans la scène qui vous est proposée à l’aide des boutons de l’écran ou de votre clavier.
Vous pouvez également cliquer sur le cadran « world channel » pour être transporté dans différentes scènes ou « mondes ». Vous disposez de deux minutes, à raison de 30 secondes par tour, puis vous pouvez recommencer l’expérience.
Capture d’écran par Sabrina Ortiz/ZDNET
L’expérience est un peu étrange lorsque vous naviguez dans ces environnements désolés. Et votre point de vue est comme si vous marchiez à travers eux. Comme mentionné plus haut, l’expérience est également un peu floue, et ressemble donc à ce que vous pourriez ressentir si vous marchiez dans la série télévisée Stranger Things.
Capture d’écran par Sabrina Ortiz/ZDNET
Même si l’expérience n’est pas très réaliste, il est intéressant de voir comment la technologie peut simuler la navigation dans un jeu vidéo, avec l’avantage d’être en temps réel. Pour en savoir plus sur le fonctionnement du modèle, les cas d’utilisation futurs, les coûts potentiels, etc., consultez le ce billet de blog.