Cette semaine, un nouveau modèle open-source de génération de vidéos IA appelé Pyramid Flow a été lancé, capable de produire des clips vidéo de haute qualité allant jusqu'à 10 secondes. Développé en collaboration par l'Université de Pékin, l'Université des Postes et Télécommunications de Beijing et Kuaishou Technology, Pyramid Flow utilise une technique novatrice appelée correspondance de flux pyramidal qui optimise l'efficacité computationnelle en générant des vidéos par étapes, avec uniquement la dernière étape produite en pleine résolution. Disponible en téléchargement sur Hugging Face et GitHub, Pyramid Flow peut générer rapidement une vidéo de 5 secondes en 384p en seulement 56 secondes, rivalisant avec de nombreux modèles existants en termes de vitesse. Alors que les démos des créateurs montrent des sorties étonnamment réalistes, le modèle est conçu pour concurrencer des options payantes premium comme le Gen-3 Alpha de Runway et la Dream Machine de Luma, qui nécessitent généralement des abonnements coûteux. Le développement de Pyramid Flow met l'accent sur l'efficacité, permettant des cycles d'entraînement plus rapides et jusqu'à quatre fois plus efficaces que les modèles de diffusion conventionnels. Il peut générer des vidéos en résolution 768p et 24 images par seconde, ayant été entraîné sur des ensembles de données open-source extensifs, y compris LAION-5B et CC-12M.

Cependant, certains de ces ensembles de données ont été critiqués pour contenir potentiellement des matériaux protégés par des droits d'auteur sans consentement approprié. Publié sous la licence MIT, Pyramid Flow est ouvert à une utilisation commerciale, offrant une alternative attrayante pour les développeurs cherchant à intégrer la génération de vidéos IA sans les contraintes financières des systèmes propriétaires. Les studios de cinéma comme Lionsgate pourraient bénéficier en utilisant Pyramid Flow pour personnaliser leurs propres modèles de génération de vidéos sans encourir de frais de tiers, bien qu'ils aient besoin d'expertise technique pour implémenter le système efficacement. Malgré ses caractéristiques prometteuses, Pyramid Flow manque actuellement d'options de réglage avancées présentes dans des modèles plus établis comme le Gen-3 Alpha de Runway. À mesure que le paysage de la génération de vidéos IA évolue, Pyramid Flow pourrait émerger comme un acteur important, offrant un choix convaincant pour les créateurs à la recherche d'outils de génération vidéo accessibles et de haute qualité. La course compétitive parmi les fournisseurs de vidéos IA se poursuit, chacun s'efforçant pour l'avancée technologique et l'acquisition d'utilisateurs.