Le producteur d’anime majeur Bilibili a publié son modèle de génération de vidéos animés de l’IA open source, ANISORA, promettant «la création en un clic de photos vidéo à travers divers styles d’anime, notamment des épisodes de séries, des animations originales chinoises, des adaptations de manga, du contenu vtuber, des PV anime, des parodies de style Mad (鬼畜动画), et plus!» Bilibili est bien connu pour produire des centaines de titres animés, y compris le Aharen-san wa Hakarenai en cours (seul producteur), pour être Hero X, votre forma, le début après la fin, et d’autres séries comme:
Fire Force (saison 1 et 2) Cliquez sur le lien Heike
Le modèle vidéo utilise plus de 10 millions de «clips à haute qualité» à partir d’un million d’animations brutes. Chacun est associé à un texte descriptif pour guider la génération vidéo. Bilibili annonce l’efficacité de son modèle en utilisant des sorties inspirées des styles des films de Studio Ghibli, Angel’s Egg, elle et son chat, trouvant Nemo, SpongeBob Squarepants, Despicable Me, Tangled, Big Fish & Begonia, The Lion King, et plus encore. Le modèle open source permet à quiconque de générer une animation sur plusieurs styles d’art à partir de texte ou d’images de référence. Des exemples de panneaux de bandes dessinées animés étaient également montré . Vous pouvez consulter certains cas d’utilisation ci-dessous.
Image à la génération vidéo en fournissant une seule image de référence Image à la génération vidéo en fournissant un cadre de départ, des deux, les deux, ou une séquence arbitraire de l’amélioration de l’amélioration de la tradition de référence, des deux, des deux, ou une séquence arbitraire de l’amélioration de l’amélioration de la tradition de référence, des deux, ou d’une séquence arbitraire de l’amélioration de l’amélioration de la tradition de référence, des deux, ou d’une séquence arbitraire de l’amélioration de la COMPRÉCENCE COMMÉDICATION, DE TRACH génération 
la motivation de Bilibili était de répondre à la demande croissante d’animation et du «besoin de processus de production efficaces», faisant écho aux informations sur les entreprises comme l’animation TOEI et Kadokawa. «Traditionnellement, la création d’une animation de haute qualité a nécessité un effort manuel étendu pour des tâches telles que la création de storyboards, la génération d’images clés et entre les deux, ce qui rend le processus à forte intensité de main-d’œuvre et qui prend du temps», explique Bilibili.”Les efforts antérieurs pour intégrer des techniques de vision informatique ont aidé les animateurs à générer des cadres intermédiaires pour l’animation. Cependant, ces méthodes ne montrent souvent l’efficacité que dans certains styles artistiques, limitant leur applicabilité aux demandes variées des animations modernes.”
Pourquoi la sortie de
Anisora a recueilli un mélange de réactions, certains louant son potentiel de réduire le temps et les personnes passées en production, et d’autres critiques, en raison de sa formation non autorisée sur l’animation, avec laquelle ses résultats rivaliseront sur le marché et l’animation. Il rejoint son collègue Streater Netflix dans le financement de la recherche sur l’IA avec un potentiel d’animation. Netflix a publié un article en janvier en collaboration avec ses studios filiales Eyline, ainsi que la Stony Brook University, l’Université de Maryland et l’Université de Stanford. Le modèle, nommé Go-With-the-Flow, est également capable de certains des cas d’utilisation ci-dessus, y compris la génération vidéo à partir d’un seul cadre. La société de streaming et de production d’anime de Sony, Crunchyroll, a récemment exclu une AI dans la production d’anime. Sony détient une participation de 4,98% dans Bilibili.
Source: anisora via arxiv
Image en vedette © 2001 Hayao miyazaki/studio ghibli, nddtm
