Observez des chercheurs animer des images statiques à l'aide d'apprentissages fascinants

L’animation est belle, mais la création d’images en mouvement demande énormément de travail. Les départements visuels et artistiques qui ont travaillé sur le film Moana selon les listes de crédits sur IMBD. Mais un nouveau processus mis au point par des chercheurs de Princeton pourrait potentiellement simplifier considérablement certaines parties du processus, avec des résultats fascinants.

L'outil permet aux utilisateurs de choisir une partie d'une image statique qu'ils souhaitent animer, des gouttes de pluie dans une scène de tempête, par exemple, ou des particules de vapeur traversant un moteur à combustion.

L'utilisateur manipule ensuite cette partie de l'image pour spécifier la vitesse à laquelle il souhaite que l'animation se déplace. Un algorithme prend alors le relais et extrapole ses instructions à tous les autres objets similaires de l'image. Il peut potentiellement faire gagner beaucoup de temps aux animateurs, tout en facilitant la tâche des amateurs qui réalisent des choses comme des cinémographes - des photographies où une seule partie de l'image est animée.

«La personne fournit des indices sur les aspects de la scène qu’elle aimerait animer», explique le co-auteur Adam Finkelstein dans un communiqué. "L'ordinateur supprime une grande partie de la difficulté et de l'ennui qui seraient nécessaires pour créer l'animation complètement à la main."

C’est une technique plus difficile à développer que vous ne le pensez. L'apprentissage automatique est très efficace pour identifier des choses sur des photographies, qui sont liées par des règles de la nature et relativement cohérentes. Les images dessinées par la main humaine, naturellement, ne sont pas cohérentes: chaque personne ou artiste a son propre style.

«Les styles de dessin sont si variés», explique Nora Willett, étudiante de troisième cycle au département d’informatique de Princeton et auteur principal du document. "Il n’ya tout simplement pas assez de données pour entraîner une machine à reconnaître tous les dessins fantastiques."

Pour surmonter cet obstacle, les chercheurs ont conçu une interface qui facilite la collaboration entre les humains et l’apprentissage automatique. Ils ont commencé avec l'application Autodesk SketchBook Motion, qui peut créer une animation, mais oblige les utilisateurs à la créer manuellement ou à compiler des dizaines de calques via une autre application telle qu'Adobe Photoshop.

Pour tester leur interface, l’équipe de Willett a recruté six personnes ayant différents niveaux d’expérience en animation, dont deux étaient assez gentilles pour créer leurs propres animations. Ils ont présenté leur nouvelle méthode la semaine dernière, lors du symposium sur les logiciels et technologies d’interface utilisateur de l’Association for Computing Machinery.