IA Animate Anyone : La FIN des Tiktokeurs ? Review d’une nouvelle IA ImageToDanse puissante

Impressionnant.. mais fake ?

Des démos disponibles, telles que celle partagée par @minchoi sur Twitter, montrent des résultats impressionnants. Mais plusieurs signes interrogateurs persistent : le code source n'est pas encore disponible & la qualité du rendu a été jugée faible par certains observateurs.

Une comparaison des vidéos de démonstration révèle également que la danse animée est presque identique à celle de la vidéo originale utilisée pour récupérer l’image, qui a été utilisée pour générer la démonstration. Cela soulève la question : si la technologie est aussi avancée, pourquoi ne pas présenter une plus grande variété de danses ?

Par ailleurs, un contre-exemple partagé par @ShawnFumo montre une différence notable entre le pantalon original et celui sur la vidéo générée, suggérant que la technologie pourrait être réelle, mais peut-être pas aussi avancée que prétendu.

Notes :

• Une nouvelle IA est sortie il y a 24 heures : https://twitter.com/StelfieTT/status/1731378027970338946
  • Nom de l’IA : Animate Anyone
  • La promesse : Vous envoyez une photo, vous sélectionnez une danse & vous obtenez une vidéo d’une personne qui danse
  • Le process → L’algo identifie les bras, les vêtements, la posture globale → Création d’un squelette avec des axes de mouvements pour chaque partie du corps → Animation du squelette
  • https://github.com/HumanAIGC/AnimateAnyone
  • https://humanaigc.github.io/animate-anyone/
• Les résultats sont impressionnants
  • Démos : https://twitter.com/minchoi/status/1731674160940658738
• Mais.. ça semble être “fake”
  • Code non-disponible : plusieurs jours ? plusieurs semaines ? Aucune information
  • Qualité du rendu faible
  • Il semble que la vidéo de demo soit quasi identique à la demo sur laquelle ils ont recup l’image, si la tech est la, pourquoi refaire la même danse ?
    • https://twitter.com/julesterpak/status/1731452110686892332
• Un contre-exemple, qui montre que la tech est la
  • https://twitter.com/ShawnFumo/status/1731493698834256307
  • Différence notable entre le pantalon original & sur la vidéo générée
• Même si c’est fake, cette techno arrivera dans les 12 mois maximum

Le segment VideoToVideo avance

• https://twitter.com/InnerRefle11312/status/1730651505450008653
  • Chaque frame (30 images / seconde par ex) va être retravaillée, en automatique
  • Résultat impressionnant & mais très gourmand en ressources
  • Studio : ComfyUI + vidéo tutoriel : https://www.youtube.com/watch?v=ddYbhv3WgWw
  • Creation de process complexes avec SD : https://github.com/comfyanonymous/ComfyUI
• Projet intéressant qui essaye de rassembler tt les techs existantes dans le segment de la création visuelles : https://github.com/huggingface/diffusers

Conclusion : La FIN des Tiktokeurs ?

• Non
  • Les Tiktokeurs ne se limitent plus à de simples danses depuis plusieurs années
  • Tiktok / Youtube note le contenu IA
  • Les détails sont actuellement rapidement identifiables
  • Les influenceurs finiront par émettre des avis hostiles aux IA ImageToVideo, et donc le public suivra en théorie leurs avis
  • Peu d’intérêt de regarder une danse d’un influenceur inconnu
• Oui
  • Si les IA sont trop indétectables & que les plateformes ne cherchent pas à developper des outils de détections, on sera rapidement inondé de fake influenceurs, et c’est déjà le cas sur Insta d’après mes analyses, je vous en parlerais dans une prochaine vidéo

Ressources annexes

• IA très interessant d’animation de dessins : https://livesketch.github.io/