Tencent a ouvert le code source d’HunyuanPortrait pour l’animation de photos
La compagnie Tencent a publié le code source et les coefficients de poids de son projet HunyuanPortrait – un système de création de portraits animés réalistes. Cette solution, basée sur des modèles de diffusion, permet de transférer les mouvements d’une vidéo source vers une image statique, « donnant vie » essentiellement aux photographies avec un degré impressionnant de réalisme.
L’architecture technique d’HunyuanPortrait représente un ensemble complet de modèles spécialisés. SVD pour générer des séquences vidéo. DiNOv2 pour extraire les caractéristiques visuelles. Arc2Face pour travailler avec les expressions faciales. Et YoloFace pour une détection fiable des visages. Une telle structure multi-composante assure un contrôle plus précis de l’animation et la fluidité des transitions entre images comparé aux analogues existants.
L’implémentation actuelle nécessite 24 gigaoctets de mémoire vidéo pour lancer le processus d’inférence, ce qui rend la technologie accessible à un cercle relativement large d’enthousiastes et de professionnels ayant à leur disposition des accélérateurs graphiques modernes. Il est important de noter que le système ne supporte pas encore le mode « text-to-motion », se limitant au transfert de mouvements depuis une vidéo de référence.
L’accès ouvert au code et aux poids du modèle ouvre un nouveau chapitre dans le développement des technologies d’animation numérique, démocratisant potentiellement des outils précédemment accessibles seulement aux grands studios et géants technologiques.
Auteur: AIvengo
Depuis 5 ans, je travaille dans l'apprentissage automatique et l'intelligence artificielle. Et ce domaine ne cesse de m'étonner, de m'inspirer et de m'intéresser.
Latest News
UBTech enverra des robots Walker S2 servir à la frontière chinoise pour $37 millionsL'entreprise chinoise UBTech a remporté un contrat de $37 millions. Et enverra des robots humanoïdes Walker S2 servir à la frontière de la Chine avec le Vietnam. South China Morning Post rapporte que les robots interagiront avec les touristes et le personnel, effectueront des opérations logistiques, inspecteront les marchandises et patrouilleront le territoire. Et caractéristiquement — ils peuvent changer leur batterie de manière autonome.
Les chatbots IA génèrent du contenu qui aggrave les troubles alimentairesUne étude conjointe de l'Université Stanford et du Center for Democracy and Technology a montré un tableau inquiétant. Les chatbots avec intelligence artificielle représentent un risque sérieux pour les personnes souffrant de troubles alimentaires. Les scientifiques avertissent que les réseaux neuronaux distribuent des conseils nuisibles sur les régimes. Ils proposent des moyens de cacher le trouble et génèrent du "contenu inspirant pour perdre du poids" qui aggrave le problème.
OpenAGI a publié le modèle Lux qui dépasse Google et OpenAILa startup OpenAGI a publié le modèle Lux pour le contrôle d'ordinateur et affirme que c'est une percée. Selon les benchmarks, le modèle dépasse d'une génération entière les analogues de Google, OpenAI et Anthropic. De plus, il fonctionne plus vite. Environ 1 seconde par étape au lieu de 3 secondes chez les concurrents. Et 10 fois moins cher en coût par traitement de 1 token.
