Nouveautés de l'écosystème ComfyUI : sorties de modèles open source, nœuds personnalisés, workflows et outils de génération d'images, de vidéos et d'audio.
Des chercheurs ont proposé une nouvelle méthode de rééclairage vidéo, Light-A-Video, qui réalise un effet de rééclairage vidéo temporellement fluide grâce à l'attention lumineuse cohérente (CLA) et à la fusion lumineuse progressive (PLF).
Open-Weights
StepFun publie le modèle vidéo généré par texte open source Step-Video-T2V, qui possède 30 milliards de paramètres et prend en charge la génération de vidéos de haute qualité pouvant aller jusqu'à 204 images.
Open-Weights
Image vers 3DKuaishou lance officiellement CineMaster, un cadre de génération de vidéos à partir de texte, permettant la création de contenu vidéo de haute qualité grâce à la technologie de perception 3D
Open-Weights
Le dernier projet open source d'Alibaba, InspireMusic, un cadre unifié de génération audio basé sur FunAudioLLM, prenant en charge la création musicale, la génération de chansons et diverses tâches de synthèse audio.
Open-Weights
Texte vers imageL'Institut de Recherche Alibaba lance l'outil open source ACE++ pour la génération d'images, utilisant une technologie de remplissage de contenu contextuel pour générer de nouvelles images cohérentes de personnages à partir d'une seule entrée, offrant une expérience en ligne et trois modèles spécialisés.
Open-Weights
L'équipe de recherche de ByteDance lance OmniHuman-1, un cadre de génération d'animation humaine capable de créer des animations vidéo de haute qualité à partir d'une seule image et de signaux de mouvement.
Open-Weights
MultimodalDeepSeek open-source Janus-Pro-7B, un modèle d'IA multimodal pour la compréhension et la génération d'images. Apprenez à l'utiliser dans ComfyUI.
Open-Weights
Image vers 3DTencent lance Hunyuan3D 2.0, en open source le modèle DiT complet et présente un moteur de création 3D tout-en-un avec des fonctionnalités innovantes incluant l'animation squelettique et la conversion de croquis en 3D, révolutionnant la création de contenu pour le métavers et les jeux
Open-Weights
ComfyUI célèbre son deuxième anniversaire, évoluant d'un projet personnel en l'outil visuel d'IA générative le plus populaire au monde. Joyeux anniversaire, ComfyUI !
MIT
NVIDIA lance le nouveau modèle Sana capable de générer rapidement des images jusqu'à une résolution 4K sur des GPU d'ordinateurs portables grand public, avec support d'intégration ComfyUI
Open-Weights
ByteDance lance l'outil de synchronisation labiale open source LatentSync, basé sur un modèle de diffusion d'espace latent conditionné par l'audio, permettant une synchronisation labiale précise pour les personnes réelles et les personnages animés tout en résolvant les problèmes de scintillement d'images
Open-Weights
Texte vers imageByteDance et l'Université des Sciences et Technologies de Chine lancent conjointement l'adaptateur VMix, qui améliore la qualité esthétique des images générées par l'IA grâce à la technologie de contrôle du mélange d'attention croisée, s'intégrant parfaitement aux modèles existants sans nécessiter de réentraînement
Open-Weights
Image vers 3DLe modèle StereoCrafter, développé conjointement par Tencent AI Lab et ARC Lab, est désormais open source. Il peut convertir n'importe quelle vidéo 2D en vidéo 3D stéréoscopique de haute qualité, compatible avec divers appareils d'affichage 3D, y compris l'Apple Vision Pro
Open-Weights
Édition d'imagelllyasviel, créateur de ControlNet et IC-Light, lance LuminaBrush, un outil offrant un contrôle précis des effets d'éclairage grâce à un cadre en deux étapes et une expérience de pinceau intuitive
Open-Weights
Le projet Genesis lance un nouveau moteur physique universel et une plateforme d'IA générative, intégrant la simulation physique, le contrôle robotique et les capacités d'IA générative pour fournir des solutions complètes pour les applications robotiques et d'IA physique
Open-Weights
Odyssey présente Explorer, le premier modèle génératif de mondes capable de convertir des images 2D en mondes 3D complets, avec prise en charge d'effets dynamiques et d'édition avec des outils créatifs conventionnels, apportant des changements révolutionnaires pour le cinéma, les jeux et d'autres domaines
Open-Weights
Texte vers imageLe populaire plugin Impact-Pack de ComfyUI contient un malware de minage via le package Ultralytics, affectant de nombreux utilisateurs. Cet article détaille la situation du virus et les solutions.
Open-Weights
Texte vers imageLuma présente les modèles révolutionnaires de génération d'images Photon et Photon Flash, redéfinissant la création par IA avec une valeur exceptionnelle et une qualité d'image supérieure
Open-Weights
Tencent lance officiellement HunyuanVideo, le plus grand modèle de génération vidéo de l'industrie avec 13 milliards de paramètres, atteignant des performances de pointe en termes de qualité vidéo et de stabilité des mouvements
Open-Weights
Texte vers imageStability AI présente trois nouveaux modèles ControlNet pour Stable Diffusion 3.5 Large, comprenant Blur, Canny et Depth, offrant un contrôle plus précis sur la génération d'images
Open-Weights