Hunyuan World 2.0 (modèle 3D du monde)
Déployez Tencent HY-World 2.0 — le premier modèle 3D du monde open source SOTA — sur les GPU Clore.ai pour la génération de scènes 3D à partir de texte, d'images ou de vidéos
HY-World 2.0 est le framework de modèle de monde multimodal de Tencent pour reconstruire, générer et simuler des scènes 3D complètes. Contrairement aux générateurs de maillages pour objets uniques, HY-World ingère du texte, des images à vue unique ou multi-vues, ou de la vidéo et produit des représentations de monde modifiables — maillages, splats gaussiens 3D, nuages de points, cartes de profondeur, normales de surface et paramètres de caméra récupérés — prêtes à être intégrées dans Unity, Unreal ou Blender.
Les premiers poids publics couvrent WorldMirror 2.0 (~1,2 milliard de paramètres, BF16) — la partie reconstruction de la pile. Il fonctionne avec ~12–24 Go de VRAM sur un seul GPU et prend en charge une résolution flexible de 50K à 500K pixels, ainsi que le sharding FSDP multi-GPU pour des charges de travail plus importantes. Une API Python (diffusersde type), interface CLI via torchrun, et une démo Gradio sont fournis prêts à l'emploi. Un nœud ComfyUI est pas pas encore officiel — uniquement des ports communautaires.
Spécifications clés
Composant
WorldMirror 2.0 (livré) ; HY-Pano 2.0 + WorldStereo 2.0 à venir
Paramètres
~1,2 milliard (BF16)
Modalités d'entrée
Texte · image à vue unique · images multi-vues · vidéo
Sortie
Maillage · splat gaussien 3D · nuage de points · profondeur · normales · paramètres de caméra
VRAM
~12–24 Go sur un seul GPU ; FSDP pour multi-GPU
Plage de résolution
50K – 500K pixels (résolution flexible)
Licence
tencent-hy-world-2.0-community (personnalisé — voir ci-dessous)
Version
2026-04-15
Pourquoi HY-World 2.0 ?
Premier modèle de monde SOTA open source — aucun concurrent propriétaire dans cette catégorie
Sortie de scène complète, pas seulement des maillages — splats gaussiens + géométrie + caméra en une seule passe
Entrées multimodales — le même pipeline gère le texte, les images et la vidéo
Prêt pour FSDP — mise à l'échelle sur 2 à 8 GPU pour l'inférence haute résolution ou par lots
Prêt pour les moteurs de jeu — les sorties s'intègrent directement dans Unity, Unreal et Blender
Exigences
VRAM GPU
16 Go (RTX 4080 / 3090)
24–80 Go (RTX 4090 / A100 / H100)
RAM système
32 Go
64–128 Go
Disque
80 Go
200 Go
CUDA
12.8+
12.8+
Python
3.10
3.10
PyTorch
2.4.0
2.4.0+
Option A — Démarrage rapide avec Docker + torchrun
Un minimum docker-compose.yml pour un conteneur Clore.ai (l'image officielle Tencent n'est pas encore publiée — cela utilise la base PyTorch et lance l'installation du dépôt à l'intérieur) :
Lancez un travail de reconstruction multi-GPU avec FSDP et BF16 :
Option B — API Python manuelle
Lancez la démo Gradio sur le port 7860 :
Pour Gradio multi-GPU avec FSDP :
Recommandations GPU Clore.ai
Image unique → scène, développement/aperçu
RTX 4090
24 Go
BF16 tient confortablement, itération rapide
0,14–0,42 $/h
Traitement par lots haute résolution (production)
A100 80 Go
80 Go
Résolution flexible complète de 500K px, gros lots
FSDP multi-GPU / recherche
2–4× H100
160–320 Go
Charges de travail à l'échelle de l'entraînement, réparties en shards
~4,16 $/h
Cas d’usage
Développement de jeux — transformez des concept arts en environnements 3D sommaires pour le blockout et le greyboxing
Contenu AR/VR — générez des scènes en splats gaussiens jouables dans Unity/Unreal avec une fidélité proche de la photographie
Prévisualisation cinéma et animation — reconstruisez des décors à partir de photos prises sur le lieu de tournage pour la cinématographie virtuelle
Visualisation architecturale — convertissez des photos de référence ou des briefs textuels en visites 3D modifiables
Robotique + simulation — synthétisez des environnements d'entraînement 3D à partir d'images réelles clairsemées
Feuille de route
Tencent a indiqué les éléments suivants comme « à venir » dans le dépôt officiel :
HY-Pano 2.0 — génération de panoramas à 360° (en attendant : HunyuanWorld 1.0)
WorldStereo 2.0 — extension de monde / synthèse de nouvelles vues (en attendant : WorldStereo original)
WorldNav — planification de trajectoire pour la traversée de scène
Code complet du pipeline de génération de monde — le point d'entrée texte/image → monde complet
WorldMirror 2.0 (reconstruction) est aujourd'hui le seul composant avec des poids publics. Gardez un œil sur la page du modèle HF pour les nouvelles versions.
Dépannage
Mémoire CUDA insuffisante sur un GPU de 16 Go
Réduisez la résolution d'entrée vers 50K px, ou passez à une RTX 4090 (24 Go). Activez --enable_bf16
FSDP se bloque au lancement
Assurez-vous que le nombre d'images d'entrée est ≥ --nproc_per_node. FSDP nécessite aussi NCCL + une version CUDA identique sur tous les GPU
flash-attn l'installation échoue
Essayez la roue précompilée pip install flash-attn --no-build-isolation sur CUDA 12.8 ; si cela échoue encore, le pipeline fonctionne (plus lentement) sans lui
L'interface Gradio n'est pas accessible sur Clore.ai
Redirigez le port 7860 dans la configuration du conteneur Clore, ou lancez avec --share
Questions de licence pour un usage commercial
Lisez License.txt dans le dépôt — il s'agit de tencent-hy-world-2.0-community, et non d'OSS standard
Étapes suivantes
Hunyuan3D 2.1 — le générateur texte/image-vers-maillage à objet unique de Tencent (pipeline plus petit, de style Apache, cas d'usage différent)
TRELLIS 3D — le générateur d'assets 3D structurés de Microsoft
Gaussian Splatting — pipeline de rendu pour les sorties 3DGS produites par HY-World
Mis à jour
Ce contenu vous a-t-il été utile ?