For the complete documentation index, see llms.txt. This page is also available as Markdown.

Hunyuan World 2.0 (3D-модель мира)

Разверните Tencent HY-World 2.0 — первую open-source SOTA 3D world model — на GPU Clore.ai для генерации 3D-сцен из текста/изображений/видео

Выпущено 15 апреля 2026 года — Tencent Hunyuan выпустила HY-World 2.0, первую полностью open-source SOTA-модель 3D-мира. Это руководство охватывает WorldMirror 2.0 (поставляемый компонент реконструкции с ~1,2 млрд параметров). Родственные модели HY-Pano 2.0 и WorldStereo 2.0 помечены как «скоро появятся» в официальном репозитории — см. дорожную карту ниже.

HY-World 2.0 — это многомодульный фреймворк Tencent для модели мира, предназначенный для реконструкции, генерации и симуляции полноценных 3D-сцен. В отличие от генераторов мешей для отдельных объектов, HY-World принимает текст, одно- или многовидовые изображения либо видео и выдаёт редактируемые представления мира — меши, 3D Gaussian Splats, облака точек, карты глубины, нормали поверхности и восстановленные параметры камеры — готовые для использования в Unity, Unreal или Blender.

Первый публичный набор весов охватывает WorldMirror 2.0 (~1,2 млрд параметров, BF16) — половину стека, отвечающую за реконструкцию. Он работает примерно в 12–24 ГБ VRAM на одном GPU и поддерживает гибкое разрешение от 50K до 500K пикселей, а также шардинг FSDP на нескольких GPU для более крупных задач. Python API (diffusersв стиле) и CLI через torchrun, а также демо на Gradio поставляются из коробки. Узла ComfyUI не официально пока нет — только варианты от сообщества.

Ключевые характеристики

Параметр
Значение

Компонент

WorldMirror 2.0 (поставляется); HY-Pano 2.0 + WorldStereo 2.0 — скоро появятся

Параметры

~1,2 млрд (BF16)

Входные модальности

Текст · изображение с одного ракурса · изображения с нескольких ракурсов · видео

Вывод

Меш · 3D Gaussian Splat · облако точек · глубина · нормали · параметры камеры

VRAM

~12–24 ГБ на одном GPU; FSDP для нескольких GPU

Диапазон разрешений

50K – 500K пикселей (flex-res)

Лицензия

tencent-hy-world-2.0-community (кастомная — см. ниже)

Выпуск

2026-04-15

Почему HY-World 2.0?

  • Первая open-source SOTA-модель мира — в этой категории нет закрытых конкурентов

  • Полный вывод сцены, а не только мешей — Gaussian Splats + геометрия + камера за один проход

  • Мультимодальные входы — один и тот же пайплайн работает с текстом, изображениями и видео

  • Готовность к FSDP — масштабирование на 2–8 GPU для высокоразрешённого или пакетного инференса

  • Готовность для игровых движков — выводы можно напрямую переносить в Unity, Unreal и Blender


Требования

Компонент
Минимум
Рекомендуется

VRAM GPU

16 ГБ (RTX 4080 / 3090)

24–80 ГБ (RTX 4090 / A100 / H100)

Системная RAM

32 ГБ

64–128 ГБ

Диск

80 ГБ

200 ГБ

CUDA

12.8+

12.8+

Python

3.10

3.10

PyTorch

2.4.0

2.4.0+

Режим для нескольких GPU требует ≥ 1 входного изображения на GPU. Для одного опорного изображения используйте один GPU и включайте FSDP только для пакетных или высокоразрешённых задач.


Вариант A — быстрый старт с Docker + torchrun

Минимальный docker-compose.yml для контейнера Clore.ai (официальный образ Tencent ещё не опубликован — здесь используется базовый PyTorch и установка репозитория внутри):

Запустите задачу многогPU-реконструкции с FSDP и BF16:


Вариант B — ручной Python API

Запустите демо Gradio на порту 7860:

Для Gradio на нескольких GPU с FSDP:


Рекомендации по GPU для Clore.ai

Задача
GPU
VRAM
Почему
Стоимость на Clore.ai

Одно изображение → сцена, dev/preview

RTX 4090

24 ГБ

BF16 легко помещается, быстрая итерация

$0.14–0.42/ч

Восстановление видео с нескольких ракурсов

A100 40 ГБ

40 ГБ

Обрабатывает кадры 200K+ px без OOM

Высокое разрешение, пакетная обработка (production)

A100 80 ГБ

80 ГБ

Полные 500K px flex-res, большие пакеты

FSDP с несколькими GPU / research

2–4× H100

160–320 ГБ

Задачи с шардингом на масштабе обучения

~$4.16/ч


Сценарии использования

  • Разработка игр — превращайте концепт-арт в грубые 3D-окружения для blockout и greybox

  • Контент для AR/VR — генерируйте сцены Gaussian Splat, пригодные для Unity/Unreal, с почти фотографической точностью

  • Превиз для кино и анимации — реконструируйте площадки по фотографиям с места съёмки для виртуальной кинематографии

  • Архитектурная визуализация — превращайте референсные снимки или текстовые брифы в редактируемые 3D-прогулки

  • Робототехника + симуляция — синтезируйте 3D-среды для обучения из разреженных реальных видеоматериалов


дорожную карту

Tencent указала следующее как «скоро появится» в официальном репозитории:

  • HY-Pano 2.0 — генерация панорам на 360° (временная замена: HunyuanWorld 1.0)

  • WorldStereo 2.0 — расширение мира / синтез нового ракурса (временная замена: оригинальный WorldStereo)

  • WorldNav — планирование траектории для перемещения по сцене

  • Полный код пайплайна генерации мира — точка входа текст/изображение → полный мир

WorldMirror 2.0 (reconstruction) — единственный компонент с публичными весами на сегодня. Следите за страницей модели на HF за выходами.


Устранение неполадок

Проблема
Решение

CUDA out of memory на GPU с 16 ГБ

Снизьте входное разрешение до 50K px или перейдите на RTX 4090 (24 ГБ). Включите --enable_bf16

FSDP зависает при запуске

Убедитесь, что число входных изображений ≥ --nproc_per_node. FSDP также требует NCCL + совпадающую CUDA на всех GPU

flash-attn не удаётся установить

Попробуйте предварительно собранный wheel pip install flash-attn --no-build-isolation для CUDA 12.8; если всё равно не получится, пайплайн работает (медленнее) и без него

Интерфейс Gradio недоступен на Clore.ai

Пробросьте порт 7860 в конфигурации контейнера Clore или запустите с --share

Вопросы о лицензии для коммерческого использования

Прочитайте License.txt в репозитории — это tencent-hy-world-2.0-communityа не стандартная OSS


Дальнейшие шаги

Последнее обновление

Это было полезно?