Hunyuan Video - новый опенсорс 13B видео генератор от Tencent Качество офигенное, даже для 13B модели
Hunyuan Video - новый опенсорс 13B видео генератор от Tencent
Качество офигенное, даже для 13B модели, хоть и генерировать может максимум пять секунд. Но, самое главное - доступны веса.
Генерится 129 кадров, что как раз чуть больше 5 сек в 24 fps.
По архитектуре: используют Temporal VAE с 16 каналами и 4x даунсеплингом по времени, то есть это 32 latent frame’а. То есть автоэнкодер не самый навороченный – в других моделях и видео и 128 каналов и более агрессивный даунсемплинг по времени.
Сама модель очень похожа га Flux, где сначала идут two-stream блоки как в SD3 , где картиночные и текстовые токены обрабатываются параллельно, а затем идёт сермя обычныз DiT блоков.
В качестве текстового энкодера используют Clip и Multimodal LLM ( llava-llama-3-8b ) вместо традиционного T5. Говорят, что с MLLM у них достигается боле качественный prompt alignment.
Чтобы запустить модель нужно минимум 45 гигабайт видеопамяти для 544x960 видео и 60 гигов для 720p. Умельцы явно подкрутят и оптимизируют модельку, так что запуск на консьюмерских видюхах на низком разрешении не исключён.
Статья занятная, стоит прочитать в деталях.
Я пока сам их моделью ничего не генерил, но предполагаю, что одно видео будет генерится минут 10.
Демка (нужен китайский номер)
Веса
Пейпер
1 view
12
3
1 week ago 00:01:17 1
️ HunyuanVideo : модели генерации видео по тексту от Tencent. Tencent опубликовала в отрытый доступ модели с 13 млрд
1 week ago 00:00:05 1
Как попробовать Хуньянь Видео Генератор. Кстати, если вампрямневтерпеж
1 week ago 00:01:23 2
Hunyuan Video - новый опенсорс 13B видео генератор от Tencent Качество офигенное, даже для 13B модели
1 week ago 00:01:23 1
Вы будете смеяться, но у нас еще один опенсорсный видео-генератор. От Tencent
1 week ago 00:01:23 138
腾讯视频
2 months ago 00:04:56 1
ComfyUI Flux Tile Upscaling: Best Flux Workflow to Enhance with 8k Tile Image Upscaling | Update
9 months ago 00:00:20 4
4/24- Chen Style 24 Forms Xinyi Hun Yuan Tai Chi
10 months ago 00:09:37 1
Комплекс «Пять способов расслабления тела» (松身五法 song shen wu fa) Хуан Син Сяня #тайцзицюань #цигун
11 months ago 00:00:21 2
3/24- Chen Style 24 Forms Xinyi Hun Yuan Tai Chi
11 months ago 00:06:52 1
陳氏心意混元太極- 24式 (背面)
12 months ago 00:03:55 4
Hunyuan 24. 1ª Parte 一
3 years ago 00:04:28 1
Nassim Haramein - Complementarity of finite and infinite spaces
3 years ago 00:01:09 6
Universo Hun Yuan, videoclip 1
4 years ago 00:05:40 1
Feng Zhiquian-
4 years ago 00:07:01 1
Feng Zhiqiang Part 1 - Form Demonstration 2011
4 years ago 00:48:37 4
Practical Combat Skills of Hunyuan Sanshou Quan
4 years ago 01:02:16 6
Hun Yuan Tai Chi. 24 Move Primordial Tai Chi
4 years ago 00:17:14 21
Powerful Zhineng Qigong - La Chi - Kai Ho instr. by Klangzentrum