Видео в Mixamo-анимацию: бесплатно и локально

Что в ролике
Автор показывает, как превратить любое видео в анимацию и применить её к персонажу Mixamo бесплатно и локально с помощью инструмента motion to mix rig. Сырой результат нужно дорабатывать: у первой версии «плывут» ноги и корень, а после уточняющего прохода в Claude или ChatGPT ноги стабилизируются. Для создания персонажа он использует японский инструмент Charakuro, который запускается локально как веб-страница и собирает модульного аватара с spring bones, а модели генерирует через Tripo Smart Mesh и Smart UV. Параллельно автор показывает нового конкурента Mixamo — Action Forge, бесплатный браузерный инструмент с большой библиотекой анимаций и поддержкой пропсов вроде меча или посоха. Ещё одна новинка — Eden Live от Vast AI, опенсорсный движок рендеринга в реальном времени, который превращает видео в стилизованную картинку на одном GPU со скоростью 24 fps. В подборку также попали Asset Furnace с авто-риггингом и skin tokens (работает в основном на Mac) и свежая модель Gemini 4, которую автор называет дешёвой, но не впечатляющей: результат в 10 раз дешевле Opus 5,5, но требует множества уточнений. Под конец он упоминает Blender-аддон Gloss для текстурирования отдельных граней, метод Dirty MoCap для очистки грязных маркеров и статью Pammy про совместное движение человека и предмета.
Практика
- Что получишь
- Сможете превратить видео в анимацию для Mixamo-персонажа и довести её до рабочего состояния с помощью AI-очистки, а также получите обзор бесплатных альтернатив вроде Action Forge и Asset Furnace и поймёте, какие инструменты подходят для ваших задач.
- Первый шаг
- Скачайте motion to mix rig с GitHub и попросите ChatGPT или Claude настроить локальное Python-окружение, затем скормите тестовое видео с танцем или idle.
- Цифры
- —24 fps — частота кадров, с которой Eden Live рендерит видео в реальном времени на одном GPU
- —480p или 720p — доступные разрешения для рендеринга в Eden Live
- —в 10 раз дешевле — во столько, по оценке автора, обходится использование Gemini 4 по сравнению с Opus 5,5
- —RTX 5090 — пример потребительской видеокарты, на которой Eden Live уже запускается
- Честно
- Автор даёт партнёрскую ссылку на Tripo с бонусными кредитами или скидкой, а подробный отчёт о своих экспериментах выкладывает на Patreon. Для Charakuro понадобится аккаунт Tripo и умение работать с японскими промптами, а сырой результат motion to mix rig требует дополнительной очистки в Claude или ChatGPT — без неё анимация не годится. Eden Live по-настоящему тяжёлый: нужен мощный GPU вроде RTX 5090, а Asset Furnace пока заточен под Mac.
Если слова незнакомы — 4 терминов
- spring bonesдополнительные кости, которые автоматически качаются при движении, чтобы одежда или волосы выглядели живыми
- риггингсоздание скелета и связей для 3D-модели, чтобы её можно было анимировать
- skin tokensтехнология генерации поверхности персонажа, которая добавляет кожу и детали на основе токенов
- пропспредмет в руках персонажа, например меч или посох, который анимируется вместе с ним
Понадобится экран
Часть информации есть только на экране (проход по интерфейсу). Открыть на YouTube с 1:39.
Связки из этого ролика
3 шт.- Tripo Smart Mesh + Smart UV
- ComfyUI + Action Forge + Godot
- Claude + Blender
Компоненты
16 шт.Цитаты-доказательства
дословно из субтитровФормат: реакция на новость · для практикующих · уверенность разметки 0.8 · источник