Retarget human motion from video to an Adobe Mixamo-rigged 3D character.
Motion2MixamoRig для Blender — Посібник користувача
简体中文 · 繁體中文 · English · 한국어 · 日本語 · Deutsch · Русский · العربية · Tiếng Việt · Filipino · ไทย · Français · Español · Türkçe · नेपाली · Bahasa Indonesia · Polski · Nederlands · Italiano · Português (Brasil) · Українська · Čeština · हिन्दी · Svenska
Перетворіть відео однієї людини на анімованого персонажа Mixamo просто в Blender. Програмування і термінал не потрібні.
Поки що перевірено лише на macOS (Apple Silicon). Збірка для Windows незабаром з’явиться.
Що потрібно
- Blender 4.2 або новіший
- З’єднання з інтернетом для першого налаштування
- Близько 8 ГБ вільного місця на диску (середовище ~1,3 ГБ + моделі ~5,6 ГБ)
- Безкоштовний обліковий запис SMPL-X і безкоштовний обліковий запис Adobe (для Mixamo); див. кроки 4 і 5
1. Завантажте додаток
Перейдіть до останнього випуску і завантажте zip для свого комп’ютера:
| Ваш комп’ютер | Файл |
|---|---|
| Mac з Apple Silicon (M1/M2/M3/M4) | motion2mixamorig-<version>-macos-arm64.zip |
| Windows | Незабаром |
Наприклад, motion2mixamorig-0.1.8-macos-arm64.zip: 0.1.8 — версія
додатка, macos-arm64 — платформа. Якщо вибрати не той, Blender відмовить
у встановленні і назве платформу, якої очікував.
Не розпаковуйте його. Blender встановлює zip сам.
2. Встановіть його в Blender
- Edit → Preferences → Get Extensions
- Клацніть маленький ∨ угорі праворуч → Install from Disk…
- Виберіть zip. Motion2MixamoRig з’явиться в списку, уже ввімкнений.
- Закрийте Preferences. У 3D Viewport натисніть N, потім клацніть вкладку Motion2MixamoRig праворуч.
3. Встановіть середовище (один раз)
На панелі клацніть Встановити середовище (один клік) (Install Runtime (one click)).
Додаток завантажує власний Python і бібліотеки (1,4 ГБ) у
`/Motion2MixamoRig/`. Нічого іншого на комп’ютері він не чіпає. Це триває
кілька хвилин; смуга поступу показує поточний крок.
4. Отримайте модель тіла SMPL-X
SMPL-X — безкоштовна модель тіла, потрібна додатку. Ліцензія не дозволяє нам її поширювати, тож ви завантажуєте її самі, один раз:
- Відкрийте smpl-x.is.tue.mpg.de і натисніть Register. Прийміть ліцензію і підтвердьте електронну пошту.
- Увійдіть, відкрийте Download і завантажте модель SMPL-X (версію NPZ).
- Розпакуйте і знайдіть
SMPLX_NEUTRAL.npz. - У Blender клацніть Вибрати модель SMPL-X… (Choose SMPL-X Model…) і виберіть цей файл. Панель покаже Модель SMPL-X: знайдено (SMPL-X model: found).
5. Отримайте персонажа Mixamo
- Відкрийте mixamo.com і увійдіть з обліковим записом Adobe.
- Вкладка Characters → виберіть персонажа (наприклад, Y Bot).
- Download → Format FBX Binary (.fbx), Pose T-pose → Download.
6. Згенеруйте рух
У полі Input:
- Тип джерела (Source Type): Video (або Image для однієї пози)
- Файл джерела (Source File): ваш кліп. На ньому має бути рівно одна людина, від голови до п’ят у кадрі весь час.
- FBX рига Mixamo (Mixamo Rig FBX): персонаж із кроку 5
- Виявляти руки (Detect Hands) вимкнено. Вмикайте лише тоді, коли пальці
мають рухатися. Потім клацніть Вибрати модель руки MANO… (Choose MANO
Hand Model…) і виберіть
MANO_RIGHT.pkl. Цей файл отримують так само, як SMPL-X: зареєструйтеся на mano.is.tue.mpg.de, завантажте Models & Code і розпакуйте. Перший прохід рук завантажує ще близько 2,7 ГБ, один раз, і триває приблизно вдвічі довше за прохід лише тіла. Коли руки ввімкнено, з’являється Згладжування пальців (секунди) (Finger Smoothing (seconds)). Воно пом’якшує рух пальців. Типове значення — 0,08 секунди; 0 лишає те, що виявлено. - Клацніть Згенерувати рух (Generate Motion)
Коли все завершиться, анімований персонаж імпортується в сцену автоматично. Поставлена стопа лишається там, де стала, а підошва ставиться на підлогу Blender. На цю підлогу додається сітка Позначки на підлозі (Floor Markers) (хрест кожні 0,5 м). Прапорець Позначки на підлозі (Floor Markers) в розділі Поступ / Результат показує або ховає її.
Перший запуск триває довше — це нормально
Першого разу додаток завантажує близько 5,6 ГБ моделей. Панель показує розмір завантаження, швидкість і час, що лишився. Моделі завантажуються лише раз.
Після цього відео обробляється на вашому комп’ютері. На CPU Mac кліп на 10 секунд триває кілька хвилин. Blender лишається придатним до роботи, поки йде обробка, а Скасувати (Cancel) зупиняє завдання.
Поради для доброго результату
- Лише одна людина, видно все тіло, без обрізання по краях
- Нерухома камера, добре світло, простий одяг, а не просторий чи такий, що майорить
- Короткі кліпи (5–20 секунд) швидше спробувати спершу
Оновлення до нової версії
Додаток оновлюється часто. Щоб оновити:
- Завантажте найновіший zip з останнього випуску.
- Get Extensions → вилучіть старий Motion2MixamoRig, повністю закрийте Blender (Cmd+Q), відкрийте знову і встановіть новий zip.
- На панелі клацніть Оновити середовище (Update Runtime).
Оновлення зберігає вже завантажені моделі, тож воно швидке. Встановлена версія показана поруч із додатком у Get Extensions.
Панель
- ⚙ біля заголовка показує або ховає поле Налаштування (Setup).
- Налаштування: мова, середовище, SMPL-X, пристрій (CPU — безпечний вибір) і Перевірити середовище (Check Environment).
- Input: що анімувати, Модель тіла (Body Model, GVHMR) і Виявляти руки (Detect Hands).
- Поступ / Результат (Progress / Result): поступ, нещодавній журнал і після завдання Імпортувати згенерованого персонажа (Import Generated Character), прапорець Позначки на підлозі (Floor Markers), Відкрити теку виводу (Open Output Folder), Показати повний журнал (View Full Log).
- Діагностика (Diagnostics): де частини тіла персонажа входять одна в одну
(рука всередині голови, схрещені руки). Червоні клітинки на смузі — кадри з
проблемою; клацніть одну, щоб перейти туди. Трикутник під смугою стежить за
поточним кадром, а нижче — частини, які перетинаються, і глибина.
Попередня / Наступна (Previous / Next) переходять між проблемами.
Відкрити HTML-звіт (Open HTML Report) відкриває у браузері звіт із
вихідним відео поруч із персонажем (першого разу збирання триває близько
15 секунд). Для цього відео на комп’ютері має бути ffmpeg (на Mac:
brew install ffmpeg); без нього панель лишається порожньою. Персонаж стоїть на фіксованих хрестах підлоги, один кожні 0,5 м, щоб було видно, чи він ковзає. Бурштинова смуга над червоними доріжками — для нотаток на око. Вони перелічені в Notes праворуч; клацніть одну, щоб перейти до неї. Download notes зберігає ці нотатки разом із моментами перетину. Файл називається за вихідним відео.
Панель додатка доступна 19 мовами. Авто (Auto) стежить за мовою Blender, коли ця мова є серед них; інакше панель лишається англійською. Змініть це в полі Налаштування, пункт Мова інтерфейсу (UI Language). Цей посібник українською; такої опції на панелі ще немає, а англійські назви в дужках — це текст кнопок.
Якщо щось пішло не так
| Що ви бачите | Що робити |
|---|---|
| Не вдалося встановити середовище (Runtime installation failed) | Перевірте інтернет і клацніть кнопку знову. Журнал: ~/Motion2MixamoRig/logs/setup.log |
| Модель SMPL-X: немає (SMPL-X model: missing) | Повторіть крок 4 і виберіть SMPLX_NEUTRAL.npz |
| Модель руки MANO: немає (MANO hand model: missing) | Увімкніть Виявляти руки, потім Вибрати модель руки MANO… і виберіть MANO_RIGHT.pkl |
| FBX Mixamo недійсний (Mixamo FBX invalid) | Завантажте персонажа знову як FBX Binary, T-pose |
| У вхідних даних кілька людей (Input contains multiple people) | Візьміть кліп лише з однією людиною |
| Людину не виявлено (No person was detected) | Переконайтеся, що видно все тіло і що світла достатньо |
| Процес конвеєра несподівано завершився (Pipeline process exited unexpectedly) | Клацніть Показати повний журнал (View Full Log) |
Коли просите про допомогу, додайте журнал і вкажіть версію додатка.
Видалення
- Get Extensions → вилучіть Motion2MixamoRig.
- Видаліть теку
~/Motion2MixamoRig(ваша домашня тека →Motion2MixamoRig). Вилучення додатка її не видаляє, а в ній близько 7 ГБ середовища й моделей, плюс згенеровані результати вapp/outputs/.
Ліцензія
Motion2MixamoRig призначений лише для некомерційного використання: він
спирається на дослідницькі моделі (як-от GVHMR і SMPL-X), ліцензії яких не
дозволяють комерційного використання. Див. NOTICE.md.