VR Studio Intro
VRStudio — софт для создания анимированных видео с помощью VR-шлема. Надеваешь шлем за $500, двигаешь руками и головой, записываешь движения на 3D-персонажа. Получаешь видео для YouTube без студии, камер и монтажа лица.
Зачем это нужно
Формат «говорящая голова» требует камеру, свет, фон, макияж. VR-шлем заменяет всё это. Движения рук и головы захватываются автоматически. Персонаж может быть любым — маска, шляпа с глазами, летающая голова с щупальцами.
Реалистичного человека делать не нужно. Мозг не любит «почти реальное» (зловещая долина). Упоротый стиль современных клипов работает лучше.
Пайплайн
- Написал сценарий
- Сделал видеодорожку с вставками
- Надел шлем, отыграл сцены с телепромтером
- Свёл в браузере
- Залил на YouTube
Что сделано
Единое приложение — один проект на Godot запускается и на шлеме, и на компьютере. Шлем отправляет позиции нод (голова, руки, камера) на комп по сети. На компе видна та же сцена с теми же движениями.
Запись на компе — приложение на компьютере записывает видео. Надел шлем, отыграл сцену, получил готовый материал.
Камера в руках — камеру можно перетаскивать в VR и снимать себя с любого ракурса. Движения камеры тоже передаются на комп.
Демка «Поезд» — персонаж стоит на носу поезда, вокруг рельсы, острова, странные пейзажи. Дым из паровоза, движущиеся деревья, террайн из Blender. Можно двигать камеру, всё транслируется на комп и записывается.
Референс по захвату анимации: https://github.com/Malcolmnixon/GodotXRAnimationRecorder
Что хочется сделать
Персонажи — маска с дредами, шляпа графа с глазами, птица с мемными руками, чумной доктор, пончо со щупальцами вместо рук.
Диалоги с самим собой — записать одного персонажа, потом второго на ту же дорожку. Получится спор нескольких альтер эго.
Редактор — секвенсер для монтажа записей. Пока отменён, потому что DaVinci Resolve умеет автоматизацию.
Lip Sync — синхронизация губ персонажа с голосом.
Курение кальяна — демка с интерактивным реквизитом в руках персонажа.
Станции — поезд останавливается на тематических станциях. Каждая станция — одна тема разговора.
Продажа персонажей — выпускать ролики персонажем, потом продавать копию за $100-200 или эксклюзив за $1-2к.
Аналоги и связанные проекты
Animaze by FaceRig — снимает лицо с веб-камеры и накладывает на аватар. VRStudio отличается тем, что захватывает движения всего тела через VR-шлем, а не только лицо.
VMC Protocol — открытый протокол для захвата движений в VR на базе OSC. Много кто уже думает над этой задачей. Документация: https://protocol.vmc.info/english.html
SlimeVR — дешёвый трекинг всего тела через отдельные датчики. Можно комбинировать со шлемом для полного захвата. https://slimevr.dev/
Монетизация
- Подписка на софт со стандартными персонажами
- Разработка кастомных персонажей, окружений, расширений
Стек
- Godot — основное приложение, работает и на шлеме, и на компе
- Unity — альтернатива для доступа к готовым ассетам
- Blender — моделирование террайна и персонажей
- DaVinci Resolve — финальный монтаж с автоматизацией
Чем можно помочь
3D-моделирование — персонажи, сцены, станции. Стиль — упоротый, не реалистичный.
Unity/Godot — доработка проигрывателя, новые фичи.
Тестирование — записывать демки, искать баги в синхронизации.
Сценарии — идеи для тем и станций, структура выпусков.
Связанный проект: Сад прошлых себя
VR-приложение для создания мемориалов своим прошлым версиям. Не кладбище мёртвых — место памяти для живых.
Идея — у каждого человека есть «прошлые я»: тот, кем был в школе, на первой работе, в прошлых отношениях. Эти версии умерли, но мы их помним. Сад позволяет создать надгробия с датами «начал тогда-то, закончил тогда-то» и посещать их в VR.
Формат:
- VR-версия для погружения
- Веб-версия для тех, у кого нет шлема
- Публичные сады — можно показать другим, что пережил и потерял
Монетизация:
- Коллекции моделей надгробий и декораций
- Готовые шаблоны садов для быстрого старта
Геймификация — поверх можно добавить шутер для желающих пострелять по своим демонам.
Примеры похожего контента
Простой персонаж без анимации лица: https://youtu.be/GQLmgp2tGO0?t=5
3D-персонаж с захватом движений: https://youtu.be/dzCljY4xv3w?t=726
Захват движений в BeatSaber: https://www.youtube.com/watch?v=flAsTHJ6mlU
Интерактивный стрим: https://youtu.be/P1DYzuqi9u0?t=2195
Демки и обсуждение: https://t.me/+e3SSH7adnGwxNjUy