Осваивая Движение:
Основы раскрыты

Виртуальная прямая трансляция отображает виртуальные сцены и персонажей в реальном времени для зрителей, заменяя оригинальные, более дорогие физические декорации и живые выступления их виртуальными аналогами. Это предоставляет зрителям новый визуальный опыт и одновременно снижает затраты, связанные со строительством декораций. Виртуальная прямая трансляция стала новой интегрированной технологией, возникшей после появления ИИ, виртуальной реальности и технологий захвата движения. Технология быстро развивалась, особенно после начала пандемии.

В процессе виртуальной прямой трансляции реальные движения и выражения лиц человека отображаются в реальном времени в виде виртуальных аватаров. Это включает в себя применение технологии захвата движения. Итак, как эта технология применяется в виртуальной прямой трансляции?

NOKOV захват движения достиг высокой интеграции с инструментом виртуального прямого эфира VUP. При прикреплении отражающих маркеров к ведущему оптическая система захвата движения фиксирует координаты этих маркеров. Информация с нескольких точек используется для определения данных позы жестких объектов, что позволяет создавать и распознавать модели ведущих. Как только данные позы импортируются в стороннее программное обеспечение и связываются с моделью, система может производить эффекты для фильмов, игр и виртуальных прямых эфиров.

Эта статья будет разделена на три этапа, в которых будет представлен процесс реализации применения захвата движения для виртуального прямого эфира с точки зрения конкретных операционных процедур.

Размещение маркера

Маркер, также известный как отражающий маркер, — это отражающие сферы, размещаемые на объектах, которые захватываются. Они отражают инфракрасный свет, испускаемый камерами захвата движения, чтобы получить их координатную информацию в 3D.

При установке маркеров следует учитывать следующие моменты: ① Размер маркеров, для общего захвата движений человека рекомендуются маркеры размером 12-15 мм; ② Метод закрепления маркеров, маркеры должны быть прочно прикреплены к поверхности тела, а при надевании костюма для захвата движений можно использовать липучку для надежной фиксации; ③ Позиция установки маркеров, при создании системы виртуальной трансляции профессионалы, как правило, предлагают стандартные шаблоны размещения.

При самостоятельном проектировании учтите несколько моментов: 1) Убедитесь, что точки прикреплены с внешней стороны костей и легко различимы; 2) Прикрепляйте точки к костным ориентирам и суставам; 3) Используйте несколько точек для определения жесткого тела.

Создание скелетных систем

       После получения данных облака точек о моделях программное обеспечение может установить скелетную систему модели. Это создает специфические информационные шаблоны из набора отражающих маркеров, описывающих точки на модели, линии между этими точками и жесткие тела, определяемые этими точками, называемые Markerset.

Оптические системы захвата движения непосредственно фиксируют только точные координаты каждой маркерной точки. Поэтому при создании скелета необходимо убедиться, что длины сегментов костей соответствуют расстояниям между соответствующими точками, а их позиции также хорошо выровнены. Это позволяет точкам точно управлять движением скелета. Импортируя данные о костях из Markerset в другое программное обеспечение, можно анимировать различные модели.

Подключение к программному обеспечению для виртуальной прямой трансляции

       В VUP, виртуальном программном обеспечении для прямых трансляций, доступны различные модели для выбора. После того как выбрана подходящая модель, виртуальный персонаж может начинать имитировать действия живого ведущего. Подключив камеру смартфона или компьютера, программное обеспечение VUP может в реальном времени захватывать мимику ведущего; надев специальные датчиками перчатки, VUP может фиксировать детальные движения пальцев, тем самым облегчая взаимодействие с аудиторией.

Кроме того, оптическая система захвата движения NOKOV поддерживает многопользовательский захват движения, что позволяет представлять несколько виртуальных персонажей на одной сцене.

VUP виртуальное вещание является дальнейшим расширением области захвата движений компании NOKOV. Самостоятельно разработанная оптическая система захвата движений NOKOV предлагает высокое соотношение цены и качества, обеспечивая точный и стабильный сбор данных, что предоставляет надежную техническую поддержку для виртуального вещания.