Roblox и учёные создали ИИ для оживления 3D-моделей по видео

Команда Roblox в сотрудничестве с Массачусетским университетом и Критским институтом технологического образования представила BLARM — инновационную систему, способную оживлять трёхмерные модели, используя только видеозапись движения. Технология обходится без привычного процесса создания скелета (рига) и ручной разметки весов скиннинга, которые традиционно требуются для анимации 3D-объектов. Вместо этого алгоритм машинного обучения анализирует видео и автоматически определяет, какие части модели должны двигаться, а затем переносит эти движения на статичный объект, превращая его в динамическую сцену.

BLARM работает на основе принципов переноса движения, но в отличие от существующих решений не требует сложной предварительной подготовки. Система использует скрытые примитивы движения — так называемые «латентные жёсткие примитивы», которые позволяют моделировать анимацию без заранее заданных параметров. Это делает технологию более универсальной: она подходит для объектов любой геометрии, будь то персонажи, механизмы или даже абстрактные формы. Исследователи утверждают, что их подход превосходит традиционные методы по скорости и точности, особенно в случаях, когда стандартные инструменты анимации неприменимы.

Практическая ценность BLARM очевидна для создателей контента в Roblox и не только. Разработчики игр и аниматоры смогут тратить меньше времени на рутинные задачи, ускоряя процесс создания контента. Например, музыканты смогут оживлять свои инструменты для интерактивных выступлений, а архитекторы — демонстрировать динамику зданий при различных нагрузках. Технология также может быть полезна в образовательных проектах, где требуется визуализировать сложные процессы, например, движения молекул или работы механизмов.

Эксперты отмечают, что BLARM — это шаг вперёд в области генеративного ИИ для 3D-моделирования. В отличие от предыдущих решений, которые часто ограничивались узкими задачами, новая система демонстрирует способность к обобщению и адаптации к различным типам объектов. Исследователи уже тестируют BLARM на широком спектре данных, включая бытовые предметы, животных и даже фантастические существа. В будущем технология может стать основой для новых инструментов в индустрии развлечений, дизайна и образования, где анимация играет ключевую роль.