Ученые разработали новое приложение для смартфонов, которое способно захватывать движения всего тела без необходимости в специальных камерах или дорогом оборудовании. Это открытие может стать значительным шагом вперед для фотографов и видеографов, работающих с движением.
Инженеры Северо-западного университета в Иллинойсе, США, создали систему под названием “MobilePoser”, которая превращает смартфон пользователя в полноценный захват движений с качеством, сопоставимым с кино.
Большинство поклонников кино знакомы с методами захвата движений, которые часто показываются в закулисных материалах. Для создания CGI-персонажей, таких как Голлум из трилогии «Властелин колец» или На’ви из «Аватара», актёры носят облегающие костюмы, усыпанные датчиками, и двигаются по специализированным помещениям. Компьютер захватывает данные с датчиков и затем отображает движения и тонкие выражения актёров.
Традиционно захват движений был сложным и дорогим процессом, требовавшем, чтобы актёры надевали костюмы с датчиками и работали в студиях с специализированными высокотехнологичными камерами.
«Это золотой стандарт захвата движений, но его реализация стоит более $100,000», — говорит профессор Северо-западного университета Каран Ахуджа, который возглавлял исследование. «Мы хотели разработать доступную и демократичную версию, которую может использовать любой с уже имеющимся у него оборудованием». Однако по словам исследователей, система MobilePoser использует датчики, уже встроенные в современные мобильные устройства, такие как смартфоны, смарт-часы и беспроводные наушники.
С помощью комбинации данных с датчиков, машинного обучения и физики MobilePoser точно отслеживает позу человека и его перемещение в пространстве в реальном времени. Приложение захватывает и обрабатывает эти данные с помощью индивидуального ИИ-алгоритма, что позволяет осуществлять полный захват движений без дополнительных затрат или оборудования.
Хотя приложение MobilePoser не достигает той же точности, что и дорогостоящее оборудование захвата движений в крупных голливудских студиях, его создатели отмечают, что использование нескольких устройств может снизить ошибки отслеживания. Тем не менее, в недавнем исследовании команда также подчеркивает, что MobilePoser достаточно надежен для обеспечения качественного захвата движений даже с использованием всего одного устройства.
«Точность лучше, когда человек носит более одного устройства, например, смарт-часы на запястье и смартфон в кармане», — объясняет Ахуджа. «Но ключевой момент системы в том, что она адаптивная. Даже если у вас нет часов один день, и есть только телефон, она может адаптироваться, чтобы выяснить вашу полную позу». Исследователи также полагают, что технология MobilePoser может найти применение в развлечениях, открывая новые возможности для immersive gaming и фитнеса.