Студия для создания 4d-съемки больше не нужна

Ученые из университета Карнеги-Меллон продемонстрировали, что можно комбинировать несколько видео, снятых на разные iPhone с разных сторон, для создания 4d-визуализаций.

Видео, которое получится в результате, позволит зрителям наблюдать за происходящим под разными углами или даже стирать людей и объекты, которые блокируют видимость.

Представьте себе, допустим, свадьбу, где танцоров видно с любого ракурса, а перебравшего гостя, прошедшего неверной походкой на переднем плане, на записи нет.

Видео можно снимать с разных точек обзора независимо друг от друга, как это часто бывает на крупных банкетах или коопоративах, отметил аспирант института робототехники университета Аюш Бансал. Тех, кто в центре внимания, можно снять в одном месте, а после перенести их в другую среду с другими декорациями.

— Мы ограничены только количеством камер, с которых будут вести съемку, сказал Бансал. — Верхнего порога по количеству видеопотоков не существует.

Свой новый метод четырехмерной визуализации Бансал с коллегами представили в ходе виртуальной конференции Computer Vision and Pattern Recognition.

— Виртуальная реальность — это не новшество, но ранее ее можно было формировать только в студии, оснащенной десятками или сотнями камер, встроенными в стены.

Объединить несколько видео, снятых в произвольном месте произвольными камерами, в единую комплексную 3d-сцену было невозможно.

Обойти ограничение Бансалу с коллегами помогли конволюционные нейронные сети — разновидность программы глубинного обучения, которая хорошо зарекомендовала себя в обработке визуальных данных. Ученые выяснили, что эти нейронные сети можно использовать для компоновки различных частей сцены.

Исследователи продемонстрировали возможности метода, снимая на 15 iPhone различные сцены — танцы, демонстрации боевых искусств и фламинго в национальном парке Питтсбурга.

— Почему именно iPhone? Мы хотели показать, что любой человек сможет пользоваться системой, и что теперь студия не имеет границ, она — весь мир, заключил Бансал.

Инновационный метод открывает множество потенциальных применений в киноиндустрии и потребительских устройствах, особенно с учетом того, что популярность гарнитур виртуальной реальности продолжает расти.

Несмотря на то, что метод не всегда фиксирует сцены в полноценном 3d-формате, система может ограничить угол воспроизведения так, чтобы дефектные области не просматривались и иллюзия трехмерного изображения не нарушалась.

02.07.2020


Подписаться в Telegram



Медиа

Clinical Psychological Science: Предупреждения об опасном контенте не работают
Clinical Psychological Science: Предупреждения об опасном контенте не работают

Сторонники использования триггерных предупрежд...

Cognition: люди лучше запоминают символы, чем их словесные аналоги
Cognition: люди лучше запоминают символы, чем их словесные аналоги

Повседневные символы запоминаются отлично, уве

Исследование: американские сми становятся все более предвзятыми
Исследование: американские сми становятся все более предвзятыми

Согласно результатам исследования 1,8 млн ...

Социальные сети могут и созидать, и разрушать
Социальные сети могут и созидать, и разрушать

Социальные медиа объединяют людей и усили...

Жители московского коливинга создали бренд одежды
Жители московского коливинга создали бренд одежды

В коливинге проекта Colife жители создали свой...

Неймерам на заметку: на Западе рулят женственные бренды
Неймерам на заметку: на Западе рулят женственные бренды

Ученые из университета Калгари, университ...

Каталоги с дополненной реальностью как маркетинговая стратегия будущего
Каталоги с дополненной реальностью как маркетинговая стратегия будущего

Рекламная полиграфия способна привлекать покуп...

Студия для создания 4d-съемки больше не нужна
Студия для создания 4d-съемки больше не нужна

Ученые из университета Карнеги-Меллон про...

Фактчекинг не вернет доверие к сми
Фактчекинг не вернет доверие к сми

Журналисты могут вернуть доверие к профес...

Ученые выяснили, у кого есть шансы выжить в Игре престолов
Ученые выяснили, у кого есть шансы выжить в Игре престолов

Персонажи Игры престолов с большей вероят...

Выяснилось, как полиграфия увеличивает продажи
Выяснилось, как полиграфия увеличивает продажи

В последнее время рекламная полиграфия стремит

Следи за лексиконом - и воздастся!
Следи за лексиконом - и воздастся!

В новом исследовании, основанном на психо...

Как выглядит работающий рекламный баннер
Как выглядит работающий рекламный баннер

Баннером принято называть рекламный носитель с...

В приоритете у экспертов - нейрометрическая диагностика бренда
В приоритете у экспертов - нейрометрическая диагностика бренда

01-10 июня 2015 года специалисты исследователь...

Телевизионная реклама стимулирует продажи онлайн
Телевизионная реклама стимулирует продажи онлайн

Многие телевизионные рекламодатели высказывают...

Реклама по ТВ должна быть уместной
Реклама по ТВ должна быть уместной

Грустная телевизионная драма близится к р...

Скорость просмотра имеет значение
Скорость просмотра имеет значение

Казалось бы, давно ли книги и винило...

Ученый предсказал развитие событий в Игре престолов
Ученый предсказал развитие событий в Игре престолов

Ричард Вейл из университета Кентербери в&...

Поиск на сайте

Знатоки клуба инноваций


ТОП - Новости мира, инновации

35% переболевших коронавирусом в течение года столкнулись с ухудшением здоровья
35% переболевших коронавирусом в течение года столкнулись с ухудшением здоровья
Science Immunology: Воспаление мозга вызывает мышечную слабость после инфекций
Science Immunology: Воспаление мозга вызывает мышечную слабость после инфекций
Acta Biomaterialia: Гидрогель поможет понять механизм развития Альцгеймера
Acta Biomaterialia: Гидрогель поможет понять механизм развития Альцгеймера
CSAA: Как восстановить мир в городе после конфликта — проблемы и перспективы
CSAA: Как восстановить мир в городе после конфликта — проблемы и перспективы
Новая технология фотоэлектрических модулей оптимизирована для городских условий
Новая технология фотоэлектрических модулей оптимизирована для городских условий
Nature Ecology & Evolution: Всеобщий предок LUCA оказался старше, чем считалось
Nature Ecology & Evolution: Всеобщий предок LUCA оказался старше, чем считалось
ИИ лучше клинических тестов справился с прогнозом течения болезни Альцгеймера
ИИ лучше клинических тестов справился с прогнозом течения болезни Альцгеймера
International Journal of Hydrogen Energy: К 2045 году будем летать на водороде
International Journal of Hydrogen Energy: К 2045 году будем летать на водороде
IEEE Access: Ученые открыли доступ к данным о работе электрических сетей
IEEE Access: Ученые открыли доступ к данным о работе электрических сетей
Нанопластики нарушают структуру и функциональность белков в грудном молоке
Нанопластики нарушают структуру и функциональность белков в грудном молоке
Cell: Впервые восстановлена трёхмерная структура хромосом шерстистого мамонта
Cell: Впервые восстановлена трёхмерная структура хромосом шерстистого мамонта
Nature Neuroscience: Ученые доказали, что терпение приносит свои плоды
Nature Neuroscience: Ученые доказали, что терпение приносит свои плоды
Познакомьтесь со странной амфибией, которая выкармливает своих детенышей молоком
Познакомьтесь со странной амфибией, которая выкармливает своих детенышей молоком
Вдохновились Дюной: Модификация скафандров позволит перерабатывать мочу в воду
Вдохновились Дюной: Модификация скафандров позволит перерабатывать мочу в воду
В 40% случаев люди ошибочно называют сгенерированное фото человека реальным
В 40% случаев люди ошибочно называют сгенерированное фото человека реальным

Новости компаний, релизы

Ведущие игроки агрорынка представят новинки на «Дне поля» в Агробиотехнопарке Казанского ГАУ
Межсетевой экран защитит компьютерные системы от киберугроз
Университет МИСИС будет готовить специалистов в сфере квантовых технологий
В Нижнем Новгороде проходит Шестой «ЯлФест-2024»
В ВГУВТ будут готовить уникальных специалистов на стыке инженерии и экономики для развития водного транспорта