Высокоскоростное отслеживание лица улучшает возможности дополненной реальности
Вкратце, DFPM заключается в проецировании динамических визуальных образов на лицо человека в реальном времени с использованием усовершенствованного отслеживания лица для обеспечения плавной адаптации проекций к движениям и выражениям.
Хотя в идеале воображение должно быть единственным, что ограничивает возможности DFPM в дополненной реальности, этот подход сдерживается техническими проблемами.
Проецирование визуальных образов на движущееся лицо подразумевает, что система DFPM может распознавать черты лица пользователя, такие как глаза, нос и рот, менее чем за миллисекунду.
Даже небольшие задержки в обработке или незначительные несоответствия между координатами изображения камеры и проектора могут привести к ошибкам проекции — или «артефактам несоответствия», — которые могут заметить зрители, что испортит погружение.
На этом фоне исследовательская группа из Института науки Токио, Япония, приступила к поиску решений существующих проблем в DFPM.
Под руководством доцента Ёсихиро Ватанабе, а также в составе аспиранта г-на Хао-Лун Пэна, группа представила ряд инновационных стратегий и методов и объединила их в современную высокоскоростную систему DFPM.
Их выводы были опубликованы в IEEE Transactions on Visualization and Computer Graphics 17 января 2025 года. Во-первых, исследователи разработали гибридную технику под названием «метод высокоскоростного отслеживания лица», которая объединяет два разных подхода параллельно для обнаружения ориентиров лица в режиме реального времени .
Они использовали метод под названием «Ансамбль деревьев регрессии» (ERT) для реализации быстрого обнаружения.
Они также реализовали способ эффективной обрезки входящих изображений до лица пользователя, чтобы быстрее обнаруживать ориентиры; они достигли этого, используя временную информацию из предыдущих кадров для ограничения «области поиска».
Чтобы помочь обнаружению на основе ERT восстановиться после ошибок или сложных ситуаций, они объединили его с более медленным вспомогательным методом, который обеспечивает высокую точность при более низкой скорости.
Используя эту гениальную стратегию, исследователи достигли беспрецедентной скорости в DFPM.
«Объединяя результаты высокоточных, но медленных методов обнаружения и низкоточных, но быстрых методов обнаружения параллельно и компенсируя временные расхождения, мы достигли высокоскоростного выполнения всего за 0,107 миллисекунд, сохраняя при этом высокую точность», — говорит Ватанабе.
Команда также занялась неотложной проблемой: ограниченная доступность видеоданных движений лица для обучения моделей.
Они создали инновационный метод для имитации видеоаннотаций с высокой частотой кадров с использованием существующих наборов данных неподвижных изображений лица. Это позволило их алгор.
Ученые создали новые голограммы для виртуальной и дополненной реальности Ученые разработали новый тип голограмм, названных «метаголограммами», которые могут проецировать несколько высококачественных изображений без помех. …
Технологии, Наука 22:35, июня 1, 2024 | ferra.ruПредставлен 3D-смартфон для дополненной реальности без поддержки мобильной связи Компания Xreal анонсировала необычный смартфон Beam Pro без поддержки функций мобильного телефона. Об этом сообщает портал GSMArena. Отличительной ос …
Технологии, Наука 13:25, мая 31, 2024 | news.rambler.ruКурьеры Amazon получат продвинутые очки дополненной реальности Кажется, мечта курьеров начала сбываться благодаря разработке Amazon новых очков. Устройство призвано оптимизировать маршруты доставки и повысить эфф …
Технологии, Наука 10:12, ноября 18, 2024 | api.follow.itВ России разработали шлем для спасателей с технологией дополненной реальности На международном салоне «Комплексная безопасность — 2024» представлен шлем, оборудованный технологией дополненной реальности, способный обеспечить ви …
Технологии, Наука 02:25, мая 30, 2024 | ferra.ruSamsung запатентовала устройство дополненной реальности в виде смарт-очков Samsung подала новую патентную заявку на устройство дополненной реальности, которое может стать основой для более удобных «умных» очков. …
Технологии, Наука 10:12, ноября 28, 2025 | ilenta.com
Google заключил соглашение со стартапом дополненной реальности Magic Leap Google и стартап дополненной реальности Magic Leap договорились о стратегическом партнерстве, пишет агентство Reuters. Компания Magic Leap в своем бл …
Финансы, Экономика, Forex 04:10, мая 31, 2024 | finam.ruXpeng раскрыла интерьер нового P7 с 87-дюймовым дисплеем дополненной реальности (AR-HUD) Китайский производитель электромобилей Xpeng опубликовал в своём официальном аккаунте Weibo новые подробности о новой версии фастбэка P7, включая осо …
Гаджеты 10:12, августа 7, 2025 | gagadget.com
Выпущены первые в истории очки дополненной реальности, от которых не тошнит Американские исследователи сообщили о разработке первых очков дополненной реальности (AR), которые не вызывают неприятных ощущений или тошноты при ис …
Технологии, Наука 02:55, мая 24, 2024 | zoom.cnews.ru
Представлен ноутбук Spacetop G1 со 100-дюймовым экраном в дополненной реальности за $1900 Компания Sightful в начале этого года выпустила в рамках программы раннего доступа инновационный ноутбук Spacetop, не имеющий экран — вместо не …
Software 18:45, мая 30, 2024 | 3dnews.ru
Ученые рассказали о первых российских очках дополненной реальности для хирургов Специалисты МГТУ имени Н.Э. Баумана создали отечественный оптический модуль для системы дополненной реальности. Он позволяет на основе данных МРТ или …
Основные новости 07:05, мая 30, 2024 | iz.ru Компания Sightful сделала прорыв — ноутбук с очками дополненной реальности Компания Sightful представила довольно необычный портативный компьютер Spacetop G1. У него отсутствует стандартный экран — вместо этого разработчики …
Технологии, Наука 14:35, июня 9, 2024 | pravda.ru Xpeng и Huawei превратили лобовое стекло автомобиля в гигантский дисплей дополненной реальности Китайская Xpeng представила новый электрический кроссовер G7 с проекционным дисплеем под названием "Light-Chasing Panoramic Display". Это высокотехно …
Гаджеты 00:12, июня 8, 2025 | gagadget.com
Протез в виде шестого пальца улучшает возможности рук [ВИДЕО] Сотрудники Кембриджского университета представили необычный управляемый протез Third Thumb («Третий палец»), способный крепиться к руке. Он позволяет …
Технологии, Наука 06:50, июня 2, 2024 | 4pda.to Новая техника улучшает возможности рассуждения больших языковых моделей Большие языковые модели, подобные тем, которые используются в ChatGPT, показали впечатляющую производительность при выполнении таких задач, как соста …
Технологии, Наука 05:12, июня 18, 2024 | android-robot.com Haval улучшает возможности своих машин: с 17 мая OTA-обновления получат актуальные модели Haval объявила, что она обновит информационно-развлекательную систему актуальных моделей автомобилей и добавить в них новые возможности. С 17 мая обн …
Технологии, Наука 11:40, мая 16, 2024 | ixbt.com Научно-фантастические реальности, которые нужны нам в реальности Технологии постоянно развиваются: гаджеты, которые еще совсем недавно были фантастикой, постепенно становятся реальностью. Портал SlashGear рассказал …
Технологии, Наука 22:50, мая 6, 2024 | news.rambler.ru
Отслеживание посылок Алем ТАТ . Алем ТАТ — известная курьерская служба, известная своим опытом в области экспресс-доставки и транспортировки крупногабаритных грузов, посылок и пис …
Основные новости 20:12, марта 4, 2025 | smolensk-i.ru В Android появится отслеживание геолокации детей на карте Компания Google анонсировала новую функцию в Android для удобного отслеживания детей в предустановленных картах на смартфоне.Следующее обновление And …
Технологии, Наука 15:50, июня 9, 2024 | ferra.ru Apple показала watchOS 11: обновленные тренировки, отслеживание нагрузки и свежие циферблаты На конференции для разработчиков WWDC Apple традиционно обновляет операционные системы для всех своих устройств. Этот год, к счастью, исключением из …
Технологии, Наука 04:15, июня 11, 2024 | appleinsider.ru Health News: постоянное отслеживание уровня сахара в крови повышает тревожность Стремление здоровых людей постоянно отслеживать уровень глюкозы в крови может привести к расстройствам пищевого поведения и усилению тревожности. Об …
Технологии, Наука 19:55, июня 1, 2024 | pravda.ru Фотографии будущего: топ-5 фото с дополненной реальностью Технологии не стоят на месте, и сегодня мы можем наблюдать, как дополненная реальность проникает во все сферы нашей жизни, в том числе и в фотографию …
Технологии, Наука 10:12, августа 8, 2024 | api.follow.it Черчесов о сборной Казахстана: «Задачи можно ставить перед Бразилией. Нужно четко понимать возможности. Задача – чтобы возможности выросли» Российский специалист возглавил национальную команду, сменив Магомеда Адиева на этом посту. – Магомед Адиев добился с Казахстаном исторического резул …
Футбол 12:05, июня 6, 2024 | sports.ru Представлен бинокль с дополненной реальностью Unistellar Envision Unistellar представила бинокль Envision с технологией дополненной реальности. Простым нажатием кнопки вы можете получить доступ к огромному количеств …
Технологии, Наука 10:00, мая 22, 2024 | ixbt.com В Ставрополе представят фотопроект с дополненной реальностью о культурном наследии города Каждое изображение снабжено QR-кодом: при сканировании запускается видеофайл, который «оживляет» фотографию и рассказывает об истории объекта …
Основные новости 10:12, ноября 16, 2025 | atvmedia.ru Спортивные игры с дополненной и виртуальной реальностью улучшают психическое здоровье и социальные связи Давно известно, что физические виды спорта помогают бороться с тревогой и улучшают психическое здоровье. Но могут ли спортивные игры с дополненной и …
Software 05:12, сентября 26, 2025 | android-robot.com
Ozon улучшает тарифы для ПВЗ Торговая площадка Ozon объявила о новых улучшениях условий для владельцев пунктов выдачи заказов (ПВЗ). Среди ключевых... …
Интернет 05:12, августа 8, 2025 | internet.cnews.ru НОВИКОМ улучшает условия по вкладам Дочерний банк Госкорпорации Ростех повысил ставки по рублевым вкладам. Теперь доходность по накопительным продуктам НОВИКОМа достигает 17%. …
Основные новости 05:12, июня 22, 2024 | om1.ru Иммунолог: как морской отдых улучшает здоровье Врачи утверждают, что морской воздух и вода оказывают положительное влияние на организм. Это связано с тем, что морская вода содержит более 90 видов …
Туризм, путешествия 20:25, июня 10, 2024 | pravda.ru
Умная ложка Kirin улучшает вкус еды Японская компания Kirin представила необычное гастрономическое решение в виде электрической ложки, использующей электроды для контакта с языком, позв …
Технологии, Наука 00:45, мая 26, 2024 | 4pda.to Новая VR-система улучшает результаты МРТ для маленьких детей Была разработана новая технология отслеживания глаз, которая позволяет мгновенно и надежно осуществлять взаимодействие человека с компьютером на осно …
Hardware 00:12, июня 22, 2024 | android-robot.com Почему прогулка быстрее улучшает память, чем кофе С 25 августа по 31 августа в Белгородской области проходит Неделя популяризации активных видов спорта. Это отличный повод вспомнить о пользе движения …
Здоровье, медицина 00:12, сентября 2, 2025 | oskol.city HUAWEI улучшает камеру и не только на смартфонах Pura 70 Хотя смартфоны HUAWEI Pura 70 уже заняли первую строку профессионального рейтинга DXOMARK, инженеры и программисты бренда пытаются поднять уровень мо …
Технологии, Наука 08:05, мая 29, 2024 | droidnews.ru