Инструмент для превращения физических объектов в AR интерфейсы - Google Research
AR интерфейсы это будущее и очень сложная штука, ведь они должны взаимодействовать с динамическими объектами. Исследования в этой области очень важны!
Google сделали интересный ресерч и поделились своими результатами. Среди примеров погодная карточка, кратко о том, как это работает:
Система изучает визуальные характеристики физической карточки, начинает отслеживать ее шаблон, вычисляет позу 6DoF и связывает карту с виджетом погоды. Когда пользователь перемещает карту, система реагирует на ее статические и динамические позы 6DoF. В этом случае визуализируемый виджет «погода» меняет уровень детализации в зависимости от того, насколько далеко от пользователя находится карта. Когда пользователь касается кнопки «Далее» на карточке, "AdUI" распознает положение кончика пальца, событие касания, а затем отображает информацию о погоде на следующий день.
https://research.google/pubs/pub51310/
AR/VR Designer
