2021-02-16 19:07:35
TensorFlow 3D
Некоторые из вас вероятно использовали SLAM трекинг или LiDAR сканер, используя мобильное приложение. Возможно, даже об этом не подозревая. Эти технологии создают "облако точек", чтобы пользователь мог привязывать и взаимодействовать с цифровым контентом в дополненной реальности. Конечно же некоторые приложения собирают эти данные, т.е. "облака точек".
Но есть вопрос, а что дальше? А дальше нужно сегментировать и обрабатывать данные, чтобы в дальнейшем предоставить более качественный AR опыт для пользователей ( или рекламодателей ).
Google Research опубликовали статью о новом проекте, TensorFlow 3D.
TF 3D включает пайплайны обучения и оценки для:
- трехмерной семантической; сегментации ( 3D semantic segmentation )
- обнаружения 3D объектов ( 3D object detection );
- и сегментации 3D "экземпляров" ( 3D instance segmentation ).
Таким образом ваши SLAM или LiDAR сканы могут превратиться из облака точек, в достаточно понятный набор данных.
Проект на GitHub.
AR/VR Designer
1.4K views16:07