AR/VR Engineer

2022-05-14 17:02:04 ARCore Geospatial API

Geospatial API предоставляет разработчикам доступ к глобальной локализации — той же технологии, которая используется в Live View в Google Maps с 2019 года, предоставляя юзерам полезные подсказки с помощью AR.

С этим API разработчики могут привязывать контент в дополненной реальности по широте, долготе и высоте над уровнем моря в более чем 87 странах, при этом не нужно сканировать физическое пространство, что значительно экономит время и ресурсы.

Уже есть возможность использовать API для iOS и Android, включая Unity и нативные библиотеки. Документация здесь.

также доступны два Unity демо проекта, Balloon Pop ( multiplayer geospatial experience! ) и Pocket Garden.

AR/VR Designer Открыть/Комментировать

2022-05-12 12:53:29 AR очки для реал-тайм перевода от Google

Google завершили свою презентацию I/O новым тизером потенциально нового AR девайса. Ключевой фичей, которую продемонстрировал Google, является возможность видеть реал-тайм перевод текста и аудио прямо перед вашими глазами. На сегодняшний день это одно из самых практичных применений AR очков.

Но они не поделились какими-либо подробностями о релизе, а только продемонстрировали девайс в записанном видео, которое на самом деле не показывало сам дисплей и скорее является рендером. Но то, что было показано в видео, нарисовало очень крутую картину потенциального будущего AR.

AR/VR Designer Открыть/Комментировать

2022-05-05 13:11:26 Meta Research: Codec Avatars 2.0

Facebook еще в 2019 году анонсировали работу над Codec Avatars. Аватары генерируются с помощью нескольких нейронных сетей и 171 камеры, таким образом достигается максимальная реалистичность 3D модели.

На апрельском семинаре Массачусетского технологического института «Virtual Beings & Being Virtual» Ясер Шейх, возглавляющий команду Codec Avatars, показал видео последней версии проекта под названием «Codec Avatars 2.0».

С помощью дополнительных камер и захвата эмоций Meta добились более реалистичного результата, прямо вау

Текущая версия еще не пригодна для продакшна, тем не менее новые модели меньше и эффективнее, чем прошлые исследования, а нейронная сеть теперь вычисляет только пиксели, видимые гарнитуре. Благодаря этому усовершенствованию гарнитура Quest 2 способна отображать пять аватаров в пустой сцене со скоростью 50 кадров в секунду.

AR/VR Designer Открыть/Комментировать

2022-05-02 18:42:30 Dress Up — AR инструмент для покупок онлайн от Snapchat

В целом возможность примерять одежду и аксессуары от различных брендов уже ранее была в Snapchat, но это было не централизовано. С помощью функции Dress Up вы можете просматривать любые бренды, предлагающие AR-покупки, в одном централизованном месте или просматривать цифровые образы от индивидуальных креаторов.

Вполне вероятно, что когда-то Snapchat может трансформироваться в полноценный AR-first маркетплейс одежды и аксессуаров.

И немного интересной статистики от Snap. Более 250 миллионов пользователей использовали линзы AR для покупок в общей сложности более 5 миллиардов раз. Snap сообщает, что эти линзы конвертируют гораздо более высокий процент возможных покупателей, чем обычная реклама.

Новая функция будет постепенно внедряться для всех пользователей Snapchat по всему миру. Если у вас нет функции «Dress Up» в Snapchat, попробуйте обновить приложение, возможно оно уже доступно в вашем регионе.

AR/VR Designer Открыть/Комментировать

2022-04-29 13:12:01 2Sync - The Next Level Of Virtual Reality

2Sync не просто помогает трансформировать физическое пространство в цифровое, но и адаптировать виртуальный мир к среде пользователя.

Все это дело 2Sync завернули в SDK с такими фичами:

- возможность создавать room-independent описание виртуального опыта;
- сопоставление виртуальных и реальных объектов на основе правил с учетом сложных взаимосвязей, зависимостей трансформации и свойств материалов;
- дает возможность создавать свой собственный процедурно генерируемый контент;
- возможность добавления и калибровки нескольких пользователей в среде ( multiplayer );
- real-time генерация процедурно сгенерированных виртуальных миров.

Проект разрабатывается как research проект в рамках Института Хассо Платтнера в Германии и в настоящее время находится на стадии альфа-тестирования. Но текущий результат уже впечатляет, уверен у проекта есть большие перспективы!

Запросить доступ к SDK можно здесь.
Сайт проекта: https://2sync.io

AR/VR Designer Открыть/Комментировать

2022-04-29 11:42:16 Meta Project Cambria

Во время недавнего звонка Meta о доходах в первом квартале 2022 года Цукерберг сказал инвесторам, что Cambria будет «более сосредоточена на использование в рабочем процессе», чем Quest 2, заявив, что новое устройство «заменит ваш ноутбук».

В то время как Quest 2 имеет зернистые черно-белые камеры, Cambria будет иметь цветовую передачу с высоким разрешением для смешанной реальности. Cambria также будет включать в себя отслеживание глаз и отслеживание лиц для управления аватарами в социальной виртуальной реальности.

C такими фичами для этого устройства потребуется больше оперативной памяти… Ссылаясь на инсайты от SadlyItsBradley, Reggy04 и Samulia, вероятно они поднимут ее до 12 гб, то есть в 2 раза по сравнению с Quest 2.

Точной даты релиза устройства пока еще нет, но мы ждем

AR/VR Designer Открыть/Комментировать

2022-04-28 09:53:46 Roblox выпустил инструменты, которые позволяют делать реалистичную виртуальную одежду

Над Layered Clothing работали последние два года. Если раньше одежда в Roblox напоминала больше скины из Minecraft, то после запуска этой функции всё стало намного реалистичнее и привлекательнее для брендов.

Разработка заняла так много времени, потому что одежда должна сидеть одинаково хорошо на разных моделях — от кубических аватаров до больших монстров со сложными геометрическими моделями.

В итоге разработчики Roblox нашли способ накладывать слой с одеждой на слой с моделью аватара.

В Roblox очень гордятся проделанной работой и считают, что Layered Clothing позволит сделать виртуальную одежду более детализированной и реалистичной.

@fashiontech Открыть/Комментировать

2022-04-27 15:24:37 Reals by Hour One

Все больше стартапов, в том числе Hour One, выходят на рынок цифровых аватаров.

Reals, AI платформа Hour One, превращает людей в виртуальных аватаров с возможностью озвучивания текста голосом.

Компания построила свои собственные нейронки и использует для этой цели GAN. Аватары могут быть выбраны из набора существующих персонажей или пользователь может создать собственного, включая возможность создания цифрового клона.

Можно добавлять разные картинки на фон, текст и т.д. и потом все скопом отправить в рендер. Удобно.

Если вы давно искали диктора для своего контента - welcome.

AR/VR Designer Открыть/Комментировать

2022-04-23 22:46:59 #future
https://phorhum.github.io/ — новый метод 3д-реконструкции от Google Research. Заточен для создания 3д-аватара из одной фотографии человека.

Примеры, где он ещё может пригодится:
- поместить человека на фото, применив подходящее освещение
- анимировать полученную 3д-модель Открыть/Комментировать

2022-04-20 12:20:04 Meta Quest Hands 2.0

В сравнении с предыдущей версией новое обновление Hand Tracking выглядит впечатляюще

Среди апдейтов:
• Улучшенное распознавание жестов - улучшили три основных жеста: "pinch", "poke" и "grab". А также пользовательские жесты, созданные с помощью Presence Platform Interaction SDK.
• “Hand-over-hand” трекинг - теперь hand tracking понимает где ваши обе руки, даже если вы накладываете одну руку на другую.
• Улучшения функции отслеживания - теоретически с этим обновлением не будет теряться трекинг рук, что иногда случалось в предыдущей версии.

Meta уже предоставила ранний доступ к Hands 2.0 для некоторых приложений, включая Cubism, Hand Physics Lab, Liteboxer и Unplugged: Air Guitar .

AR/VR Designer Открыть/Комментировать