Future Sailors — VR, AR and stuff

2022-04-27 15:44:18 #XR
Microsoft работает над крутой штукой: генерация человеческого тела и позы только на основе сигналов от AR-очков (положение + ориентация головы и рук).

Если разрешат использовать для VR-шлемов, то можно будет значительно улучшить погружение в виртуальную среду, добавив к отслеживаемым рукам остальное тело

https://microsoft.github.io/flag/ Открыть/Комментировать

2022-04-27 09:09:18 Spark AR Studio выкатили обновление.

Не уверены, что эта новость поможет в работе, но рассказать мы должны.

Новые возможности звука
Теперь в эффекте могут быть музыка, звуковые эффекты и эффект для голоса одновременно. Раньше в эффекте было только что-то одно. Так же звук зависеть от движений рук, тела или выражения лица. В общем, пространство для креатива широкое. Пока доступно только для эффектов в Instagram*.

Детектор глубины
Привет LiDAR в iPhone 12-13 Pro и Pro Max. Камера Instagram* теперь видит глубину и расстояние до объектов. Это позволяет делать более иммерсивные фильтры: например, падающие конфетти будут приземляться на диван в соответствии с его формой.

Подробнее.
* входит в компанию Meta – организацию, запрещенную на территории РФ Открыть/Комментировать

2022-04-26 11:58:37 Что внутри VIVE Mars CamTrack:
• 2 базовые станции отслеживают положение трекеров
• 2 трекера крепятся к камере и движущемуся освещению/реквизиту
• 3 ровера усиливают сигнал трекеров
• коробка с экраном MARS обрабатывает все сигналы и передает их в Unreal Engine
• набор для калибровки камеры

Итого (инструкция):
Установить базовые станции → закрепить каждый трекер на ровере (трекер для третьего ровера нужно докупить отдельно) → трекер+ровер установить на камеру и освещение/реквизит, которые хотите отслеживать → подключить MARS к роутеру и компьютеру → откалибровать камеру

Всего 5000$ + лицензия Unreal + мощный комп + аренда студии = можно снимать своё кино. Покупают тут Открыть/Комментировать

2022-04-26 11:54:38 #XR
HTC выпустили набор для виртуального продакшена VIVE MARS.
Полезный продукт, необходимость в котором давно назрела (люди собирали собственные системы для виртуального продакшена, используя трекеры Vive) Открыть/Комментировать

2022-04-24 18:15:58 #XR
Курс на русском про основы работы с Hololens 2 Открыть/Комментировать

2022-04-24 16:00:13 Начинающим метаверсерам и метаблоггерам.
Меня все чаще спрашивают, а как собрать лицевой захват лица не из веревок и палок, но и не за ацкие тыщщи.

Вот подробный разбор пайплайна с лицевым захватом от той самой Габриеллы, которая Feedind Wolfs.
Там прям по шагам, для тех, кто любит "нажмите сюда". Метахьюман, Faceware, UE.
Ниже ссылка на полное видео, и на ее канал, там хорошо.


Открыть/Комментировать

2022-04-24 12:35:06 На входе - видео, на выходе - эмоции. А дальше деле техники (и поста ниже). Открыть/Комментировать

2022-04-23 22:29:46 #future
https://phorhum.github.io/ — новый метод 3д-реконструкции от Google Research. Заточен для создания 3д-аватара из одной фотографии человека.

Примеры, где он ещё может пригодится:
- поместить человека на фото, применив подходящее освещение
- анимировать полученную 3д-модель Открыть/Комментировать

2022-04-23 21:35:56 #AR
Классные эксперименты по управлению AR-фильтрами с помощью пальцев

https://twitter.com/zachlieberman/status/1517548515811069952?s=20&t=V3nSrHXyxtRYGlhP2c_oYw Открыть/Комментировать

2022-04-22 17:11:51 Сегодня, день земли
Виртуальный аватар imma.gram призывает обратить внимание на проблему загрязнения планеты и публикует фото в платье из кусочков мусора, собранных из Всемирного океана.

*продукт компании Meta – организация, запрещенная на территории РФ Открыть/Комментировать