🚀 Zhilyova Lingerie запустили Web AR для просмотра нижнего белья на моделях

Zhilyova Lingerie, известный на мировом рынке украинский бренд нижнего белья, разработали Web AR решение, с помощью котрого вы можете посмотреть белье на моделе в дополненной реальности прямо в вашей комнате 😍

Выглядит весьма иммерсивно, потестировать решение можно с iOS и Android устройств под некоторыми товарами на сайте бренда, например вот по этой ссылочке.

С точки зрения реализации однозначно снимались видео на зеленом фоне, после чего видео импортировались в WebAR решение с фичей 'World Tracking', например от 8th-Wall или Zap Works.

AR/VR Designer

⚡️ TensorFlow 3D

Некоторые из вас вероятно использовали SLAM трекинг или LiDAR сканер, используя мобильное приложение. Возможно, даже об этом не подозревая. Эти технологии создают "облако точек", чтобы пользователь мог привязывать и взаимодействовать с цифровым контентом в дополненной реальности. Конечно же некоторые приложения собирают эти данные, т.е. "облака точек".

Но есть вопрос, а что дальше? А дальше нужно сегментировать и обрабатывать данные, чтобы в дальнейшем  предоставить более качественный AR опыт для пользователей ( или рекламодателей 🤷‍♂️ ).

Google Research опубликовали статью о новом проекте, TensorFlow 3D.

TF 3D включает пайплайны обучения и оценки для:
- трехмерной семантической; сегментации ( 3D semantic segmentation )
- обнаружения 3D объектов ( 3D object detection );
- и сегментации 3D "экземпляров" ( 3D instance segmentation ).

Таким образом ваши SLAM или LiDAR сканы могут превратиться из облака точек, в достаточно понятный набор данных.

Проект на GitHub.

AR/VR Designer

🚀 Micro Projection Mapping

На просторах LinkedIn наткнулся на интересный пост. Как говорится, гениальность в простоте, не всегда нужны сложные и дорогостоящие технологические решения 🤷🏻‍♂️

Относятся ли проекции к дополненной реальности?

Если мы говорим про само понятие, а не технологию, то вывод однозначен.

AR/VR Designer

🔥Samsung Glasses Lite

WalkingCat слил концепт AR очков от Samsung. Да-да, это именно тот парень, который в июле 2020 слил Oculus Quest 2.

На видео представлены крутые фичи: Portable Media, Dex Display, виртуальный офис, интеграция с другими смарт устройствами, управление дроном от первого лица и режим солнцезащитных очков.

Информация не подтверждена Samsung, но будет надеяться, что это правда  🤟🏻

AR/VR Designer

В дополнении второе видео, на нем представлен концепт AR Офиса, Holo Call и AR Симуляции 🚀

AR/VR Designer

⚡️Ready Player Me от Wolf3D добавили поддержку VR Social Networks

Достаточно сделать хорошую фотографию, с нормальным освещением, и буквально за 10 секунд вы получите своего 3D аватара.

Конечно же сходство не 1:1, но вполне приемлемое решение для создания своего аватара без каких-либо навыков в 3D, и это всего в несколько кликов.

Далее достаточно нажать кнопочку "Done" и вы сможете импортировать своего аватара в VR Chat.

Потестировать можно здесь: https://vrchat.readyplayer.me/avatar 🤘🏻

AR/VR Designer

🚀 Новый стриминговый сервис для VR — PlutoSphere

PlutoSphere — это потоковая платформа виртуальной реальности для людей без игрового ПК, позволяющая воспроизводить высококачественный VR контент на таких гарнитурах, как Oculus Quest.

Судя по видео, задержки незаметны. А для VR это очень важно, минимальная задержка может критически сказаться на всем опыте.

С помощью PlutoSphere вы сможете получить доступ к вашим покупкам в Steam или Epic Games, аналогично тому, как это работает сейчас в стриминговой платформе NVIDIA’s GeForce Now ( NVIDIA’s GeForce Now не поддерживает VR ).

PlutoSphere требует роутер WiFi 6, с частотой 5 ГГц и пропускной способностью не менее 50 Мбит / с. Соединение от роутера к гарнитуре является наиболее деликатной частью всей цепочки, PlutoSphere рекомендует находиться в одной комнате с роутером.

Facebook не поддерживает стриминговые VR сервисы в Oculus Store, по этому Pluto планируют запускаться на SideQuest.

Pluto открыли раннюю регистрацию на своем веб-сайте.

AR/VR Designer

​🚀 Hand & Eye Tracking

Ранее мы рассказывали про концепт трекинга зрения в AR. Это вдохновило нашего подписчика и он сделал свой концепт.

Не хочу перефразировать Максима, по этому просто добавлю цитатами: «Изначально я вдохновился концептом на вашем канале. Подумал что лучше такого подхода для ближайших AR устройств пока не придумали.

Почему-то в голову сразу пришла идея сделать какой-то прототип для менеджеров, как самых мобильных юзеров. Благодаря такому продукту, куча офисов могла бы отказаться от огромного количества техники, а у менеджеров перестали бы болеть руки.

Пока делал стандартные "Look and slide" & "Look & pinch", пришла в голову идея, что было бы неплохо изменять структуру информации в зависимости от масштаба. Это можно заметить на графике: цвета дополняются неймингами, появляется более точная сетка, и хайлайты на графике.

Принцип получился такой:
- Посмотрел на объект:
а) объект активный - произошел ховер;
б) объект не активный - ничего не прозошло;
- Руки сугубо элемент управления и защита от случайных действий.»

Концепт интересный, и не сомневаюсь что в ближайшем будущем подобный прототип станет повседневностью каждого менеджера. А также же креды Максима для связи: Telegram, LinkedIn.

Очень радует что наши посты кого-то вдохновляют! Это мотивирует нас публиковать больше нестандартного и интересного контента 🙌🏻🤘🏻

AR/VR Designer

​⚡️Нейроинтерфейс от NextMind

Многие компании ведут разработку собственных нейроинтерфейсов, и за этим стоит большое будущее ( не только геймдева! ). Правда мало кто верит в это будущее, а на самом деле уже есть много  рабочих прототипов: BrainLink от Macrotellect, Myndplay, EPOC от Emotiv, SenzeBand от Neeuro и др.

На днях наткнулся на еще один интересный проект, Next Mind. Это некий прототип нейроинтерфейса с простым набором функций, но уже реально рабочий прототип! Даже со своим SDK для разработчиков.

Как же это работает? Если вкратце, то каждый окружающий нас объект имеет очень тусклое графическое представление в головном мозге. Зрительная кора генерирует мозговые волны, которые улавливают датчики, вроде таких как в NextMind. С помощью алгоритмов машинного обучения происходит процесс декодирования активности мозга и определения на чем мы концертируем наше внимание. И чем больше мы концентрируемся, тем сильнее импульс, который после мы превращаем в команды в нашем софте.

Конечно же данный нейроинтерфейс пока что не позволяет вам свободно взаимодействовать с разными интерфейсами, но нажать на кнопку, открыть дропдаун, пролистать страницу и т.д. вы уже сможете, то есть пока что доступны примитивные функции. В целом это так же очень интересно для экспериментов с интерфейсами в AR и VR.

Уже самому не терпиться потестировать NextMind 😵 Если вдруг у вас был опыт с подобной штукой, расскажите про это в комментариях 👇🏻

AR/VR Designer

🚀 Facebook поделился некоторыми результатами исследования наручных устройств для точного отслеживания пальцев и тактильной обратной связи

Гарнитуры Oculus Quest  поддерживают отслеживание рук без контроллера, которое осуществляется с помощью камер на гарнитуре. Требуется хорошо освещенная комната, есть небольшая, но заметная задержка, и это не сработает, если ваши руки перекрывают друг друга.

Лучшие камеры, датчики глубины и более быстрые чипы могут улучшить это, но всегда могут быть сценарии, когда гарнитура не может видеть движение одного или нескольких пальцев.

Другой подход к отслеживанию рук - считывание нейронных сигналов, проходящих через ваше запястье. Такая система может распознавать движение пальцев еще до того, как это произойдет.

Facebook подал заявку на патент на такое устройство в начале 2019 года. Стартап CTRL-Labs работал над той же идеей - Facebook приобрел компанию в конце 2019 года . То, что сейчас представлено, кажется усовершенствованной версией той же технологии.

AR/VR Designer

​🚀 Направление «VTuber» набирает все больше и больше популярности, что же это такое?

VTuber проще всего можно описать как онлайн-личность, которая маскирует свою внешность с помощью специального цифрового аватара.

Звучит слегка безумно, особенно учитывая последние новости про "блогершу-байкера", который оказался мужчиной, но таковы реалии, и этот хайп будет только расти.

Как же сделать своего виртуального персонажа?

Есть несколько решений:

1) Ready Player Me, который я описывал в этом посте выше. То есть сам процесс ведения блога вы можете записывать в том же VRChat.

2) FaceRig, отличный вариант для тех, кто хочет запечатлеть только движения верхней части тела, например для стримеров Twitch или авторов YouTube.

Используя стандартную веб-камеру, FaceRig отслеживает все, от выражения лица и движений глаз до положения губ и головы с невероятной точностью. Есть даже небольшое движение плеч, вполне достаточно, чтобы передать истинное ощущение трехмерности. Приложение включает в себя множество заранее созданных персонажей, а также возможность импортировать свои собственные 3д модели.

3) Vroid Studio - бесплатное и удобное решения для создания аватаров в стиле аниме. Вы можете настроить волосы, тон кожи, форму глаз, размер тела, одежду; почти все, что касается внешности. Вы можете использовать свои творения как в коммерческих, так и в некоммерческих целях.

Конечно же, есть и другой софт для создания виртуальных аватаров, но именно этот список мне кажется самым доступным в использовании.

AR/VR Designer

🚀 Система динамического проецирования с использованием высокоскоростного цветного проектора и высокоскоростного видеочипа

Проекторы - это мощные инструменты для отображения развлекательного контента и пользовательского интерфейса в AR.

Кроме того, в области робототехники и промышленности они также используются для сенсорных систем с камерами. Однако обычные проекторы имеют низкую частоту кадров (30–120 кадров в секунду), и этого недостаточно, чтобы обмануть человеческое зрение или максимизировать производительность системы с использованием промышленных роботов.

Чтобы решить такие проблемы, Ishikawa Group разработали 24-битный высокоскоростной цветной проектор со скоростью 1000 кадров в секунду и реализовали проецирование с малой задержкой и высокой яркостью.

В моем представлении это весьма применимо в индустрии коммерческих презентаций или театральной индустрии. Используя Object /  Body Tracking можно реализовать очень крутые идеи.

AR/VR Designer

⚡️Snap работает над очками с дополненной реальностью и дроном для селфи

За эти годы Snap выпустили несколько версий своих умных очков Spectacles. Cогласно источнику The Information, следующим шагом может стать пара со встроенными дисплеями, поддерживающими эффекты дополненной реальности.

Если компания готовится к дебюту версии Spectacles в мае, это может дать Snap преимущество перед другими известными технологическими компаниями, которые работают над носимыми AR устройствами, такими как Facebook , Apple и даже разработчиком Pokémon Go, Niantic .

Так же, Snap возродил свои давние планы по созданию селфи-дрона. Snap инвестировала 20 миллионов долларов в Zero Zero Robotics, компанию, которая построила складной дрон с камерой. Snap вела переговоры о покупке стартапа в 2017 году. Теперь, по данным The Information, аппаратные инженеры Snap работают над собственным прототипом с помощью компании-производителя дронов. Пока неясно, планирует ли Snap начать продажи дронов и когда это будет.

AR/VR Designer

🚀 NASA изучает смешанную реальность для применения в последующих миссиях

В своей недавней публикации они поделились информацией, как использовали технологии mixed reality в смоделированных миссиях, которые в будущем будут реализованы на Луне или Марсе.

Команда BASALT-3 обнаружила, что технологии смешанной реальности позволяют исследователям в полевых условиях отправлять визуализации данных обратно в научную группу, которая, в свою очередь, может проводить комплексный анализ, чтобы сообщить, куда группа будет двигаться дальше. Хотя аналогичные технологии использовались и раньше , эта последняя итерация имела новые возможности для отображения данных и информации о местности в реальном мире.

Напомним, ранее NASA уже использовала Hololens для подготовки оборудования Orion для миссии Artemis II.

AR/VR Designer

⚡️Augmented Reality & Music

Наткнулся на интересный кейс использования дополненной реальности в музыкальной индустрии. Группа I-Exist разработали мобильное приложение, в котором презентовали свои новые альбомы с помощью дополненной реальности.

Прослушивая каждый трек ( который также является отдельным альбомом 🙈), пользователь может погулять виртуальным пространством. В свою очередь виртуальное пространство дополняет саму музыку визуальной составляющей, что оставляет более глубокий отпечаток в голове слушателя.

Как по мне очень крутой PR ход для музыкальной группы, а сам опыт оставляет приятное впечатление. Можете потестировать сами 👇🏻

I-Exist выпустили приложения в трех сторах: Play Market, AppStore и Steam VR.

AR/VR Designer

​​Бесплатный. Популярный. Редактор 3D? Не не слышали!😅

Blender 3D — уникальный графический редактор с исходным кодом, который постоянно выпускает обновления, помогающие решать сложные задачи в графике.

Если вы давно ломали голову над тем, чтобы сделать свою анимацию более плавной, а объекты графики более реальными — обязательно подпишитесь в Сообщество Blender3D. Профессионалы motion-дизайна расскажут:

- Как избежать ошибок при создании подвижного объекта;
- Как запечь и сохранить свою карту нормалей;
- С чего начинается 3D-дизайн комнат.

@Blend3d — поможет реализовать ваши любые графические фантазии.

🚀 5 фитнес-приложений для Oculus Quest 2

Кому нужен дорогой абонемент в спортзал, когда есть такие технологии виртуальной реальности, как Oculus Quest 2?

В этой статье вы найдете 5 уникальных приложений, которые смотивируют  вас заниматься спортом не только потому, что это необходимо, но и потому что это приносит удовольствие 💪🏻

Время чтения - 4 минуты

Читать статью: 5 фитнес-приложений для Oculus Quest 2

AR/VR Designer

⚡️Google WebXR Experiments

Вчера Google опубликовали видео-презентацию своих последних экспериментов с технологией WebXR. Среди них:

• Sodar - помогает визуализировать социальное дистанцирование. Активировав персональный радар дополненной реальности в своем браузере, вы можете увидеть, как выглядят дистанция в 2 метра.

• С помощью Measure Up вы можете рассчитать длину, площадь и объем вещей вокруг вас, не используя рулетку.

• Floom - это новый увлекательный способ исследовать планету, созданный с помощью WebXR и Google Maps. Откройте свой браузер, чтобы проложить туннель сквозь землю и посмотреть, что находится на другой стороне.

• Четвертый эксперимент WebXR под названием Picturescape «превращает вашу библиотеку Google Фото в иммерсивную галерею, чтобы вы могли исследовать свои воспоминания в дополненной реальности». Проект будет вскоре доступен для тестирования, выглядит интересно.

Для  работы с WebXR требуется поддерживаемое устройство Android и последняя версия браузера Chrome.

AR/VR Designer

🚀 Взаимодействие с картами в виртуальной реальности

Продакт дизайнер @domhofdesign предложил свою реализацию взаимодействия с картами в виртуальной реальности с использованием Hand Tracking.

Как по мне, хороший результат, достаточно естественные взаимодействия 🙌🏻

Что скажете?

AR/VR Designer

⚡️ AR навигация в ритейле

На просторах твиттера наткнулся на интересный проект, Dent Reality.

Dent Reality - проект в сфере indoor навигации, ориентирован исключительно на рынок ритейла, и в этом его преимущество. Буквально сегодня команда проекта анонсировала закрытое тестирование проекта в магазине M&S Westfield, в Лондоне.

Учитывая последние апдейты в AR навигации от Google Maps, можно с уверенностью сказать, что это направление будет развиваться все активнее и активнее.

На видео один из их сэмплов для продуктового магазина. Мне нравится реализация! Здесь и шопинг лист, и карта самого магазина, + еще и навигация в AR с полезными фичами в интерфейсе.

Проект маленький, команда небольшая. О бизнес модели, капитализации и доходах информации нет. Но в любом случае ребятам успехов 👍🏻

AR/VR Designer