🚀Microsoft работает над HoloLens 3, потребительской версией

В интервью Bloomberg глава смешанной реальности Microsoft Алекс Кипман ответил на несколько вопросов о настоящем и будущем Microsoft HoloLens, немного рассказав о следующей версии устройства.

Он сказал, что устройство должно показать улучшения в 3 областях:
• Улучшить погружение
• Улучшить комфорт и социальную приемлемость
• Увеличить возможности того, чего вы можете достичь

Конечно, мы помним аналогичную шумиху вокруг HoloLens 2, так что не будем строить поспешных выводов 🙂

В любом случае, он подтвердил, что Microsoft в настоящее время находится на стадии проектирования устройства, но пока не сообщил ни одну потенциальную дату выпуска.

Кипман так же подтвердил, что Microsoft работает с конкурентами в этой сфере, такими как Niantic и Epic, чтобы сделать смешанную реальность открытой платформой со свободным взаимодействием вне зависимости от девайса и отсутствием привязки магазина приложений к налогам 💫

Полное интервью на WSJ

AR/VR Designer

​Онлайн-бакалавриат — современный формат высшего образования. Наша программа — это уникальная возможность получить современное образование из любой точки нашей страны и мира!

РАНХиГС и Skillbox приглашают абитуриентов поступить на востребованную специальность веб-разработчика.
Всё как в классических вузах: семинары, сессия, студенческие льготы и отсрочка от армии, только все занятия и экзамены — онлайн.

Освой программирование и вёрстку, изучи веб- и UX-дизайн, разрабатывай сайты и приложения.

С 3-го курса можешь получить второй диплом Университета Гренобль Альпы (Франция). После подачи документов поступишь сразу на 2-й курс факультета экономики французского вуза. Программа бакалавриата в Европе длится 3 года, а значит, к концу 4-го курса ты получишь сразу два диплома — российский и европейский.

Поступление:

→ ЕГЭ — для всех абитуриентов. Проходной балл суммируется по всем предметам: математика, русский язык и на выбор — английский язык, физика или информатика и ИКТ.
→ Тестирование — для абитуриентов с высшим и среднеспециальным образованием. Тест проходит дистанционно, расписание можно посмотреть на сайте РАНХиГС или узнать у менеджера на консультации.

Хочешь получить больше информации? Переходи по ссылке: https://clc.am/gdcXeQ

🚀 Технология объемных голограмм

Вдохновленная «Звездными войнами», команда инженеров-электриков и компьютерных инженеров BYU работает над разработкой технологий объемного отображения без экрана.

Команда под руководством Дэна Смолли, профессора электротехники из BYU, использует лазерные лучи, чтобы улавливать и освещать частицу, а затем перемещать ее и рисовать изображение в воздухе.

«Подобно 3D-принтеру для света», эти дисплеи кажутся зрителю как физические объекты и, в отличие от экранного изображения, их можно увидеть под любым углом.

В этом видео команда показывает, как они создали крошечные анимации боевых взрывов и другие изображения, полностью созданные с помощью лазерного света.

Больше информации и работы команды здесь: smalleyholography.org

AR/VR Designer

⚡️Новое обновление Oculus v29

Oculus выпустили новое обновление, в которое вошло много долгожданных фич:

• Функция Multi-User Accounts и App Sharing теперь также доступна для владельцев первой версии Quest.
• Теперь вы можете использовать встроенный микрофон для записи экрана или онлайн трансляции игрового процесса!
• Live Overlay - фича для записи себя в игровом процессе. Просто закрепите телефон, направьте камеру на себя, включите запись и на выходе забирайте иммерсивный контент 🙂 Поддерживается на iPhone XS и выше.
• Интеграция c iOS нотификациями 🚀
• Новое приложение «Files» сделает процесс загрузки и совместного использования контента более удобным 💫
• «Passthrough Home» для Infinite Office - с помощью этой фичи, вы сможете мгновенно переключаться между вашим VR-офисом и реальным окружением.
• Facebook завершил это обновление анонсом новой рекламной системы, предназначенной для дальнейшего продвижения спонсируемых игр и приложений.

Больше информации в блоге Oculus.

AR/VR Designer

⚡️L'Enfant et les sortilèges: Опера с использованием технологии дополненной реальности

Выглядит очень эпично и оригинально 💥 Крутой кейс использования иммерсивных технологий в искусстве.

https://youtu.be/sggtMVVzE3g

AR/VR Designer

🚀Google Maps: Новые AR функции

В рамках конференции Google I/O 2021 вышло много обновлений, обсудим самые интересные в сфере иммерсивных технологий.

Начнем с Google Maps! Что нового:

• Добавили навигацию по заведениям общественного питания. Google синхронизируется с миллионами заведений по всему миру, и поможет вам выбрать заведения поблизости в Live View.

• Виртуальные указатели с названиями улиц и дистанция до выбранной точки.

• Более продвинутая indoor-навигация. Также, будет запущена AR навигация на вокзалах в Цюрихе и Токио.

AR/VR Designer

⚡️Проект Starline: объемные видеоконференции без очков дополненной реальности

Проект Starline - это сочетание софта и железа, которое даст возможность проводить объемные видео-конференции. Google применяет свои исследования в области компьютерного зрения и машинного обучения, чтобы превращать 2д картинку, в объемное 3д изображение. Конечно же, не обойдется без специального экрана, который создает ощущение объема и глубины.

Пока что это концепт, над которым активно работает команда Google Research, но звучит очень заманчиво 🔥

Больше информации в блоге Google:
https://blog.google/technology/research/project-starline/

AR/VR Designer

⚡️Snap анонсировали новые Spectacles и приобрели WaveOptics

Ух как, сразу же две сногсшибательные новости!

Новые Spectacles имеют двойные дисплеи с полем зрения всего 26,3 градуса. Это гораздо более узкое поле зрения, чем у гарнитур дополненной реальности, таких как HoloLens 2 (52°) и Magic Leap One (50°). Тем не менее, очки в 4 раза ярче HL2 и в 10 раз ярче Magic Leap 🚀

Выпуск устройства не обошелся без компании WaveOptics, которая разработала эти дисплеи. Snapchat заявили о приобретении данной компании более чем за 500 миллионов долларов 😨

Spectacles оснащены небольшой батареей, которой хватит на 30 минут работы устройства. При этом вес устройства всего 134 грамма ( HL 2 весит 566 грамм, а Magic Leap 345 грамм ).

Очки интегрируются с существующей платформой дополненной реальности Snap. Креаторы могут создавать AR опыт для Spectacles с помощью Lens Studio.

Купить девайс пока не получится, но вы можете подать заявку на Spectacles в качестве потенциального креатора на сайте Snapchat.

AR/VR Designer

⚡️Автомобильная XR-платформа Holoride

Нашел очень интересный VR проект, запущенный еще в 2019 году, Holoride.

Holoride использует машину как средство для дополнения опыта виртуальной реальности. Внезапное снижение или разгон, резкие повороты, да и в целом сам процесс езды влияет на VR опыт.

Уровни генерируются на основе выбранных маршрутов, а также общей продолжительности поездки. Это означает, что нет двух одинаковых путешествий 👀, несмотря на то, что каждое из них заканчивается, как только пользователь достигает места назначения.

Буквально пару дней назад Holoride объявили о запуске своей блокчейн экосистемы. Эта система не только предлагает пассажирам новую форму интерактивных развлечений, но и гарантирует справедливое вознаграждение создателей контента за их работу. Куда же без NFT 😅 Да, да, Holoride также видит возможность интегрировать NFT в свою экосистему для обмена цифровыми предметами, их можно будет передавать и обменивать между пассажирами.

AR/VR Designer

⚡️Facebook анонсировали новые возможности Spark AR

Facebook анонсировали две новые AR фичи для Instagram, включая мультиклассовую сегментацию и улучшенный target tracking, которые теперь доступны в версии 114 Spark AR Studio.

🔥 Мультиклассовая сегментация

Креаторы теперь могут комбинировать несколько текстур сегментации, включая волосы, кожу и человека, вместе в одном эффекте.  Facebook также упростил управление несколькими свойствами текстуры, такими как мягкость краев, которая создает контур вокруг человека в сцене, и размер маски, который регулирует размер контура.

Эта новая возможность позволит создавать более сложные фильтры, начиная от фильтров персонажей и заканчивая высококачественными фильтрами одежды.

Документация здесь.

🔥 Обновлённый target tracking

Instagram и ранее мог распознавать изображения, но теперь он может распознавать несколько изображений одновременно! Что открывает новые возможности для креаторов.

Документация здесь.

AR/VR Designer

⚡️ Skydio 3D Scan

Skydio занимаются разработкой крутых коммерческих и потребительских дронов уже не первый год и буквально пару дней назад они анонсировали свой новый продукт, Skydio 3D Scan.

Используя свой движок Skydio Autonomy, дроны могут самостоятельно создавать и оптимизировать схемы полета. Это означает, что операторы дронов любого уровня квалификации теперь могут выполнять более качественное картографирование территорий, инспекции физических объектов и реконструкцию мест происшествий или аварий в рекордные сроки и с минимальным обучением 🚀

Больше информации в статье от Skydio.

Также советую посмотреть их видео презентацию.

AR/VR Designer

🚀 Недельный отчет по патентам в сфере AR/VR

Dispelix:
• Diffractive Element with Doubly Periodic Gratings - lnkd.in/dwAqR8h

Envisics:
• Pupil Expander - lnkd.in/dY7s2pA

Hitachi-LG:
• Light Guide Plate, Method and Display - lnkd.in/d3Gf6uh

Nokia:
• Display Apparatus and Method - lnkd.in/dC8-JeA

Maxell:
• HMD ( head-mounted display ) Device - lnkd.in/d8KUiZg

Apple:
• Method of Displaying Virtual Information in a View of Real Environment - lnkd.in/drqnf7C

SeikoEpson:
• HMD ( head-mounted display ) - llnkd.in/dkAxaBJ, lnkd.in/duRAPZM, lnkd.in/dEy_UDE

Facebook:
• Foveated Rendering Using Eye Motion - lnkd.in/dJaPr-d
• Managing Thermal Resistance and Planarity of a Display Package - lnkd.in/dWy2zSK

Все это говорит об активной работе гигантов в сфере AR/VR, но по большей мере в направлении физических AR девайсов.

AR/VR Designer

🚀 Laser AR Hud Design Solution от FIC

Наткнулся на классную демку от компании из Тайвани, FIC.

Они даже забрали Innovation Awards на CES в 2021, но я как-то упустил это из виду. Так вот, они занимаются разработкой HUD для автомобилей!

Их устройство использует технологию оптического проецирования для отображения информации о транспортном средстве, такой как ADAS, навигация, ограничения скорости, скорость автомобиля, предупреждения о дорожном движении и др.

Водитель может перемещать взгляд с приборной панели на дорогу впереди, что позволяет водителю сосредоточиться на безопасности вождения.

Вроде их технология решает некоторые проблемы рассеивания тепла, с котором сталкиваются похожие технологии, TFT (Thin Film Translator) и DLP (Digital Light Procession).

Вот пару дней назад запостили еще одну демку, видимо и дальше работают над продуктом. Ну, успехов 🙌🏻

AR/VR Designer

🚀Apple WWDC 2021

• Object Capture - новый решение от Apple для фотограмметрии 🙈

• Augmented Reality и 3D для Apple Maps - добавили возможность прокладывать маршрут в AR и рассматривать архитектурные сооружения в 3D.

• Усиление звука и пространственный звук для AirPods. Теперь вы можете лучше расслышать собеседника, просто фокусируясь на нем.

• Live Text (OCR) and Visual Look Up (Visual Search). Визуальное определение и перевод текста по фотографии, прямо в вашей камере на iPhone ⚡️А также визуальный поиск по фото, то есть 'object recognition'.

• Auto Translate - переводите текст где угодно, просто выбираете текст и язык перевода 🤘🏻

• Siri on-device AI ( Security Update ) - все разговоры с Siri будут оставаться на устройстве, а распознавание будет происходить за счет встроенных нейронок. Кул, че 👀

• Universal Control - теперь вы можете просто поставить свой iPad рядом с Mac и использовать его как дополнительный экран, без каких либо дополнительных действий 🔥

AR/VR Designer

👀 Подробнее про Object Capture

В этом видео немного больше технической информации об использовании Object Capture и пару крутых примеров.

Как мы видим, всего в несколько строчек кода Object Capture интегрируется в приложения для iOS и iPad OS. Мы можем управлять уровнем детализации, что тоже будет интересно потестировать.

Конечно же, вскоре появится API для использования Object Capture в Unity и Unreal приложениях.

Ну что, пора генерить крутые идеи и запускать стартапы 😍🚀

AR/VR Designer

🚀 И еще подробнее про Object Capture

Это еще более подробное видео об использовании Object Capture. Затронуты темы:

• Создание 3D контента

• Полезные советы по работе с Object Capture и USDZ, чтобы добиться хорошего качества модели и ее отображения в AR

• Использование сканов с Reality Composer

• Интеграция с AR Quick Look в приложении или на веб-сайте

• Крутые кейсы применения AR Quick Look в искусстве, e-commerce и образовании

AR/VR Designer

⚡️Цифровая копия Бонна, Германия

Руководитель по землеустройству и геоинформации Бонна, Йохен Вагнер, предоставил цифровую копию города.

Судя по его комменариям, в будущем будет поступать все больше и больше данных. На автобусных остановках будут храниться расписания, а деревьям будет назначена информация, которую инспектор получил во время своего обхода. Могут сохраняться даже движения холодного воздуха.

«Мы могли бы смоделировать, как зелень будет расти и выглядеть через 30 лет. Что касается будущих строительных проектов, мы будем их анализировать, чтобы понять, какое влияние здания окажут на окружающую среду»

У руководителя по цифровым технологиям Бонна, Фридриха Фусса, уже есть планы и наработки по интеграции дополненной реальности в этот проект.

В целом качество прорисовки весьма хорошее, можно даже увидить людей на балконах 🙈 Но сам процесс прорисовки занимает некоторое время, основываясь на вашем Field of View.

Попробовать можно здесь: https://3d.bonn.de/

AR/VR Designer

⚡️Интерактивный визуальный опыт от Giantstep

Южнокорейская компания Giantstep, занимающаяся креативными технологиями, на этой неделе представила новую инсталляцию на заказ крупнейшей корейской сталелитейной компании, POSCO.

Это массивная светодиодная башня, высотой 9 метров, демонстрирует «процесса обработки железа» в восьмиминутном интерактивном опыте, с использованием комбинации real-time технологий, визуальных эффектов, проекционного отображения, стереоскопического звука и множество других визуальных элементов.

Посетители также могут взаимодействовать с самой средой. В предоставленном видео мы видим, как пол буквально реагирует на присутствие посетителей, когда они ходят по постоянно меняющемуся пространству.

Iron Civilization находится в Park1538, новом культурном пространстве рядом с Историческим музеем POSCO ( Pohand, South Korea ).

Как по мне, получился очень эффектный опыт взаимодействия с потребителями.

AR/VR Designer

🚀 Google запустили приложение WifiRttLocator

Google уже давно работает над технологиями локального обнаружения, которые приложения Android могут использовать для определения местоположения внутри помещений. И буквально недавно Google выпустила приложение WifiRttLocator в Play Store.

Wi-Fi Round Trip Time позволяет вашему устройству измерять расстояние до точек доступа Wi-Fi с поддержкой RTT. Это полезно для определения местоположения в помещении, где GPS не слишком точен (или даже не доступен), что в свою очередь очень юзабельно для AR навигации. Google WifiRttLocator работает с точностью до 1-2 метров.

Чтобы запустить эту систему, вам понадобится телефон Android с поддержкой Wi-Fi RTT (802.11mc), т.е. устройство с Android 10+. Вам также понадобится как минимум три устройства Google Wifi, потому что они поддерживают IEEE 802.11mc. Наконец, необходим подробный план здания, в котором вы его устанавливаете, с указанием широты / долготы каждого маршрутизатора Wi-Fi.

Пока что поддержка IEEE 802.11mc не очень распространена, но это вопрос времени. В любом случае эта технология имеет хорошие перспективы в сфере AR навигации, так что будет следить за ее развитием.

Руководство пользователя: https://g.co/wifirtt/locator-user-guide
Пример плана этажа: https://g.co/wifirtt/example-house-floorplan
Пример файла конфигурации: https://g.co/wifirtt/example-house-config

AR/VR Designer

🚀 Навигационная система с дополненной реальностью от Cadillac

Все больше и больше производителей авто смотрят в сторону интеграции иммерсивных технологий. Ряды пополняет компания Cadillac с собственной навигационной системой AR, представленной в новом Cadillac Escalade 2021 года.

Маршрут транслируется прямо на изогнутую 38-дюймовую приборную панель, которая размещена за рулем.

В дополнение к визуальным индикаторам навигационная система также использует звуковые подсказки. Чем ближе вы подходите к повороту, тем громче становится звук.

В целом ничего особенного, никакой прорывной технологии, но все же каждый раз приятно видеть подобные интеграции в автопроме.

Однозначно демка от компании FIC выглядит круче, о ней я рассказывал раньше в этом постике.

AR/VR Designer