Skype hololens что это: Почему HoloLens — самое амбициозное изобретение Microsoft за много лет | by Эд Револьвер

Содержание

Почему HoloLens — самое амбициозное изобретение Microsoft за много лет | by Эд Револьвер

Что такое HoloLens

HoloLens — это очки дополнительной реальности, которые умеют создавать «голографические» изображения приложений, игр, звонков из Skype и т.д. с помощью технологии дополненной реальности. Если говорить проще, то это нечто среднее между почившими в бозе очками Google Glass и шлемом виртуальной реальности Ocultus Rift. HoloLens могут превратить обычную стену в большой киноэкран или проекцию рабочего стола, комнату превратить в песочницу Minecraft, облепить холодильник виртуальными записками «купи хлеба» и «покорми кота» и т.д.

Шлем умеет работать автономно, без смартфона или компьютера, а управлять им можно при помощи жестов и голоса. Что важно, голограммы выводятся в высоком разрешении, а воспроизводимые звуки точно позиционируются в пространстве. Угол обзора: 120 на 120 градусов, поэтому очки смогут считывать движения рук даже в том случае, если вы разведёте их в сторону.

Вместе с аппаратом показали и ПО HoloStudio, которое умеет создавать голограммы как в фотошопе — эдакий ответ индустрии 3D печати. Только вместо фотошопа и мышки юзер может крутить, вертеть и разбирать объекты буквально руками, как фантастических фильмах. Что особенно круто, голограммы станут частью Windows 10, и Microsoft не просто красиво рассказала, что где-то и когда-то это будет круто выглядеть, а показала, что вот так HoloLens работает со Skype, а вот так — с Minecraft. Правда, о старте продаж и цене на HoloLens пока ничего не известно.

Что о HoloLens говорят западные СМИ, которые пощупали тестовые образцы задолго до презентации, но хранили партизанское молчание.

Штраус Зелник (Take-Two Interactive) отделался общими фразами

«Демо-показ, в котором я принимал участие, состоялся в головном офисе Microsoft. На голову надет шлем, вокруг — персонажи, которые кажутся реальными, но когда ты взаимодействуешь с ними, то понимаешь, что они не реальные. Это очень необычно», — рассказал создатель GTA в интервью Bloomberg. Правда это было задолго до презентации, он не мог разглашать подробности и отделался дежурной фразой, что находится под впечатлением от очков.

Джесси Хемпел (Wired) побывал на Марсе и вроде бы остался доволен

«Я приземлился на виртуальный Марс. Его создали в тесном сотрудничестве с учёным из NASA Джеффом Норрисом. Быстрым движением руки я переключился с экрана компьютера, который отслеживает прогресс Curiosity в передвижении по поверхности планеты, к виртуальному присутствию на ней. Земля пересохла, пыльный песчаник, такой реалистичный, что я делаю шаг, и мои ноги начинают дрожать. Они не верят тому, что мои глаза им показывают. У меня за спиной возвышается семифутовый Curiosity. Солнечные лучи ярко освещают Curiosity, создавая на земле короткие чёрные тени под его ногами».

Питеру Брайту (ARS Techica) понравилось играть в Minecraft

«Я сидел в виртуальной комнате с парой столов и картиной на стене. Запустили 4-е демо с игрой Minecraft. Cтол передо мной больше не был просто столом — на нём возвышался замок, а рядом протекала река. Середина стола пропала, я мог заглянуть внутрь и увидеть там реку. Затем я начал ходить по комнате и рассматривать замок. Дальше всё стало ещё веселее, я оглянулся на другой стол и увидел там какое-то зомби-нашествие. Эти болваны толпились возле почки взрывчатки, фитиль которой почти догорел. Бабахнуло и в столе образовалась дырка, ведущая к лаве внизу. Там выжившие после взрыва зомбаки нашли свою смерть. На картине сбоку было ещё больше взрывчатки. Когда рвануло и там, из дырки в стене на меня полетела куча блочных летучих мышей. Система реагировала очень чутко — никаких задержек, каждый минимальный поворот головы чётко фиксируется, объекты очень чёткие и не „ездят“ в пространстве. И хотя Minecraft далёк от фотореалистичной графики, эффект присутствия получился на 5».

Бен Гилберт (Engadget) остался не очень доволен очками, и ждёт рабочий прототип

«Работают ли очки? Да, работают. Работают хорошо? Это уже сложный вопрос. Я потратил кучу времени на виртуальную реальность — я носил Ocultus Rift, писал обзор на Gear RV и концепция HoloLens для меня не нова. И сейчас они в зачаточном состоянии — это просто серия технологических демо, далёких от конечной реализации. К тому же они очень громоздкие и неудобные. Но значит ли это, что они неудобные? Нет, Боже, нет! Microsoft только в начале пути и нужно дождаться Windows 10, чтобы понять, как они будут работать вместе».

«Я знаю, как включить лампочку. Это одна из немногих вещей, которые я умею делать дома. Но ребята из Microsoft попросили меня пошутить и сделать вид, что я этого не умею. Окей. При помощи кнопок управления на шлеме я звоню по Skype одному из работников Microsoft. Он просит меня посмотреть на стену справа — в ней появилось отверстие, из которого торчит три провода. «Я вижу всё, что видите вы, — говорит он мне — теперь рядом с ними вы увидите кнопку. Нажмите на неё. Я нажимаю и проекция моего собеседника появляется во всю стену».

Том Уоррен (The Verge) называет HoloLens самой интригующей технологией года

Это самая интригующая технология года. В последний раз такой же восторг у меня вызвал шлем виртуальной реальности Ocultus Rift, с которым у HoloLens много общего: оба изменяют реальность (хоть и по разному), оба надо носить по голове и в обоих случаях ты ухмыляешься, как идиот, глядя на то, что не видит никто другой. И обоим пока нужно думать, как и интегрироваться в жизнь, превратившись из простой игрушки в крайне-полезный гаджет.

Первые приложения Microsoft HoloLens, включающие Skype, Young Conker и другие

Сегодняшний предварительный заказ Microsoft HoloLens Development Edition также включает новости о ряде приложений на основе Windows 10 , которые были разработаны специально для гарнитуры дополненной реальности.

В своем блоге Microsoft Кудо Цунода рассказывает о некоторых из этих приложений, и также были опубликованы видеоролики, демонстрирующие их. Одним из них является HoloStudio:

«Это первая в своем роде программа, позволяющая людям легко создавать 3D в 3D — в реальном масштабе. Мы надеемся, что это приложение легко позволит любому разработчику представить и создать голограммы, необходимые для их собственных приложений. Но HoloStudio также показывает, как использовать интерактивную модель взгляда, жеста и голоса HoloLens ».

Еще одно приложение — версия Skype для HoloLens:

«Мы считаем, что Skype является важным опытом, который необходимо выделить разработчикам по двум причинам. Во-первых, он демонстрирует лучший в своем классе пример того, как вы можете создать голографическое приложение, которым могут пользоваться люди, у которых нет HoloLens. Skype на HoloLens позволяет людям, использующим Skype, на любом устройстве Windows взаимодействовать в голографическом мире. Это приложение покажет, как голограммы могут использоваться для удаленного сотрудничества и обучения ранее невозможным способом. Этот тип связи имеет огромный потенциал как в потребительском, так и в деловом мире. Во-вторых, это позволит разработчикам общаться друг с другом с помощью голографической среды, обмениваться методами разработки и обращаться за советом к другим. С помощью Skype вы можете видеть голограммы, которые видит другой человек, и вы можете использовать голограммы для иллюстрации полезных методов или разработки. подходы «.

Для разработчиков также доступны три игры HoloLens. Одним из них является шутер от первого лица RoboRaid:

«Он использует ваш реальный мир в качестве окружающей среды. Ничто не добавляет срочности в игровой процесс шутера от первого лица, как видение инопланетных роботов, прорывающихся через стены вашего собственного дома. Он использует пространственный звук как огромную особенность игры. Когда вы слышите, как стены рушатся позади вас» невозможно не развернуться и защитить свой газон. Он показывает, как использовать нашу модель взгляда, жестов и голосового ввода в быстром и неистовом игровом процессе ».

Еще одна игра — Young Conker, платформер, основанный на игровой франшизе Rare’s Conker:

«В отличие от традиционных видеоигр, где люди играют на одних и тех же цифровых уровнях — Young Conker настраивает каждый уровень, на котором вы играете, в свой реальный мир. Это означает, что каждый человек получает уникальный игровой опыт, так как среда реального мира каждого игрока уникальна. Удивительно, насколько разные впечатления от игры в вашей гостиной и на кухне или в вашей спальне ».

Наконец, есть фрагменты, загадка и криминальная драма:

Геймеры могут исследовать улики и раскрыть преступления, которые, по-видимому, происходят в их собственных гостиных. В качестве фрагмента голографической платформы «Фрагменты» демонстрируют, как создатели могут создавать персонажей и сюжетные линии, которые обеспечивают более высокий уровень эмоциональной вовлеченности и привязанности, чем вы можете с любой другой средой. «

Еще одно приложение, которое не было показано в видео, — это HoloTour:

В версии для разработчиков HoloTour позволяет людям перемещаться в другое место и испытывать их, как будто они действительно там. Вы видите панорамные изображения с высоким разрешением в 360 градусов в таких местах, как Рим и Мачу-Пикчу HoloTour подчеркивает две уникальные возможности HoloLens. HoloLens позволяет вам наслаждаться виртуальным путешествием, фактически прогуливаясь по местности. В то время как погружение, опыт все еще охватывает смешанную реальность, поскольку он позволяет вам физически ходить по пространствам и близко подходить к объектам, оставаясь при этом не привязанным к ПК, телефону или другому устройству ».

Источник: Microsoft

Очки HoloLens 2 от Microsoft – на острие нового поколения вычислительных устройств – Новости и истории Microsoft

Поле зрения нового устройства увеличилось более чем вдвое по сравнению с устройством первого поколения HoloLens, при этом новые технологии отображения делают голограммы более живыми и реалистичными.

«Впервые вы почувствуете, каково это – потрогать голограмму, взаимодействовать и играть с ней. В какой-то момент вы забываете, что это лишь элемент цифрового контента, а не реальный объект из физического мира», – говорит Алекс Кипман, ведущий технический специалист подразделения облачных вычислений и искусственного интеллекта Microsoft.

Возможности применения HoloLens 2 в бизнесе обеспечиваются растущим потенциалом «умных» технологий. Речь идет об огромном количестве устройств – от радионяней и датчиков в холодильниках до таких сложных приборов, как HoloLens, которые могут быстро и самостоятельно обрабатывать информацию.

Эти устройства могут сообщить самоуправляемому автомобилю, когда ему нужно повернуть, станку на заводе – когда ему нужно выключиться, а работникам магазина – что им нужно вытереть лужу, на которой могут поскользнуться посетители, – в случаях, когда решения необходимо принимать за считанные доли секунды, и даже там, где возможности связи ограничены.

По мере того, как «умные» устройства становятся все умнее, к ним предъявляются повышенные требования в плане безопасности. Приложения, которые ранее использовались для работы в облаке и на локальных серверах, теперь должны работать с самыми разнообразными устройствами, которые постоянно развиваются и разрабатываются для различных производственных процессов. Теперь Azure обеспечивает надежную работу с входными и выходными данными «умных» устройств с помощью таких решений, как Azure Sphere и Azure IoT, и позволяет разработчикам создавать продукты, которые одинаково хорошо работают в самых разнообразных вычислительных средах. А когда такие «умные» устройства соединяются с помощью «умного» облака, они позволяют лучше понимать процессы и в полной мере обеспечивают коллективные вычисления.

«HoloLens 2 представляет собой «умное» устройство с невероятно разнообразными возможностями в плане применения. Оно способно работать как автономно, так и будучи подключенным к любому облаку, – говорит Алекс Кипман. – Однако оно создавалось с учетом особенностей Azure. В паре с Azure оно становится инструментом для совместной работы, к которому можно получить доступ с любого устройства на любой платформе. Именно когда они работают вместе, тогда и начинается настоящее волшебство».

Эти достижения в области смешанной реальности и восприятия окружения стали возможны благодаря десятилетиям исследований и развития бизнеса в Microsoft: устройства распознавания жестов, изначально разработанные для Xbox, инвестиции в ИИ, уроки, извлеченные из первого поколения HoloLens, приложения, которые работают везде, где нужно, экспертные знания в области безопасности и управления учетными записями пользователей, а также многолетний опыт сотрудничества с клиентами и разработки корпоративных решений.

Однако для того, чтобы обеспечить совместную работу и опыт глубокого погружения, которые способна дать смешанная реальность, эти инструменты должны функционировать в открытой среде и работать с устройствами, которые уже есть у пользователей при себе или дома.

«Потенциал смешанной реальности заключается в том, что все эти устройства являются точками доступа к контенту, который существует в мире, – отметил Алекс Кипман. – Например, я хочу создать голограмму и поместить ее в центр комнаты. Если я выйду из комнаты, а вы войдете в нее со своими очками HoloLens или со своим смартфоном или планшетом, должны ли вы видеть эту голограмму? При условии соблюдения всех требований к безопасности данных и получения разрешения, ответ на этот вопрос – “да”».

Новый облачный сервис Azure Spatial Anchors, также представленный сегодня, позволяет людям создавать голограммы, которые потом сохраняются в определенном физическом пространстве. Доступ к ним могут получить сразу несколько человек, использующих HoloLens, телефоны или планшеты. Таким образом, например, менеджер магазина одежды может «оставить» голографические изображения одежды рядом с каждым манекеном, а на следующий день сотрудник может навести свой iPhone на каждый манекен, посмотреть, как он должен быть одет, и начать одевать его.

Сотрудники, работающие в информационной сфере и делающие большую часть работы на компьютере – пишущие тексты, проектирующие различные вещи, отвечающие на электронные письма, управляющие людьми и принимающие бизнес-решения – в первую очередь воспользовались плодами активного развития технологий, которые позволяют им получить практически любую информацию по клику мыши и общаться в режиме реального времени. Это повлекло за собой невероятный скачок производительности как труда отдельных сотрудников, так и компаний в целом.

«Но большинство людей так не работает. Те, кто вручную занимаются сборкой, эксплуатацией, починкой, устранением дефектов и взаимодействием с физическими вещами, часто оставались на задворках технологической революции. Это дает невероятную возможность предоставить сотрудникам на производстве такие технологии, благодаря которым они смогут достичь сопоставимого скачка производительности», – отмечает Лоррейн Бардин, руководитель программы Dynamics 365 Mixed Reality at Work в Microsoft.

«Персонал, занятый на производстве, во многих компаниях не только жизненно важен в повседневной работе, но и определяет способ производства. Часто они составляют большинство сотрудников, – сказала Лоррейн Бардин. – И тем не менее, они практически не увидели всех преимуществ, которые технологии дали сотрудникам офисов и тем, кто работает в сферах, больше связанных с компьютерными технологиями».

Когда Microsoft начала расспрашивать компании о том, как смешанная реальность может помочь им, выяснилось, что ряд потребностей одинаковы в самых разных отраслях. Компаниям требуется помощь в налаживании связей между сотрудниками, работающими в удаленных местах или в разных офисах, с экспертами для решения проблем; при моделировании того, как оборудование, мебель или физические объекты будут располагаться в трехмерном пространстве; и в том, чтобы обучить новых сотрудников, которым необходимы свободные руки для выполнения работы.

Поэтому Microsoft создала такие готовые решения – аналогично тому, как программы вроде Microsoft Word и Excel помогали людям осознать преимущества новой операционной системы Windows – в виде приложений с использованием смешанной реальности для Microsoft Dynamics 365. Они позволяют компаниям практически сразу приступить к использованию HoloLens 2 для решения рабочих задач, без необходимости привлекать большое количество разработчиков.

Dynamics 365 Guides, а также Dynamics 365 Remote Assist и Dynamics 365 Layout входят в число самых первых приложений с использованием смешанной реальности, которые Microsoft предлагает для бизнеса. Dynamics 365 Guides позволяет компаниям перенести образовательные материалы с бумаги и экранов в трехмерное пространство с эффектом присутствия.

«Все хотят быть успешными, и возможность быстро привлечь новых работников и повысить их производительность труда просто неоценима», – говорит Роб Брэнсон, старший директор по глобальным технологиям и операциям в PACCAR ITD, протестировавшей раннюю версию Dynamics 365 Guides.

«Обучение взрослых будет более эффективным, если процесс визуализировать. Видя пошаговые инструкции, наложенные на реальный физический объект, сотрудник действительно быстрее освоит новую операцию», – сказал он.

Устройство HoloLens 2 было разработано с учетом этих требований – оно легче и намного удобнее, чем HoloLens предыдущего поколения. У него лучше сбалансированный центр тяжести, что позволяет носить его весь день. Новый откидной визор позволяет работникам легко переключаться между физическим и голографическим миром.

Click here to load media

Надеть устройство не труднее, чем обычную кепку, зато благодаря ему сотрудники PACCAR могут пользоваться пошаговыми голографическими инструкциями для выполнения новых задач, таких как, к примеру, сборка двери грузовика. В руководствах Dynamics 365 подсвеченные стрелки образуют путь от каждой карточки инструкций прямо до нужного отверстия, куда продевается провод, или до местоположения нужного инструмента в заводском цехе.

Голографические рисунки, наложенные на реальную дверь, показывают, как выполнить задачу. А еще они подсвечивают конструкции за стальной панелью, которые нельзя увидеть, не обладая сверхспособностью видеть сквозь стены как рентген.

В отраслях, где средний возраст специалистов увеличивается, остро встает проблема передачи следующему поколению сотрудников опыт, накопленный за многие годы обучения и стажировки или десятилетия работы.

Например, в компании Alaska Airlines новому механику понадобится около двух лет, чтобы полностью обучиться и войти в курс дела. Технологии смешанной реальности дают надежду на то, что время овладения необходимыми навыками и умениями значительно сократится. Учебная среда с эффектом погружения находит живой отклик у сотрудников, которые выросли на видеоиграх и привыкли практически мгновенно получать доступ к цифровой информации.

«Это возможность оживить скучную бумажную документацию, – сказал Майк Лоренго (Mike Lorengo), директор по архитектуре и стратегическому развитию авиакомпании Alaska Airlines. – Вместо плоского листа бумаги я вижу трехмерное изображение, проецируемое на двигатель».

Смешанная реальность становится еще более эффективной, когда задействует уникальные возможности «умных» устройств и «умного» облака.

Иногда требуется быстро обрабатывать информацию на месте, не отправляя данные в облако. К таким случаям относятся данные с камер наблюдения, информирующих о сиюминутной опасности, или алгоритмы управления тормозными системами. Далеко не все данные от каждого датчика на каждой единице оборудования в заводском цехе релевантны в тот или иной момент времени. Таким образом, запуская менее сложные службы искусственного интеллекта (ИИ) на «умных» устройствах, можно отфильтровать ненужную информацию или выполнить задачи, которые не требуют облачных мощностей. Предположим, вам нужна голограмма, с помощью которой потенциальные клиенты могли бы представить, как будет выглядеть новый автомобиль или различные варианты возможных улучшений. Так вот, всего одно устройство HoloLens 2 со встроенными возможностями, используемое в демонстрационном зале или гостиной, будет обладать вполне достаточной для этого вычислительной мощностью и разрешением.

Но подключив это устройство к новой облачной службе смешанной реальности Azure Remote Rendering, вы сможете оперативно создавать сложные трехмерные цифровые модели, способные конкурировать с гипсовыми или детальными архитектурными моделями, на создание которых сегодня компания может потратить несколько дней или месяцев. Это было бы просто невозможно без облачных мощностей графических процессоров.

«Внезапно смешанная реальность оказывается способной не только улучшить, но и заменить весь бизнес-процесс – например, внедрить полностью цифровое строительство невозможными ранее методами», – сказала Джулия Уайт.

Компания PTC, один из партнеров Microsoft, разработала интегрированные системы, сочетающие в себе решения инфраструктуры Интернета вещей, облако Azure и инструменты смешанной реальности. Это системы, с помощью которых можно осуществить цифровую трансформацию самых разных компаний – от аэрокосмических предприятий до брендов одежды и медико-биологических организаций.

«Представьте себе лаборантку, которая однажды утром приходит на работу и обнаруживает, что важнейший аппарат, который обрабатывает образцы крови, сломался, – сказал Джим Хеппельманн, президент и генеральный директор PTC.

Несколько лет назад единственным способом выяснить, в чем проблема, были мигающий индикатор или неспецифическое сообщение об ошибке. Вероятно, она бы позвонила производителю, который, однако, не всегда может определить причину возникновения проблемы по телефону. Скорее всего, ему пришлось бы направить на объект специалиста по ремонту этого специализированного устройства, который может вообще работать в другом городе. Таким образом, на восстановление работы могло бы уйти несколько часов или даже дней. Между тем, пациенты, с нетерпением ожидающие результатов своих анализов, оставались бы в неведении.

Сегодня, благодаря службе ThingWorx for Azure, она может надеть устройство HoloLens 2 и увидеть голографическую панель мониторинга, где состояние и статус каждого элемента сопоставлено с физическим прибором. Данные, собранные крошечными датчиками Интернета вещей и отправленные в облако Azure, могут выявить проблему с одним из картриджей. Лаборантка может воспользоваться пошаговыми голографическими инструкциями, показывающими, как открыть крышку, какой рычаг откинуть и как вставить новую деталь. Если она не может разобраться, специалист по ремонту, находящийся в офисе производителя в Небраске, посмотрит на экран, увидит в точности то же самое, что она видит через HoloLens 2, и подробно прокомментирует шаги выполнения этой задачи.

«Это замкнутый цикл взаимодействия между людьми и предметами, – сказал Хеппельманн. – Устройства Интернета вещей сообщают мне о конкретной проблеме, а решения смешанной реальности позволяют превратить эту лаборантку в специалиста, способного решить простую проблему, чтобы сэкономить время и деньги на авиаперелеты и аренду автомобилей».

«Для любого конечного специалиста, который может носить гарнитуру смешанной реальности большую часть дня, улучшенный комфорт и увеличенное поле зрения в HoloLens 2 (позволяющее видеть несколько голограмм, читать текст и просматривать сложные детали в 3D) означает качественное улучшение его деятельности, – сказал Джим Хеппельманн.

«Вот почему HoloLens из устройства, с которым интересно играть и создавать прототипы, превращается в устройство, которое сегодня можно широко применять на заводах, в больницах и на стройках. Это большой шаг вперед», – добавил он.

Эти функции также важны для Bentley Systems, еще одного партнера Microsoft, который разрабатывает программное обеспечение для инженеров, архитекторов и строительных фирм, реализующих чрезвычайно сложные инфраструктурные проекты.

По словам Ноа Экхауса, старшего вице-президента Bentley по реализации проектов, при капитальном ремонте городского железнодорожного вокзала или строительстве нового футбольного стадиона из-за множества перемещающихся объектов и тяжелого оборудования создается ряд опасных ситуаций. Вот почему нельзя смотреть вниз, чтобы найти нужную информацию на телефоне или в планшете. Гарнитуры HoloLens позволяют работникам получать доступ к цифровой информации, не забывая о том, где они находятся.

С помощью HoloLens корпоративное ПО SYNCHRO позволяет работникам увеличивать масштаб конкретного места на строительной площадке и получать доступ к важной информации, такой как правила техники безопасности или инструкции по установке, касающиеся определенной области работы. На основе постоянно меняющихся реалий и прогнозов менеджеры могут в трех измерениях следить за тем, как будет выглядеть проект через два дня или три недели и предвидеть любые проблемы с планированием.

«Строительная площадка похожа на гигантский балет – это строго скоординированное действо, в котором в определенном пространстве происходит движение объектов и людей, – добавил он. – И в первый же рабочий день весь план меняется».

«И хотя сохранять и обновлять на одном устройстве планы для бунгало с двумя спальнями вполне возможно, отследить все изменения в масштабном инфраструктурном проекте без облака нельзя в принципе», – сказал Экхаус.

Подключая каждое устройство HoloLens на стройплощадке к основной модели, которая постоянно обновляется в Azure, SYNCHRO гарантирует, что сотрудники будут работать в одной и той же общей реальности и смогут на основе актуальной информации устанавливать порядок заданий, планировать перемещения крана, отслеживать ход реализации проекта и обеспечивать правила техники безопасности.

«Подключение к облаку имеет ключевое значение, потому что в таких крупных проектах поток информации, передаваемой работниками на объекте, инженерами и проектировщиками, никогда не прекращается, – сказал Экхаус. – А последствия реализации инфраструктурных проектов в физическом мире вполне реальны».

Click here to load media

Своему эффекту погружения устройство HoloLens 2 обязано двум определяющим достижениям в области компьютерного зрения и искусственного интеллекта. Способность интерпретировать физическое пространство с помощью семантического понимания позволяет ему отличать стены от окон, а диван от журнального столика. Естественное отслеживание движений рук позволяет людям более инстинктивно захватывать, вращать и менять размер голограмм, не изучая жесты, имитирующие движения мыши.

Этими достижениями мы обязаны четвертому поколению Kinect в сочетании с инструментами искусственного интеллекта. Такая технология определения глубины и движения была изначально разработана почти десять лет назад для создания устройства распознавания жестов для Xbox. Но способность точно определять глубину и показывать, как движутся в пространстве человеческие тела, стала применяться гораздо шире – не только в играх.

Ocuvera, например, использует Azure Kinect в системе, цель которой – предотвратить почти 1 млн падений, ежегодно происходящих только в больницах США, не говоря уже об остальном мире. Она определяет, когда пациент, которому нужна поддержка при ходьбе, пытается самостоятельно встать с кровати, заранее оповещая об этом медсестру, чтобы она успела вовремя прийти на помощь.

Используя камеру с датчиком глубины и алгоритмы искусственного интеллекта, система распознает паттерны движений еще до того, как пациент встанет с кровати – например, пока он садится или болтает ногами. Первоначальные результаты пилотных исследований в 11 клиниках показали, что после внедрения технологии число самостоятельных и незамеченных персоналом выходов из постели уменьшилось более чем на 90 процентов.

Генеральный директор Стив Кин отметил, что команда Ocuvera исследовала все существующие в мире камеры с датчиком глубины и даже пыталась создать свою собственную. В случаях, когда нужно было установить, движется ли пациент вперед или просто переворачивается, либо обнаружить первое покачивание ноги, ни одно из устройств не могло сравниться с Azure Kinect по точности.

«Это сродни поиску подсказок при игре в покер, – сказал он. – Только Azure Kinect предоставляет нам данные, позволяющие узнать, что по-настоящему происходит с пациентом в больничной койке, и с достаточной точностью предсказать его намерения. Когда мы проводим эксперимент в больнице, нам часто говорят, что это просто невозможно, но потом, когда они узнают, что это действительно работает, их изумлению нет конца. Это похоже на волшебство».

Hololens идет по России — IT-компания Wellsoft

Hololens в России

Очки дополненной реальности Hololens от компании Microsoft представлены широкой публике относительно недавно, но уже сейчас можно смело сказать, что за таким устройством будущее. Это новое слово информационно-технического прогресса, которое может уже в ближайшие годы заменить собой привычное общение пользователя с компьютером через клавиатуру и мышку. А особенно очки Hololens актуальны для России.

Очки дополненной реальности Hololens

Очки дополненной реальности Hololens представляют собой уникальное инновационное устройство, отличающееся следующими характеристиками:

  • В основу действия очков положен принцип дополненной реальности, когда на реальный мир накладывается графика и текст
  • Модель создает трехмерные голограммы, которые по взаимодействию объектов и размерам идеально вписываются в уже существующую действительность
  • Дополненная реальность Microsoft Hololens производит сильнейший вау-эффект у потребителей
  • Очки имеют прозрачный экран, для управления которым применяются движения рук человека, его голос и беспроводной контроллер
  • Устройство работает как автономный компьютер, не требующий к себе дополнений, на базе Windows 10

Дополненная реальность Microsoft Hololens в России

Во всем мире очки дополненной реальности Hololens уже начали внедрять в самые различные сферы жизни. По оценкам экспертов Hololens будут популярны в Россиитак как сфер применения такого устройства в нашей стране предостаточно:

Маркетинг и реклама

Hololens-разработки позволяют смотреть через такие очки на специальные стенды, витрины, экспозиции, и видеть там дополнительные элементы. К примеру, на обычной поверхности можно разместить еще не построенный дом: его можно рассмотреть со всех сторон, пройтись по подъезду и войти в будущую квартиру. В итоге потребитель получает незабываемый положительный отклик и данный вид рекламы работает очень эффективно.

Шоу-бизнес и сфера развлечений

Неизменный восторг вызывает у людей применение очков дополненной реальности Hololens на мероприятиях развлекательного характера, а также в играх. Это выводит данные отрасли на новый креативный уровень, захватывает аудиторию и погружает в мир новых волнующих ощущений.

Образование и наука

Благодаря Hololens в России образовательный и научный процесс могут начать приносить более ощутимые результаты, так как реальный мир обогащается мгновенной информацией, взятой из справочников, энциклопедий и т. д.

Профессиональная деятельность

Любая профессиональная деятельность с очками дополненной реальности Hololens будет более успешной, так как позволит сразу получать ответы на все возникающие вопросы, вести беседы с «парящим» в воздухе собеседником в Skype, наглядно видеть все инструкции, к примеру, врачу — снимки, истории болезней, информацию о лекарствах, клиниках, местах в больницах, схемах лечения и другое, и все это не отвлекаясь от осмотра пациента.

Hololens в Wellsoft

Компния Wellsoft занимается разработкой программного обеспечения для очков дополненной реальности. Мы готовы воплотить в жизнь Ваши самые смелые идеи для бизнеса.

Microsoft представила очки дополненной реальности HoloLens — Российская газета

В отличие от Oculus Rift и других подобных устройств, шлем от Microsoft позволяет пользователям взаимодействовать с виртуальными объектами, которые как бы находятся в реальной обстановке. Очки также распознают голос, жесты и направление взгляда. При этом HoloLens являются полностью автономными, не требуя подключения к компьютеру. Для обработки данных различных датчиков используется абсолютно новый процессор Holographic Processing Unit (HPU).

Шлем стал главным элементом платформы Windows Holographic, предназначенной для создания полноценного виртуального мира в реальном. Руководителем проекта является Алекс Кипман — разработчик контроллера Xbox Kinect. Свое нынешнее детище он назвал «новым поколением персональных компьютеров».

Во время демонстрации были показаны примеры использования очков в обычных ситуациях. В одной из сцен женщина в HoloLens пыталась подсоединить трубу к раковине, но не знала, как это сделать. Ее отец, находящийся в другом городе, по Skype на своем планшете указал необходимые действия, и женщина тут же увидела поставленную 3D-метку на дисплее очков. В других эпизодах были представлены варианты применения системы в компьютерных играх, а также во время работы в группе по созданию дизайна нового мотоцикла.

Для создания голограмм Microsoft предложила специальную программу HoloStudio. Сделанные в ней виртуальные объекты можно распечатать на 3D-принтере. Поддержка различных приложений для HoloLens будет интегрирована в Windows 10.

Демонстрация очков дополненной реальности стала неожиданностью. Кипман заявил, что разработчики приложили немало усилий, чтобы не допустить «утечек». Специалисты отметили, что команде Microsoft это удалось.

Точную дату старта продаж шлема пока не назвали. Представители корпорации заявили, что HoloLens появятся примерно в одно время с Windows 10. Неизвестна и стоимость устройства. Гендиректор Microsoft Сатья Наделла выразил желание, чтобы цена очков устраивала не только коммерческие структуры, но и обычных пользователей.

Однако, доступность HoloLens широкому кругу потребителей отраслевые эксперты подвергли сомнению. По мнению аналитика консалтинговой компании IHS Пьера Хардинг-Роллса, которое приводит BBC News, стоимость новинки Microsoft будет весьма высока с учетом фирменной технологии, а также того, что очки позволят создавать мощные игровые платформы и являются эффективным инструментом для работы коммерческих организаций.

Microsoft HoloLens: практическое знакомство | Блог Касперского

Эксперименты с виртуальной реальностью с переменным успехом ведутся с тех пор, как компьютеры научились переходить в графический режим. Постепенно техника научилась создавать пусть и отличимые от реальных, но все же вполне убедительные миры, однако тут выяснилось неожиданное: монетизировать полностью виртуальную реальность довольно трудно.

Создание миров — дело затратное, а реально востребованы они только в играх и немного в образовании. Спору нет, рынки довольно большие, однако взрослые люди с деньгами редко находят время на игры, да и учатся они уже не слишком интенсивно.

Поэтому индустрия обратила внимание на реальность дополненную — когда нарисованная картинка накладывается на мир вокруг пользователя. В таком случае охват аудитории гораздо шире, а значит, и денег больше. Можно даже напридумывать немало моделей использования для дойного корпоративного сегмента.

При нынешних технологиях невозможно сделать достаточно емкий источник питания, чтобы насытить действительно мощную начинку. А если использовать железо попроще, реальность получается не слишком-то и дополненной

Однако на пути хорошего, красивого бизнеса встала непреодолимая преграда — размер носимых устройств. Если в случае с виртуальной реальностью пользователь находится в одном месте и почти не шевелится, то реальность дополненная подразумевает встраивание в жизнь.

То есть человек должен жить нормальной жизнью и решать некие привычные задачи, а умное устройство на голове — накладывать поверх происходящего нечто интересное и полезное.

И вот тут начинаются проблемы: при нынешних технологиях производства батарей попросту невозможно сделать достаточно емкий источник питания, чтобы насытить действительно мощную начинку. А если использовать железо попроще, реальность получается не слишком-то и дополненной.

Тем не менее компании ведут активные исследования на будущее, потому что и нормальные батареи однажды все же появятся, и железо когда-нибудь обязательно обретет достаточную производительность в расчете на сантиметр кубический. И тогда сразу можно будет начать зарабатывать деньги.

О довольно… противоречивом опыте с Google Glass читатель, скорее всего, наслышан. Пришло время поговорить об асимметричном ответе на умные очки — системе дополненной реальности Microsoft HoloLens.

В первый раз ее явили миру 21 января 2015 года, во время мероприятия, посвященного Windows 10. Тогда все ограничилось показом со сцены и несколькими видеороликами. Весьма красочными и будоражащими роликами, следует признать.

В конце апреля, на конференции для разработчиков Microsoft Build 2015, HoloLens также посвятили значительную часть главной презентации первого дня, но потом нескольким сотням избранных разрешили примерить систему на себя. Среди них оказался и автор этого поста.

На сцене HoloLens выглядит крайне эффектно. Хотя я не очень точно выразился. Как раз на сцене-то ничего не происходит: на ней стоят люди в шлемах и вертят головами. Но на экранах, куда транслируется картинка с камер, оснащенных специальными насадками, творится волшебство.

Живой человек ходит по комнате, на виртуальных стенах которой появляются экраны с фильмами, на тумбочке стоят трехмерные объекты (как настоящие!), скучные физические объекты на глазах обретают интереснейший виртуальный обвес.

Девочка на сцене показала, как можно изучать тело человека, извлекая из него скелет, сосудистую, мышечную и нервную системы. Я видел, как подобное изучение происходит в наших анатомичках при медицинских университетах. Вариант от HoloLens мне понравился сильно больше.

О том, что находится внутри шлема, Microsoft говорит скупо. Мы знаем только, что для обсчета эффектов там используется специально разработанный HPU (Holographical Processing Unit), а работает все под управлением копии полноценной Windows 10. Я позволю себе несколько предположений.

Первое — HoloLens можно смело называть HolyLens, потому что руку к их разработке явно приложило израильское подразделение Microsoft, которому мы обязаны сенсором Kinect (да, я знаю, что корпорация купила израильский стартап, разработавший эту технологию, но сути это не меняет). Многие наработки Kinect нашли место в HoloLens, и первые слухи о разработке дополненной реальности по версии Microsoft также приходили со Святой земли.

Второе — внутри шлема HoloLens, представляющего собой настоящий компьютер, скорее всего, стоит процессор Intel Core M. Он единственный может обеспечивать приличную производительность (на уровне мобильной версии Core i5 четвертого поколения), не требуя активного охлаждения (пропеллеров в HoloLens нет). Конечно, в финальной версии, если таковая случится, будет использоваться совсем другое железо, но пока выбирать особенно и не из чего.

#Microsoft #HoloLens: как @vilianov трогал будущее

Tweet

В общем, со стороны система выглядит очень круто. А как же в деле?

Обычно всякие секретные показы происходят в особых секретных комнатках. Но в Microsoft на маленькие каморки не размениваются, так что для демонстрации HoloLens выкупили на время конференции пару этажей в соседнем от центра Москоне отеле, попасть на которые без специального сопровождения было почти невозможно.

Перед прикосновением к волшебству нас научили правильно надевать шлем на голову (строго двумя руками!), замерили расстояние между зрачками и показали небольшую презентацию, как два молодых человека работают над 3D-моделью здания по Skype.

Да, чуть не забыл: в самом начале мы сдали все электронные устройства, включая смарт-часы, и потому единственным доказательством приобщения к братству HoloLens стали фотографии прототипа шлема за стеклом, сделанные в начале экскурсии. И еще футболка с шлемом на груди.

И вот, когда все предварительные ласки итерации были закончены, нас отвезли на 27-й этаж отеля, где в каждом номере находилось по демозоне HoloLens. Здесь стоит оговориться, что перед началом работы система требует довольно длительной и точной калибровки под условия конкретного помещения, иначе ничего не заработает. Поэтому проводить демонстрацию где попало нельзя. Во всяком случае, пока нельзя.

Я надел заветный шлем двумя руками, как учили. Он был умеренно тяжел. Пластиковая конструкция оказалась довольно теплой на ощупь: трудящаяся внутри электронная начинка давала о себе знать. Фиксируется шлем специальным болтом, конец которого упирается куда-то в район мозжечка. Не самый удачный вариант: у меня почти никогда не болит голова, но тут она сразу же начала ныть.

Десять минут демонстрации я выдержал без особых страданий, но даже полчаса стали бы, наверное, мукой. Конструкция пока тяжелая, не меньше 800 граммов. А жесткая фиксация необходима, потому что стоит глазам хоть капельку сместиться от центра экранов HoloLens — и волшебство исчезает. С большинством очков шлем совместим, если только вы не любитель огромных вычурных оправ.

На презентациях кажется, что дополненная реальность ложится на окружающий мир абсолютно естественно. На деле все немного не так. Надев шлем, вы смотрите на происходящее словно через видоискатель фотоаппарата, снабженного объективом с фокусным расстоянием порядка 50 мм.

На презентациях кажется, что дополненная реальность ложится на окружающий мир абсолютно естественно. На деле все немного не так

Фотографам уже все понятно, а нормальным людям объясню: «полтинник» хорошо подходит для предметной съемки и портретов, но панорамные виды им снимать проблематично. Углы обзора довольно ограничены. Дополненная реальность является через окошко, и, чтобы увидеть все происходящее вокруг, приходится активно вертеть головой.

В рамках демонстрации мне первым делом показали картонный макет ансамбля зданий, расположенных вокруг пустой площади. На этой площади тоже предстоит что-то построить, и это что-то появилось у меня перед глазами. Виртуальное здание выглядело ничуть не хуже картонных собратьев.

Мне предложили изменить его размеры, но не жестом, как люди на сцене (эту часть волшебства пока поручают только доверенным спецам), а старой доброй мышкой. И действительно, здание охотно выросло вверх. Чтобы увидеть верхний этаж, пришлось задрать голову.

Дальше мне предложили совершить виртуальную прогулку по части будущего здания. И сразу же обнаружилось, что при проектировании допущена ошибка: несущая металлоконструкция находится аккурат посреди одного из окон! Об этом мне сообщил инженер Ричард, материализовавшийся в комнате.

Он представлял собой белую фигуру человека, лишенную текстур (вероятно, на текстурах экономят, чтобы не создавать излишнюю нагрузку на чипы). Ричард перенес окно немного вправо — и проблема была устранена. В реальной жизни, наверное, из проекта устранили бы архитектора, допустившего подобный ляп.

Наблюдая за всеми процедурами, я видел и раму окна, и металлоконструкцию, и происходящее «снаружи». Разрешение вида за окном было не слишком высоким, и все же увиденное впечатляло.

Потом в стене передо мной обнаружилась проблемная труба, которая тоже выглядела довольно убедительно. Ричард мгновенно исправил и ее. Наверное, несмотря на иностранное имя, этот виртуальный инженер родом из Кемерово — города, где люди умеют исправлять абсолютно все.

На этом демонстрация и закончилась. Как я понял, все журналисты равны, но некоторые равнее других, поэтому некоторым американским коллегам показали чуть больше. Но для получения представления о нынешнем состоянии HoloLens увиденного хватило.

Стоит ли ожидать эту систему в продаже в обозримом будущем? Нет, не стоит. По нескольким причинам

Стоит ли ожидать эту систему в продаже в обозримом будущем? Нет, не стоит. По двум причинам. Первая — аппаратная. Для комфортного повседневного использования шлем HoloLens должен весить на порядок меньше, а работать от батареи весь рабочий день.

Вполне очевидно, что оба пункта при нынешнем уровне развития железа и — особенно — аккумуляторов недостижимы. И не забываем про углы обзора, которые должны существенно расшириться.

Вторая причина программная. Базовый софт HoloLens есть и работает. Но для продажи продукта пользователю необходимо множество дополнительного контента. Он может быть самым-самым разным, от имитации дорогих интерьеров до виртуальных собеседников противоположного пола. От цифровых муляжей человека до среды 3D-моделирования жестами. Разработка таких приложений потребует много времени и средств, ведь прежде ничего подобного никто не делал.

Получается, что Microsoft надо сначала доделать шлем, сделав его существенно легче и удобнее, потом наладить массовое производство (пока все шлемы собираются вручную), сделать калибровку мгновенной и незаметной, раздать большое количество сэмплов разработчикам, помочь им сделать интересные продукты и только тогда начинать думать о покорении массового рынка. Скорее всего, речь идет о годах, если не о десятилетии. Ведь в процессе внедрения может возникнуть масса подводных камней, о которых мы сейчас даже не догадываемся.

А уж сколько опасностей таит «дополненный» мир… Какой-нибудь альтернативно одаренный хакер взломает детскую игру, и вместо милых котят на вашего ребенка вдруг начнут напрыгивать абсолютно реальные зубастые крысы. Привыкнув к шлему, вы, не снимая его, наберете PIN-код банковской карты, а троян, заблаговременно пролезший в систему, зафиксирует и номер карты, и секретный код на обратной стороне, и сам PIN-код.

Вообще, простор для сбора информации через такой шлем просто безграничен — это вам не «травоядная» веб-камера, которая понуро смотрит в одно и то же место, камеры шлема видят все, что видите вы сами, когда он на вас надет.

Нейрокомпьютерные интерфейсы: что это, как они работают и где их можно использовать — http://t.co/XAqfHIZVPW pic.twitter.com/yannjZpB2d

— Kaspersky Lab (@Kaspersky_ru) April 29, 2015

И это не говоря уже о том, что существует немало вопросов к взаимодействию дополненной реальности и реальности настоящей, физической. Скажем, увлекшись просмотром кино на виртуальном экране, вы можете столкнуться с вполне реальным стулом или стеной. А если из уютной квартиры перенестись на улицу или в метрополитен, который, как всем известно, является транспортным средством повышенной опасности?

Но и возможностей масса. Тут нет смысла перечислять все потенциальные сценарии применения шлема в народном хозяйстве. Уверен, фантазия подскажет вам массу вариантов.

Microsoft далеко не единственная компания, занимающаяся дополненной реальностью. Все чуют запах денег, и потому вслед за грандами подтягиваются десятки стартапов. С каждым годом их будет все больше. И хотя сегодня и даже завтра сделать готовый массовый продукт не получится, однажды мы обнаружим, что, проснувшись утром, так же естественно надеваем очки дополненной реальности, как когда-то брали в руки смартфон.

Ну или не мы, а наши дети. Все равно хорошо.

Microsoft HoloLens: сногсшибательно, но много вопросов

Microsoft на днях объявила о множестве новых функций Windows 10, включая детали о новой мобильной ОС. Однако, возможно, самая странная часть была в последнем квартале, где слово «голограммы» неожиданно подошло снова и снова. Конечно, это было вводной частью к Microsoft HoloLens, новая голограмма Windows 10 приводила в действие аппаратные средства, которые будут доступны в ближайшее время.

Пресса была приглашена для эксклюзивного просмотра в лабораторию и на рабочие прототипы HoloLens, включая четыре рабочих сценария, демонстрирующих реальное приложение шлема. К сожалению, фотографии и видео были запрещены, поскольку мы даже должны были проверить, заблокированы ли наши смартфоны. Независимо, вот мои мысли и опыт с HoloLens.

Каково это

Носимая технология, которая дополняет реальный мир, не нова. Обещанная виртуальная реальность (VR) существует много лет, достигая максимума в фильме «Газонокосильщик» 1992 года. Проблемы всегда были многочисленными, включая головокружение и просто не приводящий в восторг опыт.

Oculus Rift, наверно, реальная система VR следующего поколения для интересующихся, но это еще будет видно, как хорошо она продается. Google Glass главным образом считают неудавшимся экспериментом, но рассматривая, как осторожно Google их продавал, это может быть расценено как эксперимент.

HoloLens не относятся к тому, что уже есть. Это не VR (Вы можете видеть через линзы и Вашу среду), и это не Google Glass (Вы вряд ли будете ходить в них вне дома). Вместо этого они используют технологию, разработанную Microsoft, как Kinect, чтобы отобразить вещи в Вашей среде.

Конечный продукт — единый размер для всех устройств, которые выглядят довольно занудным, но все еще очень чистым и изящным. Вес сбалансирован, чтобы чувствовать себя комфортно, у него нет связи с реальным миром, поскольку он работает от аккумулятора и имеет собственный компьютер (с тремя процессорами). Вы можете также носить свои очки с ним.

Что касается времени автономной работы? Microsoft не имеет ни малейшего представления, как, завершенный дизайн, который был публично представлен еще на достаточно новом оборудовании (лаборатория использует носимый микрокомпьютер и намного более грубо выглядящее оборудование, подробнее об этом позже).

Minecraft, Skype, 3D модель здания и движение к Марсу

Microsoft сопровождала прессу под усиленной охраной в секретной лаборатории, где HoloLens были разработаны в течение последних нескольких лет. Фактически, ссылки на HoloLens появились еще в 2012 году, когда внутренняя дека Microsoft PowerPoint протекла. В нем была упомянута «Fortaleza», как «прорыв головных и беспроводных устройств» с «бесшовной интеграцией мира цифровых технологий с физическим миром». Да, ребята, это было долгое время в процессе создания.

Текущие лабораторные версии HoloLens намного более сыры, чем почти заключительная промышленная модель, показанная на сцене. Последняя версия имеет большую часть представленных аппаратных средств, и Вы должны носить несколько тяжелый мини-PC на шее, все ограниченны большим количеством компьютеров. Дело в том, что Microsoft удалось уменьшить это до небольшого размера без проводов, впечатляет.

Четыре станции были подготовлены для медиа материала, которые включали различный опыт:

Skype демонстрация
HoloBuilder (Minecraft)
HoloStudio (3D модель здания)
OnSite (NASA / JPL Марсоход)

HoloBuilder позволяет создавать целый мир Minecraft в комнате, используя книжные полки, пол, скамейки и многое другое. Безусловно самая крутая часть была возможностью пробить виртуальные дыры в Ваших стенах или местах размещения, чтобы видеть вне ее. Это был действительно захватывающий опыт, поскольку Вы чувствовали, что изучали новую пещеру. Другой пример, копали яму в месте размещения, которая тогда пропускала свет ниже пола. HoloLens может создать голограммы под объектами, позволив Вам осмотреть углы, ниже мест размещения и больше.

Демонстрационный пример Skype позволял Вам установить реальный выключатель, электричество и остальное. К счастью у Вас был помощник в виде друга Skype, который провел Вас через весь процесс. Установка была завершена с помощью Вашего контакта в Skype, который может «рисовать» в Вашем мире через Surface или другой компьютер (она не использовала HoloLens). Какой провод я должен присоединить? Позвольте своему другу нарисовать стрелку в воздухе, обращая на нее ваше внимание. Только представьте себе, осматривая Вашу комнату, пока Джон Мэдден рисует указатели, круги и схемы на Ваших стенах, объектах и т.д. Это невероятно.

Так как у HoloLens есть динамики, микрофоны и камеры, весь вызов Skype был «внутренним» к устройству.

Сегмент HoloStudio показал, как Вы могли создать 3D модели в воздухе, повернуть их вокруг, добавить вещи, изменить размеры и т.д. После того, как Вы закончили, одним касанием Вы можете отослать его в компанию по 3D печати, которая может тогда передать его обратно Вам в почте. Было ли это печать игрушки, карты флэш-памяти USB с Коалой, или знак для Вашей комнаты, HoloStudio совершенен для профессиональных художников или даже людей, увлеченных своим хобби.

Наконец, приложение OnSite было в соединении с NASA и JPL для миссии марсохода. Беря 3D изображение, взятое марсоходом и отображаемое в Вашем мире, Вы можете идти по Марсу. Еще лучше Вы могли провести конференц-связь с другим ученым для сотрудничества. С другим человеком в Вашем мире Вы видите, куда его пристальный взгляд идет, поставить флаги на объекте и т.д. Интересной функцией было то, как Вы могли использовать компьютер для манипуляций в том мире и наоборот.

Возможно, большая часть всех их была опытом, не чувствовать себя бесполезными. Они действительно чувствовали настоящие проблемы, которые могли быть решены. Способность совместно использовать Вашу среду в Skype поднимает все сотрудничество к новому уровню, создавая виртуальный город в Вашей комнате, который Вы можете обойти вокруг и манипулировать, распечатывая 3D модели, с которыми Вы можете взаимодействовать, это было все хорошо, полезно.

Столько вопросов

Если бы Вы спросили меня, что я думал о HoloLens как о личном опыте, то я сказал бы, что это фантастика. Через несколько минут я почувствовал, что был в том мире, в котором я действительно гулял по Марсу. Имея Skype звонок появляется в Вашем поле зрения, было весело. Прикрепление того вызова к стене в Вашей комнате было еще круче.

Проблема для Microsoft прямо сейчас: как они будут позиционировать HoloLens?

Я не знаю.

Будет ли HoloLens продаваться за 299$, нацеленный на поклонников Minecraft или за 1299$ для архитекторов, больниц и НАСА? Продвинет ли Microsoft их как Xbox One или позволит им просочиться как Microsoft Band?

Так как мы еще не знаем ни одного из тех ответов, трудно сделать полное суждение о HoloLens. Технология впечатляющая, не делающая ошибок. Я думаю, что HoloLens может охватить достаточно много категорий, от нейрохирургов до MMOGs (массовые многопользовательские онлайн игры). Существует роль для HoloLens, чтобы играть где угодно.

HoloLens действительно решает множество проблем, с которыми сталкиваются Google Glass и Oculus Rift. С Glass Вы имеете социальное клеймо нося головной дисплей, который сам по себе функционально ограничен. Oculus Rift интерактивные, но возможно чересчур, что люди могут получить морскую болезнь. Oculus также более узок по функционалу, если сравнивать с HoloLens.

С этой точки зрения HoloLens уникальны в этой области, и я думаю, что это лучший шанс того, чтобы быть реальным аппаратным сегментом для Microsoft. Однако, пока ответы о времени работы от батареи, стоимости, маркетинге, доступности и т.д. станут известны, я останусь взволнованным, но осторожным.

Skype выходит на Microsoft HoloLens

Пока нет подробностей или конкретики, но первая версия Microsoft HoloLens для разработки выйдет 30 марта 2016 г. (3000 долларов США), и Microsoft называет Skype одним из интересных вариантов использования HoloLens

.

«Образовательные и обучающие моменты более эффективны, когда вы можете показать, а также рассказать. Skype для HoloLens позволяет вашим контактам видеть то, что вы видите, слышать то, что вы слышите, и рисовать на своих экранах, чтобы размещать голограммы над физическими объектами в вашем поле зрения.Посмотрите, как голограммы могут помочь людям общаться по-новому ».

https://www.microsoft.com/microsoft-hololens/en-us/apps#skype

Microsoft дает отличный видеообзор здесь:

«Наша версия для разработчиков также поддерживает Skype, улучшенный, чтобы люди могли общаться с помощью голограмм! Мы считаем, что Skype — важный опыт, который следует выделить разработчикам по двум причинам. Во-первых, он показывает лучший в своем классе пример того, как создать голографическое приложение, которое понравится людям, у которых нет HoloLens. Skype на HoloLens позволяет людям, использующим Skype на любом устройстве Windows, взаимодействовать в голографическом мире . Это приложение покажет, как голограммы могут использоваться для удаленной совместной работы и обучения, что ранее было невозможно. Этот тип общения имеет огромный потенциал как в потребительском, так и в деловом мире. Во-вторых, это позволит разработчикам общаться друг с другом, используя голографический носитель, чтобы делиться методами разработки и обращаться за советом к другим. С помощью Skype вы можете видеть голограммы, которые видит другой человек, и вы можете использовать голограммы, чтобы проиллюстрировать полезные методы или подходы к разработке.Мы надеемся, что сообщество разработчиков голографических приложений будет именно таким — сообществом. Мы все вместе определяем будущее голограмм. Skype в версии для разработчиков позволит всем нам оставаться на связи и помогать друг другу в создании наших голографических приложений. Я с нетерпением жду встречи с вами в ближайшее время по голографическому звонку в Skype ».

Представляем первый опыт работы с Microsoft HoloLens Development Edition

Интересно также посмотреть на некоторые коммерческие идеи.Функции Enterprise HoloLens включают управление идентификацией, функции корпоративной сети для Wi-Fi, брандмауэр, прокси и VPN, управление мобильными устройствами, шифрование данных и боковую загрузку приложений.

Как работает видеочат в Skype на HoloLens «HoloLens :: Next Reality

Когда вы носите голографический компьютер на лице, вы приобретаете одни вещи и теряете другие.Это определенно верно при использовании Skype в HoloLens от Microsoft. Некоторые видеочаты будут работать лучше, потому что ваш собеседник может видеть то, что вы видите, а не ваше лицо, но другие просто кажутся странными.

Как вы увидите в видео выше, я записал себе звонок из Skype на своем ноутбуке в Skype на HoloLens. По большей части это работало довольно хорошо и примерно так же, как между обычными компьютерами и смартфонами.

Вы бы надели HoloLens и использовали Skype, чтобы друг помогал вам в решении задачи.

Вы не упустите возможность увидеть лицо другого человека, когда просто разговариваете с самим собой по видеоконференцсвязи, но вы можете это сделать, если на самом деле разговариваете с другим человеком. Вы можете слышать их и видеть то, что они видят, но это то, что большинство из нас испытали, переключаясь между передней и задней камерами на наших телефонах. Представьте, что вы никогда не сможете переключиться обратно на фронтальную камеру, и вы поймете дилемму с использованием HoloLens.

Не пропустите: HoloLens вдыхает новую жизнь в простые вещи, такие как просмотр телевизора

Microsoft может использовать голографические изображения в качестве замены вашего лица в будущем.Мы уже видели, как Kinect может сделать это, но вы не можете подключить его к HoloLens (да и это было бы нецелесообразно).

Вместо этого функции отслеживания движения и распознавания речи гарнитуры могут сообщать о движениях визуализированной голограммы по вашему выбору и отправлять ее другому вызывающему абоненту. Они по-прежнему будут видеть то, что вы видите, но также и ваше голографическое изображение, чтобы, по крайней мере, казалось, что им есть с кем поговорить напрямую.

Представьте, что вы никогда не сможете переключиться обратно на фронтальную камеру, и вы поймете дилемму использования HoloLens.

Но это только догадки. Microsoft уже хочет, чтобы вы взглянули на видеоконференции под другим углом, как демонстрирует их видео выше. Они считают, что делиться своей видимостью с другим — это просто еще один способ общения, более практичный.

Вместо того, чтобы просто звонить кому-нибудь для разговора, вы должны носить HoloLens и использовать Skype, чтобы друг помогал вам в решении задачи. Когда вы находитесь удаленно и вам нужна помощь, вы не хотите отправлять видео своего лица, а скорее видео о том, что вы делаете.

Skype на HoloLens достаточно хорошо поддерживает этот метод видеоконференцсвязи. Он дает вам перо и стрелку для разметки вашего пространства и указания на определенные объекты. Инструмент со стрелкой так же прост, как нажатие воздухом в том месте, где вы хотите пометить объект, но с помощью инструмента «Перо» довольно сложно быть точным из-за ограниченного поля зрения HoloLens и удобных, но несовершенных возможностей отслеживания рук.

Не пропустите: HoloLens от Microsoft собирается изменить нашу работу

Использование Skype в HoloLens может оказаться полезным в нескольких практических приложениях.Фактически, это кажется полезным обновлением, когда вы используете его так, как рекомендует Microsoft. Однако, если вы просто разговариваете с другим человеком, этот формат кажется немного странным. Уловки с ручкой и стрелками делают его забавным, но в конечном итоге Microsoft придется найти лучшее решение для стандартных разговоров. Или, если нет, нам просто нужно начать стоять перед зеркалом.

Microsoft HoloLens — не шутка: моя реальность дополнена Skype, Minecraft

Microsoft обещает, что с HoloLens он сможет обеспечить по-настоящему вычислительные возможности нового поколения, в то время как другие технологические гиганты изо всех сил пытаются сделать то же самое.Microsoft

REDMOND, Вашингтон. — В недрах здания 92, скрытого под общественным центром посетителей компании в секретной серии лабораторий, Microsoft позволила нескольким людям опробовать, возможно, самое амбициозное устройство Windows из когда-либо созданных: голографическую гарнитуру, которая стремится конкурировать с самыми продвинутыми устройствами виртуальной реальности.

Microsoft HoloLens, как ожидается, будет работать с Windows 10 и приложениями — голографическими, которые будут плавать перед вашим взором, и приложениями, которые можно запускать на телефонах, планшетах, ПК и игровой консоли Xbox One.С помощью голографических программ Microsoft пытается изменить наши представления о вычислениях, производительности и коммуникации. Подобно тому, как конкуренты VR Oculus (принадлежит Facebook) и Google пытаются переосмыслить виртуальный опыт с помощью своих головных устройств, Microsoft хочет, чтобы мы представили мир без экранов, где информация просто плавает перед вами.

Сейчас играет:
Смотри:

5 вещей, которые вам нужно знать о Microsoft HoloLens

1:39

«Мы не говорим о том, чтобы поместить вас в виртуальные миры», — сказал в среду лидер HoloLens Алекс Кипман во время мероприятия в штаб-квартире Microsoft здесь.«Мы мечтаем за пределами виртуальных миров, за пределами экранов, за пределами пикселей».

Кипман начал работать в Microsoft семь лет назад, когда он представил идею камеры движения Kinect, устройства для видеоигр, которое отслеживало движения тела игрока. Kinect стал одним из самых продаваемых устройств в истории.

Последние пять лет Кипман сосредоточился на внедрении инноваций в Kinect — дешевых и мощных камерах с датчиком движения, голосовом управлении — и упаковывании их в пару прозрачных очков.

Microsoft далеко продвинулась в реализации этой концепции дополненной реальности. Создав HoloLens сегодня, компания разработала убедительный прототип, который перемещает трехмерные изображения перед вами и может изменять внешний вид реальных объектов повсюду. Но неясно, как Microsoft рассчитывает выполнить обещание генерального директора Сатьи Наделлы о том, что такое устройство будет как для потребителей, так и для бизнеса.

Также не сказано: сколько это будет стоить. Microsoft заявила, что рассчитывает выпустить законченный HoloLens в те же сроки, что и Windows 10, которая должна появиться где-то в этом году.С другой стороны, различные комплекты разработчика Oculus Rift в прошлом стоили более 300 долларов, а его потребительская модель, как ожидается, будет стоить от 200 до 400 долларов. Гарнитура Samsung Gear VR стоит около 350 долларов.

Очки Microsoft отличаются от очков Oculus Rift, которые обещают перенести вас в другой мир и открывают многочисленные возможности для кино, телевидения, спорта и других развлечений. HoloLens использует технологию, называемую дополненной реальностью, которая накладывает изображения на реальную жизнь и позволяет вам взаимодействовать с ними.Теоретически это легко, но до сих пор самые большие трудности, с которыми сталкивались конкуренты, заключались в разработке гарнитуры, которая могла бы работать автономно, без привязки к компьютеру или источнику питания и перемещаться в различных средах. Необходимо преодолеть эти проблемы, прежде чем обычные потребители купятся на столь смелое видение вычислений следующего поколения.

От Марса к Майнкрафту

Когда нас ведут вниз по лестнице в подвал, нам говорят, что мы не можем попробовать более отполированный прототип «все в одном», который Microsoft только что показала на сцене.Вместо этого мы будем использовать более ранний, более уродливый прототип. Компания не допускает в комнату смартфонов и фотоаппаратов.

Блок голографической обработки устройства, специальный процессор, разработанный Microsoft для того, чтобы помочь HoloLens интерпретировать движение и звук, помещен в отдельную толстую коробку, предназначенную для ношения на шее. Очки — это не гладкая модель серого цвета, которую Microsoft представила сегодня утром, а массив металла. Длинный шнур привязывает меня к паре компьютеров, которые помогают загружать изображения в очки.

Более совершенный прототип HoloLens от Microsoft содержит полностью закрытый компьютер со своим собственным специализированным процессором, блоком голографического процессора или HPU.
Microsoft

Носить устройство не так удобно, как носить последний прототип Oculus Rift или гарнитуру Samsung Gear VR. И изображение, которое я начинаю видеть на экране, когда я надеваю линзы на глаза, не намного резче, чем у конкурирующих устройств.

Скорее, самое большое отличие — и в чем Microsoft действительно отличает HoloLens — это то, как изображение, которое я вижу, позволяет мне взаимодействовать с окружающей средой, а не убегать от нее.

Первая демонстрация, созданная в сотрудничестве с Лабораторией реактивного движения НАСА, переносит меня на поверхность почти фотореалистичного Марса. Используя настоящие фотографии с марсохода Curiosity, Microsoft смогла воссоздать марсианский пейзаж и наложить 3D-карту вокруг небольшого помещения размером с конференц-зал.Я могу ходить, наклоняться и смотреть на камни. Я даже могу увидеть марсоход НАСА Curiosity, который больше стандартного автомобиля.

С HoloLens я не только могу видеть, каково это ходить по Марсу, но также могу взаимодействовать с содержимым на поверхности. Используя жест пальца под названием Air Tap, HoloLens позволяет мне отмечать определенные точки на поверхности для исследования и даже позволяет мне разговаривать с другой парящей фигурой и совместно исследовать поверхность. НАСА надеется запустить HoloLens в качестве повседневного инструмента в Лаборатории реактивного движения к лету, что позволит исследователям впервые визуализировать и нанести на карту, где Curiosity будет бурить, пересекать и фотографировать поверхность планеты.

Microsoft в сотрудничестве с Лабораторией реактивного движения НАСА разработала среду Марса в реальном времени, чтобы исследователи могли лучше контролировать движения марсохода Curiosity и изучать поверхность планеты.
Microsoft

Как и Oculus Rift, Microsoft продвигает HoloLens как совершенно новый способ испытать видеоигры. После покупки разработчика Minecraft Mojang в сентябре за 2,5 миллиарда долларов Microsoft теперь владеет популярной игрой о построении пикселей и решила создать свою собственную голографическую демонстрацию, основанную на художественном стиле игры.Демоверсия превращает всю комнату в живой игровой мир, пробивая дыры в столах и сквозь стены, открывая интерактивную среду, которую можно изменить одним касанием пальца.

Пожалуй, самая потрясающая демонстрация, однако, была наиболее практичной: программное обеспечение для видеоконференцсвязи Skype. Microsoft попросила нас отремонтировать выключатель света в видеочате с кем-то, использующим планшет Microsoft Surface Pro 3. Их лица покачивались перед моим взором, пока я получал инструкции. Чтобы помочь нам маневрировать с помощью различных инструментов, сотрудник Microsoft смог нарисовать линию нашей видимости в режиме реального времени, используя стрелки и элементарные диаграммы, чтобы описать лучший способ размещения электроники и того, как собрать все вместе.

Ознакомьтесь с возможностями Microsoft HoloLens (изображения)

Посмотреть все фото

Демонстрация была уникальна тем, что демонстрировала возможное и реалистичное использование дополненной реальности, которое не было напыщенным или предназначенным для восхищения. Я смог сделать то, что я могу сказать, что не делал довольно долгое время, с помощью совершенно незнакомого человека, который смотрел моими глазами и опирался на мою реальность, чтобы направить меня через задачу.

Проверив напряжение на проводах, намотав катушки на соответствующие винты и закрыв свободные провода, я взял пульт дистанционного управления и нажал кнопку.Свет ожил. Мне нужно было только поднять глаза, чтобы человек на другом конце моего глаза увидел конечный результат нашего успешного сотрудничества.

Объяснение HoloLens от Microsoft: как это работает и чем отличается

Прототип Microsoft HoloLens имеет все внутренности компьютера, встроенные непосредственно в гарнитуру.Это означает, что не требуются шнуры или даже смартфон.
Microsoft

У Microsoft есть видение будущего, которое включает термины и технологии прямо из научной фантастики.

Но действительно ли мы видим это будущее? Да и нет.

Microsoft HoloLens, которую компания представила в своей штаб-квартире в Редмонде, штат Вашингтон, в среду, представляет собой элегантную яркую гарнитуру с прозрачными линзами.Вы можете видеть мир вокруг себя, но внезапно этот мир трансформируется — с трехмерными объектами, парящими в воздухе, виртуальными экранами на стене и вашей гостиной, покрытой виртуальными персонажами, выходящими из себя.

Технологические компании давно обещали принести нам будущее уже сейчас, на 5 или 10 лет вперед, чтобы попытаться поразить потребителей следующим большим прорывом. С другой стороны, Голливуд продемонстрировал эту технологию в действии (или, по крайней мере, в ее симуляции).

В «Отчете меньшинства», например, персонаж Тома Круза для выполнения полицейской работы использовал подметание, жесты в воздухе и прозрачные экраны.Пять лет спустя Apple представила iPhone, а вместе с ним и сенсорный экран, управляемый жестами рук и пальцев. Microsoft, в свою очередь, представила свое устройство управления жестами Kinect, которое отслеживает перемещения людей в пространстве и передает данные в интерфейс.

Сейчас играет:
Смотри:

5 вещей, которые вам нужно знать о Microsoft HoloLens

1:39

«Матрица» показала, как хакеры вставляют компьютеры в мозг людей, чтобы транспортировать их в воображаемые города.А в «Звездном пути» компьютеры использовали энергетические поля и визуальные приемы для создания миров, которые люди могли бы потрогать и почувствовать.

Мы еще даже не приблизились к этим сценариям, но делаем крошечные шаги в этом направлении. Такие компании, как Facebook, Google и Microsoft, сейчас пытаются приблизить эту фантастику к реальности, и публика начинает видеть, как эти видения завтрашнего дня обретают форму.

Так как же HoloLens соотносится с другими гаджетами, изменяющими реальность?

Что такое HoloLens и как он работает?

HoloLens от Microsoft на самом деле не создает трехмерные изображения, которые могут видеть все; это не «Звездный путь».»

Вместо того, чтобы все заходили в комнату, созданную для воспроизведения трехмерных изображений, очки Microsoft показывают изображения, которые может видеть только пользователь. Все остальные просто подумают, что вы носите дурацкие очки.

Еще одна важная особенность HoloLens — это то, что Microsoft

Microsoft рассматривает HoloLens как персональное устройство и как устройство для работы.
Microsoft

Компания не пытается перенести вас в другой мир, а скорее перенести чудеса компьютера прямо в тот, в котором вы живете.Microsoft накладывает изображения и объекты на наши гостиные.

Как владелец HoloLens, вы все равно будете видеть реальный мир перед собой. Вы можете ходить и разговаривать с другими, не беспокоясь о том, чтобы не натолкнуться на стены.

Очки будут отслеживать ваши движения, следить за вашим взглядом и преобразовывать то, что вы видите, направляя свет в ваши глаза (это не повредит). Поскольку устройство отслеживает, где вы находитесь, вы можете использовать жесты рук — сейчас это всего лишь щелчок в воздухе, поднимая и опуская палец, — для взаимодействия с 3D-изображениями.

Существует множество другого оборудования, призванного помочь эффектам HoloLens казаться правдоподобными. Устройство оснащено множеством датчиков для определения ваших движений в комнате и использует эту информацию вместе со слоями цветного стекла для создания изображений, с которыми вы можете взаимодействовать или исследовать под разными углами. Хотите увидеть заднюю часть виртуального велосипеда посреди кухни? Просто пройдите на другую сторону.

В очках также есть камера, которая смотрит в комнату, поэтому HoloLens знает, где находятся столы, стулья и другие предметы.Затем он использует эту информацию для проецирования трехмерных изображений поверх них и даже внутри них — поместите виртуальный динамит на свой стол, и вы можете пробить дыру, чтобы увидеть, что внутри.

С помощью видеочата в Skype пользователи HoloLens могут позволить другим видеть их глазами, чтобы помочь с задачами, и даже рисовать прямо в поле зрения.
Microsoft

Играя в демонстрацию, основанную на популярной игре Minecraft, я постучал пальцем по кофейному столику в реальном мире.Но то, что я увидел, было то, что мой палец откололся от его поверхности. Когда я закончил, я увидел внутри заполненную лавой пещеру.

Это всего лишь уловка, но Microsoft заявила, что она указывает на потенциал. По словам Microsoft, HoloLens может преобразовать бизнес и открыть новые возможности нашего взаимодействия.

Я использовал HoloLens для видеочата с сотрудником Microsoft, который использовал Skype на планшете. Ее задача? Чтобы помочь мне перемонтировать выключатель света. Она обратилась к камере на HoloLens, чтобы увидеть мои глаза, а затем нарисовала диаграммы и стрелки в тех местах, где я хотел показать мне, какие инструменты выбрать и как ими пользоваться.

Представьте, как эти уловки можно использовать для обучения пилотов или для руководства врачами в сложных операциях.

В отличие от Rift

А как насчет Oculus Rift? Созданная Oculus VR, стартапом, который Facebook приобрел в марте 2014 года за 2 миллиарда долларов, гарнитура считается образцом процветающего рынка виртуальной реальности.

Издалека гарнитура Oculus немного похожа на HoloLens от Microsoft в том смысле, что это устройство, которое можно носить на голове.Но на этом сходство заканчивается. В то время как Microsoft хочет помочь нам по-новому взаимодействовать с реальным миром, Oculus хочет погрузить нас в совершенно новый мир.

Проще говоря, гарнитура Rift — это экран на вашем лице. Но когда он включен, изображения, которые он создает, заставляют ваш мозг думать, что вы телепортировались в другой мир, например, космический корабль в космосе или край небоскреба. В один прекрасный день Oculus сможет выбрать более практичный маршрут, перенеся вас на корты на баскетбольный матч вживую или на залитый солнцем пляж, чтобы расслабиться.

Гарнитура Oculus Rift прижимает экран прямо к вашим глазам, позволяя устройству перемещать пользователей в совершенно разные среды.
Ник Стэтт / CNET

Цель Oculus — заставить пользователя поверить в то, что он на самом деле там, куда бы он вас ни привел. Это ощущение называется «присутствием», чего не добивается HoloLens от Microsoft.

Энтузиасты говорят, что момент, когда ваш мозг обманом заставляют поверить, что вы на самом деле где-то еще, является волшебным.

«В своей жизни я видел несколько демонстраций технологий, которые заставили меня почувствовать, что я заглянул в будущее», — написал венчурный капиталист Крис Диксон, который помог инвестиционной фирме Andreessen Horowitz финансировать Oculus VR. «Лучшими из них были: Apple II, Macintosh, Netscape, Google, iPhone и — совсем недавно — Oculus Rift».

Oculus не одинок в своих поисках. Sony пытается сделать нечто подобное со своей гарнитурой Project Morpheus. Оба открыто заявляют о планах использовать эту технологию для преобразования всех отраслей промышленности, начиная с видеоигр.Но разработчики говорят, что это сложно сделать правильно. Изображения должны быть тщательно связаны с вашими физическими движениями без каких-либо задержек. Когда это не так, потребители испытывают некоторую укачивание.

То же различие

В конечном счете, эти компании находятся на разных дорогах к одному и тому же месту назначения, что пытается переосмыслить то, как мы взаимодействуем с компьютерами. Мы все привыкли к мыши и клавиатуре и учимся жить со стеклянными экранами смартфонов. До сих пор каждое из этих устройств было достаточно хорошим, чтобы передавать информацию из книги или сцен фильма.

Но Oculus, Microsoft, Google и другие верят в другой, потенциально более естественный способ взаимодействия с нашей технологией. Эти компании и создаваемое ими оборудование представляют мир, в котором жесты рук, трехмерные изображения и изображения, наложенные на реальность, являются инструментами нового поколения для повышения производительности, общения и всего остального, для чего мы используем гаджеты и Интернет.

Звучит как научная фантастика, но если эти устройства будут работать так, как надеются технические светила, такие мечты могут стать реальностью раньше, чем мы думаем.

Ознакомьтесь с возможностями Microsoft HoloLens (изображения)

Посмотреть все фото

Microsoft Mesh выглядит как виртуальное будущее собраний Microsoft Teams

На прошлой неделе Алекс Кипман из Microsoft, изобретатель Kinect и HoloLens, появился в моей гостиной и протянул мне медуз и акул.Может показаться, что мне приснился странный сон, но это была встреча, которая стала возможной благодаря новой платформе Mesh от Microsoft. Я надел гарнитуру HoloLens 2, присоединился к виртуальной переговорной, и Кипман сразу же появился рядом с моим журнальным столиком, готовый продемонстрировать видение Microsoft будущего VR и AR — или, как Microsoft называет это, смешанной реальности.

Все это было похоже на встречу Microsoft Teams в будущем.

Mesh — это платформа для совместной работы, которая позволяет каждому использовать виртуальный опыт на различных устройствах.«Это была мечта о смешанной реальности, идея с самого начала», — объясняет Кипман. «Вы действительно можете чувствовать, что находитесь в одном месте с кем-то, кто делится контентом, или вы можете телепортироваться с разных устройств смешанной реальности и присутствовать с людьми, даже когда вы физически не вместе».

Изначально Mesh будет представлять людей в виде виртуальных аватаров, взятых из социальной сети AltspaceVR, которую Microsoft приобрела еще в 2017 году. Mesh в конечном итоге будет поддерживать то, что Microsoft называет «голопортацией», позволяя людям проявлять себя в виртуальном пространстве.

Вы можете свободно взаимодействовать с виртуальными объектами в Microsoft Mesh.

Во время моей часовой встречи в Microsoft Mesh я постоянно чувствовал, что это может быть версия Microsoft Teams в далеком будущем. Кипман появился рядом со мной в виде аватара и начал раздавать мне виртуальных медуз и акул. Я мог изменить форму животных, передать их обратно или просто поставить перед собой. Хотя мы не работали над каким-то грандиозным дизайном или трехмерной моделью, это было гораздо более захватывающим, чем видеозвонки Zoom, которые мне приходилось посещать почти каждый день.

Это было лучшее, что можно было сделать с Кипманом в комнате, и напомнило мне о моем первом опыте работы с HoloLens. Первоначально Microsoft продемонстрировала HoloLens с помощью совместного звонка в Skype, когда технический специалист мог рассказать вам, как исправить некоторые проводки. Это было похоже на обещание дополненной реальности, и Microsoft Mesh кажется естественным следующим шагом.

«Вы можете полностью представить себе Microsoft Teams с поддержкой Mesh, где главное — думать о коллегах со всего мира, сотрудничающих так, как будто мы с вами находимся в одном физическом месте», — говорит Кипман.«Mesh позволяет командам позволять организациям проводить собрания в смешанной реальности со всеми в одной комнате, поэтому вам следует подумать об этом в среде типа Teams с поддержкой Mesh».

Microsoft демонстрирует Mesh на Ignite на этой неделе.

Однако

Mesh — это не просто приложение для проведения виртуальных встреч; это целая платформа, построенная на базе Azure, которую Microsoft надеется использовать для разработчиков. Microsoft надеется, что архитекторы, инженеры и дизайнеры увидят перспективы Mesh, особенно во время пандемии, когда сложно работать с трехмерными физическими моделями, не находясь в одной комнате.

Microsoft также делает Mesh доступным на различных устройствах, включая HoloLens 2, большинство гарнитур виртуальной реальности, планшетов, смартфонов и ПК. Предварительная версия приложения Microsoft Mesh для HoloLens 2 будет доступна сегодня вместе с предварительной версией AltspaceVR с включенной сеткой. Microsoft планирует интегрировать Mesh в Teams и Dynamics 365 в будущем, что может помочь реализовать уникальный опыт встреч, который у меня был, для большего числа людей.

Microsoft определенно считает, что Mesh станет следующим большим достижением в области смешанной реальности.Генеральный директор Сатья Наделла сравнил новую платформу с Xbox Live во время своего основного выступления на Ignite сегодня. «Подумайте о том, что Xbox Live сделала для игр — мы перешли от одиночной игры к многопользовательской, создав сообщества, которые помогли людям общаться и достигать вместе», — сказал Наделла. «А теперь представьте, случилось бы то же самое со смешанной реальностью».

Основной доклад Microsoft Ignite VR с Джеймсом Кэмероном. Изображение: Microsoft

Главное, что сдерживает Microsoft Mesh, — это стоимость устройств HoloLens и гарнитур виртуальной реальности.Хотя вы можете переходить с двухмерного экрана, например, телефона или ПК, это далеко не так захватывающе, как использование гарнитуры. В прошлом Microsoft пыталась восполнить этот пробел с помощью амбициозных проектов, таких как Minecraft Earth , предлагая возможности дополненной реальности на мобильных телефонах. Этот конкретный проект не сработал, и неясно, понравится ли Microsoft Mesh пользователям.

Microsoft Mesh потребуется серьезная поддержка разработчиков или предложения, которые вы просто не можете получить больше нигде в VR, чтобы набрать обороты.Microsoft наняла режиссера Джеймса Кэмерона, разработчика Pokémon Go, Niantic и соучредителя Cirque du Soleil, чтобы продемонстрировать обещание Mesh во время своего выступления на Ignite сегодня.

Доказательная версия Pokémon Go , работающая на HoloLens 2, и виртуальные концерты, безусловно, показывают, что теперь возможно с Microsoft Mesh. Реальность теперь будет зависеть от популярности гарнитур или способности Microsoft продавать эту новую технологию компаниям, стремящимся использовать гибридные способы работы, пока мир вырывается из пандемии.

Обновление, 2 февраля 11:40 по восточноевропейскому времени : статья дополнена комментариями генерального директора Microsoft Сатьи Наделлы.

Microsoft HoloLens со Skype вдохновляет на инновации

Блог
>
Microsoft HoloLens со Skype вдохновляет на инновации

Винсент Хугендорн | 13 октября 2016 г.

В Workstreampeople я исследовал возможности устройства дополненной реальности Microsoft, HoloLens.Поскольку Workstreampeople занимается бизнесом по управлению диалогом — например, в сценариях удаленной поддержки — я в первую очередь ищу инновационные возможности для Skype и пользовательских приложений на HoloLens. Работа с этим удивительным устройством, безусловно, вдохновила нас; вот некоторые вещи, которые я узнал:

Что такое Skype на HoloLens… по-настоящему

Основной сценарий, на который нацелен клиент Skype на HoloLens, запускается всякий раз, когда вы говорите что-то вроде: «покажите мне, как…» или «вы можете взглянуть на это…» .

Вот недавний пример из реальной жизни, когда техник по обслуживанию лифтов из thyssenkrupp просит удаленного эксперта выполнить двойную проверку безопасности:

Работа thyssenkrupp с HoloLens сосредоточена на использовании Skype. Благодаря Skype на HoloLens технические специалисты могут освободить руки во время работы, даже когда они делают удаленные вызовы профильным экспертам и обмениваются голографическими инструкциями между пользователями. Это обеспечивает большую гибкость при соблюдении правил техники безопасности. При первоначальных испытаниях использование HoloLens сократило среднюю продолжительность обращений thyssenkrupp в службу поддержки на в 4 раза.Это действительно впечатляющие результаты; этот случай является показателем потенциальной ценности и размера рынка для такого типа сотрудничества в области дополненной реальности.

Подключаемый модуль HoloLens для клиента Skype для Windows

Если вы используете клиент Skype для Windows при подключении к Skype-клиенту HoloLens, вас спросят, хотите ли вы загрузить подключаемый модуль HoloLens для Skype. После установки плагина вы получаете кнопку Edit Scene , наложенную на видео (которое показывает, что видит пользователь HoloLens):

Нажатие на эту кнопку остановит видео и предоставит вам набор элементов управления, которые позволяют размещать стрелки, рисовать от руки и размещать изображения; все как голограммы.Когда вы закончите, вы нажимаете Остановить редактирование , и видео размораживается. Пользователь HoloLens также может добавлять голограммы, и вы оба видите все голограммы, но вы можете изменять только свои собственные голограммы:

Как всегда в HoloLens, все голограммы остаются твердо закрепленными на своем точном местоположении в реальном мире; если хотите, вы можете заполнить всю свою среду. Вот я подошел к некоторым голограммам, которые добавил из клиента Windows:

Вы также можете поделиться своим рабочим столом или окном из клиента Windows Skype, и он появится в HoloLens:

Представление удаленного рабочего стола довольно живое, но с ограниченными размерами и разрешением (для внимательного наблюдателя в настоящее время существует ошибка, которая переворачивает удаленный экран по горизонтали).

Использование мобильных клиентов Skype

В то время как клиент Skype для Windows предлагает наибольшую функциональность, клиент HoloLens Skype отлично работает для видеозвонков с мобильными клиентами Skype. Я звоню себе в клиент Skype для Android из Skype на HoloLens:

Мобильный клиент показывает все, что вы, как пользователь HoloLens, видите, включая добавленные голограммы, и вы видите то, что видит удаленная камера мобильного устройства (удаленный эксперт может выбрать переднюю или заднюю камеру по мере необходимости).

Таким образом, даже когда удаленный эксперт, от которого вы, как пользователь HoloLens, нуждаетесь в помощи, находится в пути, он все равно может помочь вам, хотя и без создания голограмм в вашем мире.

Потенциал

Технически HoloLens — это первое устройство на платформе Windows Holographic, которую Microsoft недавно открыла для партнеров, чтобы позволить устройствам AR различных брендов сотрудничать в одной и той же дополненной (смешанной) реальности. Windows Holographic, которая также будет доступна на всех основных ПК с Windows 10 в следующем году.

HoloLens сегодня может запускать обычные приложения универсальной платформы Windows в 2D-окнах. Я мог бы запустить образец приложения Xamarin Forms, предназначенный для мобильных устройств Android, iOS и UWP, на HoloLens:

.

Таким образом, разработка HoloLens может начаться очень просто, с использованием существующих, проверенных (кроссплатформенных) технологий, которые не требуют новых навыков.

Вдобавок к этому VR собирается стать мейнстримом в мобильном мире: 4 октября Google анонсировала телефоны Pixel и гарнитуру Daydream View за 79 долларов, которые поддерживают стандартную платформу Android VR Daydream.Когда VR станет мейнстримом в потребительском пространстве, это будет небольшой шаг к AR в бизнес-пространстве. Первым шагом может быть добавление поддержки для смешивания реального мира с виртуальным с помощью камеры телефона (как это сейчас делается в HTC Vive).

Функционально , текущее устройство HoloLens и приложение Skype уже позволяют реализовать ценные сценарии, как показывает случай thyssenkrupp. Но какими бы хорошими ни были средства коммуникации, если вы не можете заставить подходящего человека помочь вам, никакой пользы не будет.Вот где может помочь хорошее решение для управления диалогом ; чтобы получить right expert в нужный момент. Подробнее об этом в другой раз J

В общем, в ближайшее время AR будет стремительно расти. Настали интересные времена.

(этот пост также был опубликован на VincentH.NET)

Хотите углубиться в специфику вашего бизнеса? Не стесняйтесь запланировать демонстрацию!
Запланировать демонстрацию

Представляем первый в истории опыт для Microsoft HoloLens Development Edition

Я очень рад сегодняшнему объявлению о том, что Microsoft HoloLens Development Edition доступна для предварительного заказа.Мы поставили перед собой задачу предоставить первый в мире голографический компьютер без привязки, и это удивительно, что, наконец, разработчики получат самые первые версии, чтобы они могли начать создавать свои собственные голографические опыты.

Хотя с тех пор, как мы анонсировали в прошлом году, мы мечтаем и доставляем голографические возможности, для меня нет ничего более захватывающего, чем увидеть, о чем мечтают разработчики, когда Microsoft HoloLens Development Edition начнет поставляться в следующем месяце.

Используя HoloLens, мы стремимся предоставить сообществу разработчиков наилучшие возможности. Чтобы помочь разработчикам начать создавать возможности для HoloLens, мы предоставили ряд отличных ресурсов. Прежде всего, это полный набор документации, предоставляемый разработчикам как людьми, создавшими платформу, так и людьми, которые создавали голографические приложения. Мы хотим поделиться всеми нашими голографическими знаниями с разработчиками, чтобы они могли как можно проще начать воплощать свои голографические мечты в реальность.Мы также предоставили множество обучающих видео, чтобы помочь людям. Всю документацию и видео можно найти по адресу dev.windows.com/holographic.

Мы также предоставили информацию о том, как создавать голографические приложения как приложения универсальной платформы Windows (UWP). Мы хотим убедиться, что каждое из создаваемых вами голографических приложений способно извлечь выгоду из огромного успеха и быстрого внедрения Windows 10.

Как разработчик, я считаю, что документация и обучающие видеоролики помогут сделать голографическую разработку столь же восхитительной, как и сами голограммы.Но ничто не иллюстрирует ключевые стратегии и передовые методы разработки, такие как возможность увидеть и испытать полный набор реальных голографических приложений. Помня об этом, мы предоставили разработчикам бесплатное портфолио с голографическими изображениями, которые могут понравиться людям.

Эти возможности доступны всем разработчикам бесплатно в Магазине Windows и представляют собой знания и опыт, накопленные нашими командами за годы работы над этой голографической платформой.Каждый из этих вариантов был предоставлен, чтобы подчеркнуть уникальные возможности HoloLens и проиллюстрировать разработчикам, как их можно использовать в повседневных приложениях. Мы надеемся, что эти примеры приложений можно будет использовать в качестве отправной точки для того, как любой разработчик может создавать потрясающий 3D-контент для HoloLens.

Первый — HoloStudio . Это первая программа такого рода, позволяющая легко создавать 3D в 3D в реальном масштабе. Мы надеемся, что это приложение легко позволит любому разработчику представить и создать голограммы, необходимые для их собственных приложений.Но HoloStudio также показывает, как использовать модель взаимодействия взгляда, жеста и голоса HoloLens. Взаимодействия, необходимые для создания подробных голографических моделей, повышают способность платформы делать взаимодействие в 3D естественным, и мы считаем, что это приложение продемонстрирует высококачественные примеры того, как сделать это простым для клиентов. HoloStudio также поддерживает интеграцию с OneDrive и легко экспортирует в 3D-печать или Sketchfab.

В нашей версии для разработчиков также работает Skype , улучшенная, чтобы люди могли общаться с помощью голограмм! Мы считаем, что Skype — важный опыт, который следует выделить разработчикам по двум причинам.Во-первых, он показывает лучший в своем классе пример того, как создать голографическое приложение, которое понравится людям, у которых нет HoloLens. Skype на HoloLens позволяет людям, использующим Skype на любом устройстве Windows, взаимодействовать в голографическом мире. Это приложение покажет, как голограммы могут использоваться для удаленной совместной работы и обучения, что ранее было невозможно. Этот тип общения имеет огромный потенциал как в потребительском, так и в деловом мире. Во-вторых, это позволит разработчикам общаться друг с другом, используя голографический носитель, чтобы делиться методами разработки и обращаться за советом к другим.С помощью Skype вы можете видеть голограммы, которые видит другой человек, и вы можете использовать голограммы, чтобы проиллюстрировать полезные методы или подходы к разработке. Мы надеемся, что сообщество разработчиков голографических приложений будет именно таким — сообществом. Мы все вместе определяем будущее голограмм. Skype в версии для разработчиков позволит всем нам оставаться на связи и помогать друг другу в создании наших голографических приложений. Я с нетерпением жду встречи с вами в ближайшее время по голографическому звонку в Skype.

Как разработчики, мы много экспериментировали, чтобы определить наилучшее сочетание реального и цифрового мира в пространстве смешанной реальности.Такой опыт, как Skype, в значительной степени индексируется в реальном мире, позволяя голограммам быть ярким акцентом в вашем пространстве. Но мы также хотели предоставить разработчикам более захватывающий опыт, демонстрирующий уникальные возможности Microsoft HoloLens в качестве платформы для цифрового иммерсивного приложения. Имея это в виду, мы представляем вам HoloTour . В версии для разработчиков HoloTour позволяет людям перемещаться в другое место и ощущать это так, как будто они действительно там.Вы видите панорамные изображения в высоком разрешении на 360 градусов таких мест, как Рим и Мачу-Пикчу. HoloTour выделяет две уникальные возможности HoloLens. Без привязки HoloLens позволяет вам наслаждаться виртуальным путешествием, фактически прогуливаясь по местности. Несмотря на то, что это захватывающий, опыт по-прежнему охватывает смешанную реальность, поскольку он позволяет вам физически ходить по пространству и приближаться к объектам, оставаясь без привязки к ПК, телефону или другому устройству. HoloTour также демонстрирует возможности этой платформы в области пространственного звука.Когда вы гуляете по Риму, вас окружают звуки города, как если бы вы были там на самом деле. Это невероятно реалистично, и чтобы поверить в него, нужно услышать.

Очевидно, что

Gaming — захватывающий и прибыльный жанр контента для любой платформы разработки. Всю свою жизнь я был геймером и всю свою сознательную жизнь разработчиком игр, поэтому я как разработчик страстно увлекаюсь этим. Для HoloLens Development Edition мы предоставили 3 уникальных примера игр со смешанной реальностью, демонстрирующих элементы голографического игрового процесса, которые не может предоставить никакая другая платформа.

Первый называется Fragments . Я особенно горжусь этим игровым опытом. «Фрагменты» — это криминальная драма смешанной реальности, действие которой происходит в вашей собственной среде. Геймеры могут искать улики и раскрывать преступления, которые, по всей видимости, происходят в их собственных гостиных. В качестве изюминки голографической платформы «Фрагменты» демонстрируют, как создатели могут создавать персонажей и сюжетные линии, которые обеспечивают более высокий уровень эмоциональной вовлеченности и привязанности, чем вы можете с любым другим носителем.Поверьте, первый раз, когда один из наших персонажей «Фрагментов» заходит к вам домой, садится на ваш диван и заводит с вами беседу, это незабываемые впечатления. Но эта игра также научила нас кое-чему неожиданному о смешанной реальности. Фрагменты стирают грань между цифровым миром и реальным миром больше, чем любой другой опыт, который мы создали. Когда ваша гостиная использовалась в качестве декорации для рассказа, она создает для вас воспоминания о том, что происходило в вашем пространстве в цифровом виде, как будто это было реально.Это опыт, который преодолевает жуткую долину вашего разума и дает новую форму повествования, как никогда раньше.

Мы также создали невероятно восхитительный платформер под названием Young Conker . Young Conker уникален, потому что он использует традиционные игровые механики платформеров и расставляет их в реальном мире в качестве уровня игрового процесса. Это создает игровой процесс, который возможен только в смешанной реальности. Одна из самых захватывающих вещей, которые мы обнаружили с Young Conker, — это то, насколько уникальный игровой процесс зависит от того, где вы играете.В отличие от традиционных видеоигр, где люди играют на одних и тех же уровнях, созданных в цифровом виде, Young Conker адаптирует каждый из уровней, на которых вы играете, к вашему реальному миру. Это означает, что каждый человек получает уникальный игровой процесс, поскольку среда реального мира каждого игрока уникальна. Удивительно, насколько разные ощущения от игры зависят от игры в гостиной и на кухне или в спальне. Даже запуск игры с другой позиции в одной комнате создает совершенно новую динамику игрового процесса.Молодой Конкер воплощает в жизнь интересную игровую механику, которая мне как разработчику игры очень нравится. Поскольку среды созданы в реальном мире, а не созданы в цифровом виде, разработка сосредоточена на том, чтобы сделать игровую механику увлекательной. К тому же, как разработчику, игры смешанной реальности делать намного проще. Вам не нужны большие команды, создающие объекты. Активы уже существуют в реальном мире. Вы можете создать мир бесконечного и уникального игрового процесса на основе того, что делает игры увлекательными — игрового процесса!

И Fragments, и Young Conker были созданы в сотрудничестве с Asobo Studio.Asobo Studio хорошо известна в игровом сообществе своим творчеством, способностью демонстрировать впечатления от новых технологий и способностью создавать эмоционально увлекательный игровой процесс. Для нас было важно совместно с партнером разработать деталь или наш первоначальный голографический опыт, чтобы мы могли протестировать платформу Microsoft HoloLens. Работа с Asobo Studio дала нам ключевое понимание того, как лучше настроить нашу работу с платформой для разработчиков, включая улучшения, связанные с нашим голографическим эмулятором, нашей документацией, а также необходимость предоставить сообществу разработчиков важные примеры приложений, которыми вы теперь сможете наслаждаться.Asobo Studio с самого начала была в авангарде голографических разработок, и мы надеемся, что совместные усилия по развитию облегчили процесс разработки для всех. За это, Асобо, мы благодарим вас !!

Третий игровой процесс, доступный всем разработчикам в Магазине Windows, называется RoboRaid . Ранее под кодовым названием Project X-Ray, RoboRaid начинался как увлеченный проект внутри нашей команды разработчиков. Основы RoboRaid были созданы во время «дурацкой недели» нашей команды, когда мы позволяем нашим разработчикам создавать что угодно с голограммами, которые они хотят.В течение недели небольшая группа разработчиков создала и запустила невероятно привлекательный голографический шутер на 1 человек и человек. RoboRaid заставляет вас защищать свой дом от вторжения инопланетян. Это изюминка того, как наши ключевые функции голографической платформы могут быть использованы в играх. Он использует ваш реальный мир как среду. Ничто так не добавляет срочности геймплею шутера на 1 st человек, как наблюдение за инопланетными роботами, прорывающимися сквозь стены вашего собственного дома. Он использует пространственный звук как огромную особенность игры.Когда вы слышите, как позади рушатся стены, невозможно не повернуться и не защитить свой газон. В нем рассказывается, как использовать наш взгляд, жест и модель голосового ввода в быстром и безумном игровом процессе. Мы многому научились как разработчики голографии, создавая и играя в эту игру, и мы надеемся, что вы сделаете то же самое. RoboRaid был создан командой из 8 человек в течение 12 недель. Он показывает, как даже небольшая команда разработчиков может создать голографическую витрину, которая понравится людям.

Наконец, начиная с этого лета, разработчики смогут испытать совершенно новую голографическую среду повествования для Development Edition, которую мы называем Actiongram .Этот опыт был разработан для творческих программистов и создателей контента, предоставляя, на наш взгляд, самый удивительный способ рассказывать цифровые истории, которые в противном случае могли бы быть непрактичными или невозможными. Actiongram использует захват смешанной реальности (MRC), чтобы смешать голографический контент с реальным миром, позволяя любому создавать эмоционально убедительные и юмористические видеоролики. Это видео, которые раньше могли быть созданы только с использованием дорогостоящих пакетов эффектов людьми с обширным обучением в области 3D. Теперь любой может создавать свои собственные видеоролики в смешанной реальности !! Мы будем регулярно доставлять новый контент для Actiongram, чтобы вы могли постоянно выражать себя на этом голографическом носителе.Мы невероятно рады видеть, как люди используют этот новый инструмент повествования, чтобы рассказывать свои личные истории.

Мы очень рады, что можем предложить такое разнообразие возможностей с Microsoft HoloLens Development Edition. Создание этого опыта было делом любви для всех нас. Я говорю от лица всей нашей команды разработчиков, когда говорю, что мы не могли придумать никого, о ком мы хотели бы наслаждаться этим опытом больше, чем разработчиков, купивших Microsoft HoloLens Development Edition.Я не мог мечтать о более захватывающем моменте времени, чем когда я в первый раз загружаю свой личный HoloLens и увижу один из ваших голографических опытов, доступных мне в Магазине Windows. Как бы я ни был взволнован тем, что оказался в авангарде голографических вычислений, ясно, что как платформа для разработки мы лишь слегка касаемся того, что мир может делать с голограммами. Ничто из того, что мы можем создать здесь, в Microsoft, не является столь мощным или творческим, как воображение мирового сообщества разработчиков.Мы надеемся, что вам понравились возможности голограмм. Мы с нетерпением ждем возможности определить будущее голографических вычислений вместе с вами. Я искренне желаю вам получить столько же удовольствия, создавая собственные голографические опыты, как мы, создавая для вас Microsoft HoloLens Development Edition.

Если у вас возникнут какие-либо вопросы о разработке, на которые вы хотите получить ответы, не стесняйтесь обращаться ко мне в твиттере @KudoTsunoda.

Оставьте комментарий

Ваш адрес email не будет опубликован. Обязательные поля помечены *