О нас      Контакты      Оплата      Доставка      Кредит      Покупаем БУ      Техподдержка      Акции     
(499) 126-15-12
ICQ445899221   ICQ334778123
КЦ “Савеловский”
Павильон А5
Как добраться

Товаров: 0
Сумма: 0
Курс: $1=62.00руб.
  ВЕРНОСТЬ ТРАДИЦИЯМ

ТКЦ «САВЕЛОВСКИЙ»
   

Microsoft HoloLens: прямой доступ к видеосенсорам в исследовательском режиме поможет разработчикам компьютерного зрения

Microsoft HoloLens: прямой доступ к видеосенсорам в исследовательском режиме поможет разработчикам компьютерного зрения

И теперь, благодаря исследовательскому режиму (Research Mode), появившемуся в последнем выпуске Windows 10, HoloLens становится мощным устройством для исследований в области компьютерного зрения. Microsoft HoloLens — первый в мире самодостаточный голографический компьютер. Это возможно благодаря нескольким встроенным видеокамерам, которые дополняют цветную видеокамеру, обычно доступную приложениям. Из кода приложений разработчики могут не только обращаться к аудио- и видеопотокам с сенсоров, но и использовать встроенные алгоритмы компьютерного зрения, такие как SLAM (локализация с одновременным построением карты), чтобы получать данные о движении HoloLens в пространстве, а также алгоритмы пространственного сопоставления (spatial mapping), чтобы создавать трехмерные модели окружающей среды.

Как показано на рис. HoloLens имеет четыре камеры слежения за окружающей средой, формирующие изображение в оттенках серого (grayscale), и датчик глубины для измерения расстояний и захвата жестов пользователя. Две дополнительные grayscale-камеры помогают расширить поле зрения для функций отслеживания. 1, две grayscale-камеры настроены как стереоустановка, которая захватывает область перед устройством, так что расстояния до отслеживаемых визуальных элементов можно определять при помощи триангуляции. Эти синхронизированные камеры с кадровым затвором (global-shutter) имеют гораздо большую светочувствительность, чем цветная камера, и формируют изображение со скоростью до 30 кадров в секунду (FPS).

Эта камера может работать в двух режимах. Датчик глубины использует активную инфракрасную (ИК) подсветку для определения расстояния до объектов через «время пролёта». Кроме измерения расстояний, эта камера позволяет получать ИК-изображения с активным освещением, которые могут быть полезными сами по себе, поскольку ИК-излучение исходит непосредственно из HoloLens, и на него почти не влияет окружающий свет. Первый обеспечивает высокочастотное (30 FPS) измерение расстояний до близко расположенных объектов и обычно используется для ручного отслеживания, тогда как второй используется для низкочастотного (1–5 FPS) измерения расстояний до далеких объектов и в настоящее время применяется для пространственного сопоставления (spatial mapping).

1. Рис. Встроенные датчики HoloLens для получения grayscale-изображений, дополняющие цветную камеру, обычно доступную приложениям.

2). В новейшем выпуске Windows 10 для HoloLens у исследователей появилась возможность включить на своих устройствах HoloLens исследовательский режим (Research Mode), чтобы получить доступ к потокам необработанных (raw) данных со всех аудио- и видеосенсоров (рис.

Потоки данных с сенсоров HoloLens можно обрабатывать непосредственно на устройстве, а также передавать по беспроводной связи на другой компьютер или в облако, если требуется большая вычислительная мощность. Исследователи по-прежнему могут использовать результаты, полученные встроенными алгоритмами компьютерного зрения, но теперь могут обращаться еще и к необработанным данным с сенсоров, чтобы использовать их в своих собственных алгоритмах. Например, HoloLens можно использовать для анализа мира с точки зрения пользователя, носящего это устройство. Это открывает перед HoloLens множество новых возможностей в области компьютерного зрения. Кроме того, сенсорные возможности HoloLens могут быть очень полезными для робототехники: например, с их помощью робот может ориентироваться в окружающей среде. Для такого применения ключевым преимуществом может быть способность HoloLens визуализировать результаты алгоритмов в 3D-мире, разворачивающемся перед пользователем.

2. Рис. Пример приложения HoloLens, в реальном времени отображающего любые потоки видеоданных в исследовательском режиме.

Как показано на рис. HoloLens имеет четыре камеры слежения за окружающей средой, формирующие изображение в оттенках серого (grayscale), и датчик глубины для измерения расстояний и захвата жестов пользователя. Две дополнительные grayscale-камеры помогают расширить поле зрения для функций отслеживания. 1, две grayscale-камеры настроены как стереоустановка, которая захватывает область перед устройством, так что расстояния до отслеживаемых визуальных элементов можно определять при помощи триангуляции. Эти синхронизированные камеры с кадровым затвором (global-shutter) имеют гораздо большую светочувствительность, чем цветная камера, и формируют изображение со скоростью до 30 кадров в секунду (FPS).

И теперь, благодаря исследовательскому режиму (Research Mode), появившемуся в последнем выпуске Windows 10, HoloLens становится мощным устройством для исследований в области компьютерного зрения. Microsoft HoloLens — первый в мире самодостаточный голографический компьютер. Это возможно благодаря нескольким встроенным видеокамерам, которые дополняют цветную видеокамеру, обычно доступную приложениям. Из кода приложений разработчики могут не только обращаться к аудио- и видеопотокам с сенсоров, но и использовать встроенные алгоритмы компьютерного зрения, такие как SLAM (локализация с одновременным построением карты), чтобы получать данные о движении HoloLens в пространстве, а также алгоритмы пространственного сопоставления (spatial mapping), чтобы создавать трехмерные модели окружающей среды.

1. Рис. Встроенные датчики HoloLens для получения grayscale-изображений, дополняющие цветную камеру, обычно доступную приложениям.

Эта камера может работать в двух режимах. Датчик глубины использует активную инфракрасную (ИК) подсветку для определения расстояния до объектов через «время пролёта». Кроме измерения расстояний, эта камера позволяет получать ИК-изображения с активным освещением, которые могут быть полезными сами по себе, поскольку ИК-излучение исходит непосредственно из HoloLens, и на него почти не влияет окружающий свет. Первый обеспечивает высокочастотное (30 FPS) измерение расстояний до близко расположенных объектов и обычно используется для ручного отслеживания, тогда как второй используется для низкочастотного (1–5 FPS) измерения расстояний до далеких объектов и в настоящее время применяется для пространственного сопоставления (spatial mapping).

Потоки данных с сенсоров HoloLens можно обрабатывать непосредственно на устройстве, а также передавать по беспроводной связи на другой компьютер или в облако, если требуется большая вычислительная мощность. Исследователи по-прежнему могут использовать результаты, полученные встроенными алгоритмами компьютерного зрения, но теперь могут обращаться еще и к необработанным данным с сенсоров, чтобы использовать их в своих собственных алгоритмах. Например, HoloLens можно использовать для анализа мира с точки зрения пользователя, носящего это устройство. Это открывает перед HoloLens множество новых возможностей в области компьютерного зрения. Кроме того, сенсорные возможности HoloLens могут быть очень полезными для робототехники: например, с их помощью робот может ориентироваться в окружающей среде. Для такого применения ключевым преимуществом может быть способность HoloLens визуализировать результаты алгоритмов в 3D-мире, разворачивающемся перед пользователем.

2). В новейшем выпуске Windows 10 для HoloLens у исследователей появилась возможность включить на своих устройствах HoloLens исследовательский режим (Research Mode), чтобы получить доступ к потокам необработанных (raw) данных со всех аудио- и видеосенсоров (рис.

2. Рис. Пример приложения HoloLens, в реальном времени отображающего любые потоки видеоданных в исследовательском режиме.


Дата публикации: 20.06.2018


Ещё новости


  19.03.2019  Google выйдет на новый рынок с сервисом Stadia

Сегодня, в ходе конференции разработчиков игр в Сан-Франциско компания рассказала о сервисе Stadia — результате ее усилий в этой области. Компания Google выходит на рынок игрового стриминга. В идеале ...

  20.03.2019  Когда начнутся продажи Galaxy S10 5G? Есть версия

При этом четвертым аппаратом стал не керамический Galaxy S10+, а Galaxy S10 5G, о котором на мероприятии объявили лишь вскользь. Многие по-прежнему не в курсе, что на презентации 20 февраля Samsung пр...

  19.03.2019  Складной смартфон от Xiaomi за 1000 долларов: смех сквозь слезы

Но если у потребителей самую бурную реакцию вызвали цены, то причиной переполоха среди производителей стало осознание того, что не они стали пионерами на этом поприще. Возникший из ниоткуда тренд на с...

  21.03.2019  Компоненты NVIDIA помогут автоматизировать строительную технику

На сцену вышел Роб Чонгор (Rob Csongor), который пояснил, что NVIDIA активно взялась за автоматизацию транспортных средств не просто из-за появления соответствующих технических возможностей, а ради ре...

  21.03.2019  Fuchsia: как там дела у операционки Google для всех устройств

В далеком или не очень 2016 году компания Google создала операционную систему, которая получила название Fuchsia. Начну с небольшого экскурса в историю. Это было удобно для Google, так как Linux являе...



Все новости
Оформление кредита
Наши программисты потрудилсь сделать так, что бы вы могли оформить кредит не вставая из за стола
Достаем Ноутбуки...
Ждем Ваши заказы...
   
© 2003—2019 Интернет-магазин ноутбуков a5savel.ru. Все права защищены.
Нелицензированное использование материалов данного сайта запрещено.
(499) 126-15-12 |