О нас      Контакты      Оплата      Доставка      Кредит      Покупаем БУ      Техподдержка      Акции     
(499) 126-15-12
ICQ445899221   ICQ334778123
КЦ “Савеловский”
Павильон А5
Как добраться

Товаров: 0
Сумма: 0
Курс: $1=62.00руб.
  ВЕРНОСТЬ ТРАДИЦИЯМ

ТКЦ «САВЕЛОВСКИЙ»
   

Microsoft HoloLens: прямой доступ к видеосенсорам в исследовательском режиме поможет разработчикам компьютерного зрения

Microsoft HoloLens: прямой доступ к видеосенсорам в исследовательском режиме поможет разработчикам компьютерного зрения

И теперь, благодаря исследовательскому режиму (Research Mode), появившемуся в последнем выпуске Windows 10, HoloLens становится мощным устройством для исследований в области компьютерного зрения. Microsoft HoloLens — первый в мире самодостаточный голографический компьютер. Это возможно благодаря нескольким встроенным видеокамерам, которые дополняют цветную видеокамеру, обычно доступную приложениям. Из кода приложений разработчики могут не только обращаться к аудио- и видеопотокам с сенсоров, но и использовать встроенные алгоритмы компьютерного зрения, такие как SLAM (локализация с одновременным построением карты), чтобы получать данные о движении HoloLens в пространстве, а также алгоритмы пространственного сопоставления (spatial mapping), чтобы создавать трехмерные модели окружающей среды.

Как показано на рис. HoloLens имеет четыре камеры слежения за окружающей средой, формирующие изображение в оттенках серого (grayscale), и датчик глубины для измерения расстояний и захвата жестов пользователя. Две дополнительные grayscale-камеры помогают расширить поле зрения для функций отслеживания. 1, две grayscale-камеры настроены как стереоустановка, которая захватывает область перед устройством, так что расстояния до отслеживаемых визуальных элементов можно определять при помощи триангуляции. Эти синхронизированные камеры с кадровым затвором (global-shutter) имеют гораздо большую светочувствительность, чем цветная камера, и формируют изображение со скоростью до 30 кадров в секунду (FPS).

Эта камера может работать в двух режимах. Датчик глубины использует активную инфракрасную (ИК) подсветку для определения расстояния до объектов через «время пролёта». Кроме измерения расстояний, эта камера позволяет получать ИК-изображения с активным освещением, которые могут быть полезными сами по себе, поскольку ИК-излучение исходит непосредственно из HoloLens, и на него почти не влияет окружающий свет. Первый обеспечивает высокочастотное (30 FPS) измерение расстояний до близко расположенных объектов и обычно используется для ручного отслеживания, тогда как второй используется для низкочастотного (1–5 FPS) измерения расстояний до далеких объектов и в настоящее время применяется для пространственного сопоставления (spatial mapping).

1. Рис. Встроенные датчики HoloLens для получения grayscale-изображений, дополняющие цветную камеру, обычно доступную приложениям.

2). В новейшем выпуске Windows 10 для HoloLens у исследователей появилась возможность включить на своих устройствах HoloLens исследовательский режим (Research Mode), чтобы получить доступ к потокам необработанных (raw) данных со всех аудио- и видеосенсоров (рис.

Потоки данных с сенсоров HoloLens можно обрабатывать непосредственно на устройстве, а также передавать по беспроводной связи на другой компьютер или в облако, если требуется большая вычислительная мощность. Исследователи по-прежнему могут использовать результаты, полученные встроенными алгоритмами компьютерного зрения, но теперь могут обращаться еще и к необработанным данным с сенсоров, чтобы использовать их в своих собственных алгоритмах. Например, HoloLens можно использовать для анализа мира с точки зрения пользователя, носящего это устройство. Это открывает перед HoloLens множество новых возможностей в области компьютерного зрения. Кроме того, сенсорные возможности HoloLens могут быть очень полезными для робототехники: например, с их помощью робот может ориентироваться в окружающей среде. Для такого применения ключевым преимуществом может быть способность HoloLens визуализировать результаты алгоритмов в 3D-мире, разворачивающемся перед пользователем.

2. Рис. Пример приложения HoloLens, в реальном времени отображающего любые потоки видеоданных в исследовательском режиме.

Как показано на рис. HoloLens имеет четыре камеры слежения за окружающей средой, формирующие изображение в оттенках серого (grayscale), и датчик глубины для измерения расстояний и захвата жестов пользователя. Две дополнительные grayscale-камеры помогают расширить поле зрения для функций отслеживания. 1, две grayscale-камеры настроены как стереоустановка, которая захватывает область перед устройством, так что расстояния до отслеживаемых визуальных элементов можно определять при помощи триангуляции. Эти синхронизированные камеры с кадровым затвором (global-shutter) имеют гораздо большую светочувствительность, чем цветная камера, и формируют изображение со скоростью до 30 кадров в секунду (FPS).

И теперь, благодаря исследовательскому режиму (Research Mode), появившемуся в последнем выпуске Windows 10, HoloLens становится мощным устройством для исследований в области компьютерного зрения. Microsoft HoloLens — первый в мире самодостаточный голографический компьютер. Это возможно благодаря нескольким встроенным видеокамерам, которые дополняют цветную видеокамеру, обычно доступную приложениям. Из кода приложений разработчики могут не только обращаться к аудио- и видеопотокам с сенсоров, но и использовать встроенные алгоритмы компьютерного зрения, такие как SLAM (локализация с одновременным построением карты), чтобы получать данные о движении HoloLens в пространстве, а также алгоритмы пространственного сопоставления (spatial mapping), чтобы создавать трехмерные модели окружающей среды.

1. Рис. Встроенные датчики HoloLens для получения grayscale-изображений, дополняющие цветную камеру, обычно доступную приложениям.

Эта камера может работать в двух режимах. Датчик глубины использует активную инфракрасную (ИК) подсветку для определения расстояния до объектов через «время пролёта». Кроме измерения расстояний, эта камера позволяет получать ИК-изображения с активным освещением, которые могут быть полезными сами по себе, поскольку ИК-излучение исходит непосредственно из HoloLens, и на него почти не влияет окружающий свет. Первый обеспечивает высокочастотное (30 FPS) измерение расстояний до близко расположенных объектов и обычно используется для ручного отслеживания, тогда как второй используется для низкочастотного (1–5 FPS) измерения расстояний до далеких объектов и в настоящее время применяется для пространственного сопоставления (spatial mapping).

Потоки данных с сенсоров HoloLens можно обрабатывать непосредственно на устройстве, а также передавать по беспроводной связи на другой компьютер или в облако, если требуется большая вычислительная мощность. Исследователи по-прежнему могут использовать результаты, полученные встроенными алгоритмами компьютерного зрения, но теперь могут обращаться еще и к необработанным данным с сенсоров, чтобы использовать их в своих собственных алгоритмах. Например, HoloLens можно использовать для анализа мира с точки зрения пользователя, носящего это устройство. Это открывает перед HoloLens множество новых возможностей в области компьютерного зрения. Кроме того, сенсорные возможности HoloLens могут быть очень полезными для робототехники: например, с их помощью робот может ориентироваться в окружающей среде. Для такого применения ключевым преимуществом может быть способность HoloLens визуализировать результаты алгоритмов в 3D-мире, разворачивающемся перед пользователем.

2). В новейшем выпуске Windows 10 для HoloLens у исследователей появилась возможность включить на своих устройствах HoloLens исследовательский режим (Research Mode), чтобы получить доступ к потокам необработанных (raw) данных со всех аудио- и видеосенсоров (рис.

2. Рис. Пример приложения HoloLens, в реальном времени отображающего любые потоки видеоданных в исследовательском режиме.


Дата публикации: 20.06.2018


Ещё новости


  13.12.2018  Honor изящно обыграла дырявый экран смартфона Honor View 20 при помощи...экзотических птиц

  13.12.2018  Опубликована возможная стоимость смартфонов серии Samsung Galaxy S10

Инсайдерская информация об этом, поступающая из Великобритании, выглядит более чем правдоподобной. За последнее время мы узнали много нового о смартфоне Samsung Galaxy S10 (а точнее серии смартфонов),...

  12.05.2018  FSF разыскивает JavaScript-разработчика для доработки GNU LibreJS

Задачи, время, сроки и стоимость будут обсуждены с выбранным кандидатом. Предложение временное и оплачиваемое. Ориентировочно выполнение займёт 80 часов с полным рабочим днём; в зависимости от результ...

  13.12.2018  Google придумала, как сделать Chrome для Android еще удобнее

Ей станет универсальная клавиша, позволяющая единовременно закрыть все открытые вкладки вне зависимости от выполняемых на них задач. Разработчики Google приняли решение облегчить жизнь пользователям ф...

  13.12.2018  Opera представила блокчейн-браузер с крипто-кошельком

Обновление позиционируется как блокчейн-браузер с крипто-кошельком.  На конференции Hard Fork Decentralized в Лондоне компания Opera представила новую версию браузера Opera для Android. Чтобы начать п...



Все новости
Оформление кредита
Наши программисты потрудилсь сделать так, что бы вы могли оформить кредит не вставая из за стола
Достаем Ноутбуки...
Ждем Ваши заказы...
   
© 2003—2018 Интернет-магазин ноутбуков a5savel.ru. Все права защищены.
Нелицензированное использование материалов данного сайта запрещено.
(499) 126-15-12 |