О нас      Контакты      Оплата      Доставка      Кредит      Покупаем БУ      Техподдержка      Акции     
(499) 126-15-12
ICQ445899221   ICQ334778123
КЦ “Савеловский”
Павильон А5
Как добраться

Товаров: 0
Сумма: 0
Курс: $1=62.00руб.
  ВЕРНОСТЬ ТРАДИЦИЯМ

ТКЦ «САВЕЛОВСКИЙ»
   

Microsoft HoloLens: прямой доступ к видеосенсорам в исследовательском режиме поможет разработчикам компьютерного зрения

Microsoft HoloLens: прямой доступ к видеосенсорам в исследовательском режиме поможет разработчикам компьютерного зрения

И теперь, благодаря исследовательскому режиму (Research Mode), появившемуся в последнем выпуске Windows 10, HoloLens становится мощным устройством для исследований в области компьютерного зрения. Microsoft HoloLens — первый в мире самодостаточный голографический компьютер. Это возможно благодаря нескольким встроенным видеокамерам, которые дополняют цветную видеокамеру, обычно доступную приложениям. Из кода приложений разработчики могут не только обращаться к аудио- и видеопотокам с сенсоров, но и использовать встроенные алгоритмы компьютерного зрения, такие как SLAM (локализация с одновременным построением карты), чтобы получать данные о движении HoloLens в пространстве, а также алгоритмы пространственного сопоставления (spatial mapping), чтобы создавать трехмерные модели окружающей среды.

Как показано на рис. HoloLens имеет четыре камеры слежения за окружающей средой, формирующие изображение в оттенках серого (grayscale), и датчик глубины для измерения расстояний и захвата жестов пользователя. Две дополнительные grayscale-камеры помогают расширить поле зрения для функций отслеживания. 1, две grayscale-камеры настроены как стереоустановка, которая захватывает область перед устройством, так что расстояния до отслеживаемых визуальных элементов можно определять при помощи триангуляции. Эти синхронизированные камеры с кадровым затвором (global-shutter) имеют гораздо большую светочувствительность, чем цветная камера, и формируют изображение со скоростью до 30 кадров в секунду (FPS).

Эта камера может работать в двух режимах. Датчик глубины использует активную инфракрасную (ИК) подсветку для определения расстояния до объектов через «время пролёта». Кроме измерения расстояний, эта камера позволяет получать ИК-изображения с активным освещением, которые могут быть полезными сами по себе, поскольку ИК-излучение исходит непосредственно из HoloLens, и на него почти не влияет окружающий свет. Первый обеспечивает высокочастотное (30 FPS) измерение расстояний до близко расположенных объектов и обычно используется для ручного отслеживания, тогда как второй используется для низкочастотного (1–5 FPS) измерения расстояний до далеких объектов и в настоящее время применяется для пространственного сопоставления (spatial mapping).

1. Рис. Встроенные датчики HoloLens для получения grayscale-изображений, дополняющие цветную камеру, обычно доступную приложениям.

2). В новейшем выпуске Windows 10 для HoloLens у исследователей появилась возможность включить на своих устройствах HoloLens исследовательский режим (Research Mode), чтобы получить доступ к потокам необработанных (raw) данных со всех аудио- и видеосенсоров (рис.

Потоки данных с сенсоров HoloLens можно обрабатывать непосредственно на устройстве, а также передавать по беспроводной связи на другой компьютер или в облако, если требуется большая вычислительная мощность. Исследователи по-прежнему могут использовать результаты, полученные встроенными алгоритмами компьютерного зрения, но теперь могут обращаться еще и к необработанным данным с сенсоров, чтобы использовать их в своих собственных алгоритмах. Например, HoloLens можно использовать для анализа мира с точки зрения пользователя, носящего это устройство. Это открывает перед HoloLens множество новых возможностей в области компьютерного зрения. Кроме того, сенсорные возможности HoloLens могут быть очень полезными для робототехники: например, с их помощью робот может ориентироваться в окружающей среде. Для такого применения ключевым преимуществом может быть способность HoloLens визуализировать результаты алгоритмов в 3D-мире, разворачивающемся перед пользователем.

2. Рис. Пример приложения HoloLens, в реальном времени отображающего любые потоки видеоданных в исследовательском режиме.

Как показано на рис. HoloLens имеет четыре камеры слежения за окружающей средой, формирующие изображение в оттенках серого (grayscale), и датчик глубины для измерения расстояний и захвата жестов пользователя. Две дополнительные grayscale-камеры помогают расширить поле зрения для функций отслеживания. 1, две grayscale-камеры настроены как стереоустановка, которая захватывает область перед устройством, так что расстояния до отслеживаемых визуальных элементов можно определять при помощи триангуляции. Эти синхронизированные камеры с кадровым затвором (global-shutter) имеют гораздо большую светочувствительность, чем цветная камера, и формируют изображение со скоростью до 30 кадров в секунду (FPS).

И теперь, благодаря исследовательскому режиму (Research Mode), появившемуся в последнем выпуске Windows 10, HoloLens становится мощным устройством для исследований в области компьютерного зрения. Microsoft HoloLens — первый в мире самодостаточный голографический компьютер. Это возможно благодаря нескольким встроенным видеокамерам, которые дополняют цветную видеокамеру, обычно доступную приложениям. Из кода приложений разработчики могут не только обращаться к аудио- и видеопотокам с сенсоров, но и использовать встроенные алгоритмы компьютерного зрения, такие как SLAM (локализация с одновременным построением карты), чтобы получать данные о движении HoloLens в пространстве, а также алгоритмы пространственного сопоставления (spatial mapping), чтобы создавать трехмерные модели окружающей среды.

1. Рис. Встроенные датчики HoloLens для получения grayscale-изображений, дополняющие цветную камеру, обычно доступную приложениям.

Эта камера может работать в двух режимах. Датчик глубины использует активную инфракрасную (ИК) подсветку для определения расстояния до объектов через «время пролёта». Кроме измерения расстояний, эта камера позволяет получать ИК-изображения с активным освещением, которые могут быть полезными сами по себе, поскольку ИК-излучение исходит непосредственно из HoloLens, и на него почти не влияет окружающий свет. Первый обеспечивает высокочастотное (30 FPS) измерение расстояний до близко расположенных объектов и обычно используется для ручного отслеживания, тогда как второй используется для низкочастотного (1–5 FPS) измерения расстояний до далеких объектов и в настоящее время применяется для пространственного сопоставления (spatial mapping).

Потоки данных с сенсоров HoloLens можно обрабатывать непосредственно на устройстве, а также передавать по беспроводной связи на другой компьютер или в облако, если требуется большая вычислительная мощность. Исследователи по-прежнему могут использовать результаты, полученные встроенными алгоритмами компьютерного зрения, но теперь могут обращаться еще и к необработанным данным с сенсоров, чтобы использовать их в своих собственных алгоритмах. Например, HoloLens можно использовать для анализа мира с точки зрения пользователя, носящего это устройство. Это открывает перед HoloLens множество новых возможностей в области компьютерного зрения. Кроме того, сенсорные возможности HoloLens могут быть очень полезными для робототехники: например, с их помощью робот может ориентироваться в окружающей среде. Для такого применения ключевым преимуществом может быть способность HoloLens визуализировать результаты алгоритмов в 3D-мире, разворачивающемся перед пользователем.

2). В новейшем выпуске Windows 10 для HoloLens у исследователей появилась возможность включить на своих устройствах HoloLens исследовательский режим (Research Mode), чтобы получить доступ к потокам необработанных (raw) данных со всех аудио- и видеосенсоров (рис.

2. Рис. Пример приложения HoloLens, в реальном времени отображающего любые потоки видеоданных в исследовательском режиме.


Дата публикации: 20.06.2018


Ещё новости


  26.09.2018  Россияне смогут бесплатно менять флагманы Samsung каждый год

Об этом сообщило издание «Ведомости» со ссылкой на представительницу компании.  Компания Samsung собирается запустить в России программу лизинга для флагманских устройств с октября 2018 года. Если сма...

  20.09.2018  NVIDIA GeForce RTX 2080 можно купить в Москве: смотрим на цены

  24.09.2018  Средства автоматизации разгона позволяют быстро снижать напряжение у видеокарт поколения NVIDIA Turing

По этой причине кому-то может быть интересен опыт по снижению энергопотребления при работе видеокарты на номинальных частотах. Как пояснил в предыдущем материале авторитетный энтузиаст Der8auer, чудес...

  26.09.2018  Telltale постарается завершить финальный сезон The Walking Dead

Поздним вечером минувшей пятницы игровую индустрию сотрясло неожиданное известие — студия Telltale Games объявила о своём закрытии и уволила примерно 90% своего штата, оставив лишь пару десятков чел...

  22.09.2018  В следующем году доля рынка AMD в процессорном сегменте может вырасти до 30%

Ресурс CNBC сообщает, что специалисты Jefferies после знакомства с отчётом Fubon поверили в готовность HP Inc. Складывается впечатление, что каждый уважающий себя эксперт пытается составить свой прогн...



Все новости
Достаем Ноутбуки...
Ждем Ваши заказы...
Оформление кредита
Наши программисты потрудилсь сделать так, что бы вы могли оформить кредит не вставая из за стола
   
© 2003—2018 Интернет-магазин ноутбуков a5savel.ru. Все права защищены.
Нелицензированное использование материалов данного сайта запрещено.
(499) 126-15-12 |