Что такое сканер глубины пространства lidar
Для чего нужен LiDAR в iPhone и iPad Pro?
В iPad Pro 2020 года впервые появился LiDAR — сканер, измеряющий расстояние до окружающих объектов. Он, начиная с iPhone 12, присутствует в каждой Pro-модели айфона. Где можно применить эту фишку и как она работает?
Что за LiDAR и как он работает?
LiDAR (Light Detection And Ranging) испускает волну инфракрасных точек, измеряя время полёта каждой до ближайшего объекта и обратно. Это позволяет определить размеры пространства. Похожим образом функционирует камера TrueDepth, используемая в Face ID, однако LiDAR способен работать на большем расстоянии (до 5 м). Времяпролётные камеры во многих Android-гаджетах функционируют по схожему принципу, но там применяется один световой импульс, что снижает точность замеров.
Есть ли конкретная польза от LiDAR в iPhone? Конечно. Эта технология применяется во множестве сценариев.
LiDAR для фото
Времяпролётные камеры в смартфонах, как правило, используются для повышения точности и скорости фокусировки. LiDAR делает то же самое. Apple обещает ускорение фокусировки при слабом освещении до шести раз. Определение глубины тоже используется для улучшения качества работы портретного режима в темноте.
LiDAR для измерения расстояний
С появлением сканера заметно улучшилась работа приложения «Рулетка»: теперь оно точнее, быстрее и удобнее. Для этого в интерфейсе предусмотрены вертикальные и боковые направляющие. Специальный режим, обнаруживая в видоискателе человека, тут же измеряет его рост. Как утверждают обзорщики, точность «Рулетки» в некоторых ситуациях соответствует реальности, хотя чаще имеется небольшая погрешность. Впрочем, использовать приложение в профессиональном строительстве всё же не стоит.
LiDAR для приложений и гейминга
Преимущества датчика хорошо раскрываются в сторонних утилитах. Например, бесплатный Canvas: Pocket 3D Room Scanner позволяет сканировать помещение, чтобы получить 3D-проекцию и рассматривать её с любой точки. Snapchat открыл документацию по созданию линз с использованием LiDAR, а приложение IKEA Place помогает размещать виртуальные элементы интерьера из каталога магазина в квартире пользователя.
Возможность точного нанесения виртуальных объектов на реальные пригодится и на сайте Apple: для некоторых продуктов доступно их изучение в дополненной реальности. Так можно узнать, как будет смотреться iMac на рабочем столе.
А вы пользуетесь фишками LiDAR?
Как использовать LiDAR: нашли 10 бесплатных программ для iPhone 12 Pro и iPad Pro
LiDAR установлен в iPhone 12 Pro и 12 Pro Max, а также в iPad Pro. Он сканирует пространство и определяет очертания объектов в поле зрения.
В новых смартфонах, к примеру, именно благодаря ему портретный режим работает вместе с ночным, а в приложении «Рулетка» появляются новые фишки.
Сканер окружения повышает точность взаимодействия с дополненной реальностью и открывает массу дополнительных возможностей. Чтобы раскрыть их на 100%, разработчики массово взялись за новый софт. Мы собрали первые интересные программы в App Store, которые заточены под использование LiDAR.
Обратите внимание: некоторые из приложений в подборке без LiDAR вообще не работают, а другие ограничивают набор своих возможностей.
1. «Рулетка» — быстрое измерение человеческого роста
В стандарте приложение «Рулетка» должно быть установлено на iPhone 12 Pro. Тем не менее, если вы удаляли его на предыдущем смартфоне и использовали восстановление данных для перехода на новый, велика вероятность, что его снова придется загружать из App Store. Благо, это бесплатно.
«Рулетка» определяет размеры объектов с помощью дополненной реальности. Если запустить ее на iPhone 12 Pro и навести видоискатель на человека, приложение тут же покажет его рост. Причем, оно должно справиться с этой задачей, даже если испытуемый сидит.
Остальные возможности программы можно попробовать на любых других смартфонах: рост также получится измерить на них, но лишь вручную.
2. RoomScan LiDAR — создание поэтажных планов дома
Разработчики RoomScan LiDAR утверждают, что новый сенсор Apple идеально подходит для сканирования домов и создания поэтажных планов. Именно поэтому они переработали свой инструмент для работы с дополненной реальностью специально под iPhone 12 Pro, а также актуальную линейку iPad Pro.
Чтобы ускорить процесс сканирование помещений, разработчики RoomScan LiDAR также подключили движок Metal и решили максимально задействовать чипсеты Apple A12z Bionic и Apple A14 Bionic. Результат удивляет: вы можете создать подробный план дома в 3D и спланировать его ремонт.
Создатели приложения отдельно подчеркивают, что технологии, которые они используют в данном приложении, подкреплены патентом соответствующего Бюро США.
? Скачать RoomScan LiDAR (бесплатно + покупки)
3. magicplan — планирование ремонта и документация
Еще одно приложение, которое заточено под дизайнеров интерьера и владельцев недвижимости, озадаченных ремонтными работами. Оно также сканирует пространство для создания поэтажных планов помещения. Тем не менее, предлагает больше инструментов для перенесениях их из трех измерений в два.
Разработчики настаивают, что с помощью их приложения работа в полевых условиях упрощается. Речь про создание черновых планов помещения на месте, чего от дизайнера часто требуют заказчики. С iPhone 12 Pro или iPad Pro и LiDAR это можно сделать быстро — для этого же получится использовать отдельные лазерные дальномеры.
Функциональный набор приложения, кроме прочего, также включает работу со сметной и другой документацией, которая точно пригодится подрядчику.
? Скачать magicplan (бесплатно + покупки)
4. LiDAR Scanner 3D — быстрый сканер пространства
Это приложение, которое заточено под работу с iPhone 12 Pro и iPad Pro, представляет собой максимально быстрый 3D-сканер. С помощью него можно практически моментально превратить стену своего дома в трехмерную модель и сохранить полученный результат в форматах USDZ, OBJ, STL, PLY.
Отсканированные модели не содержат цветов и предназначены для дальнейшего использования в приложениях для работы с трехмерной графикой на компьютере или мобильных устройствах. По идее, это должно ощутимо сократить потраченное время на создание объектов с нуля.
Без LiDAR это приложение, увы, не работает. Поэтому его есть смысл устанавливать только на iPhone 12 Pro и iPad Pro.
? Скачать LiDAR Scanner 3D (бесплатно + покупки)
5. Heges 3D Scanner — определение объектов через LiDAR и Face ID
Еще одно приложение от предыдущего разработчика, которое может использовать не только LiDAR, но и Face ID. Собственно, поэтому его получится использовать не только на iPhone 12 Pro и iPad Pro, но также на iPhone X, XS, XR, 11, 11 Pro. Готовые «картинки» оно умеет сохранять в форматах STL и PLY.
Кроме прочего, оно также поддерживает возможность шаринга экрана. Это нужно для того, чтобы использовать фронтальную «батарею» камер True Depth, превратив в видоискатель любой другой девайс. Да, с LiDAR весь процесс значительно упрощается, но он пока доступен на ограниченном числе гаджетов.
Кстати, бесплатно с приложением можно только познакомиться. Чтобы активировать запись объекта, эту возможность придется оплатить.
? Скачать Heges 3D Scanner (бесплатно + покупки)
6. 3d Scanner App — сканирование объектов в 3D
Еще один сканер для объектов, который переносит их в трехмерное визуальное пространство и дает возможность использовать в форматах USDZ, OBJ, GLTF, GLB, DAE, STL. Их получится перенести в место, смоделированное на любом другом устройстве.
Описанные выше форматы можно добавить в Blender, 3dsMax, SketchUp, Maya и другой подходящий софт для трехмерного моделирования. Важной особенностью приложения является возможность сохранения размеров объектов, которые определяются при сканировании.
Приложение можно использовать абсолютно бесплатно без каких-либо ограничений.
7. AR COPY & PASTE — копирование и вставка трехмерных объектов
Данное приложение предназначено для копирования и вставки трехмерных объектов на iPhone 12 Pro и iPad Pro с помощью LiDAR. Ни на каких других гаджетах, по понятным причинам, оно полноценно не функционирует — можете даже не пробовать.
Собственно, суть программы проста: отсканировать объект и сохранить его или скопировать в другое пространство через дополненную реальность.
8. Hello How Low — видео с дополненной реальностью
Любопытный способ разнообразить свои видеоролики с помощью эффектов, завязанных на дополненной реальности. С помощью LiDAR приложение определяет очертания человека или другого главного объекта и дает возможность вставлять его на любой интересный фон. Получается неординарный результат.
С помощью встроенным покупок в приложении можно значительно расширить список встроенных фильтров.
? Скачать Hello How Low (бесплатно + покупки)
9. Record3D — ролики с дополненной реальностью
Еще одно любопытное приложение для создания роликов с использованием дополненной реальности. Оно сканирует объект с помощью Face ID или LiDAR и дает возможность использовать его в видеозаписях. Результат получается сюрреалистическим, но вполне интересным.
Отдельного внимания заслуживает возможность сохранения полученных изображений в формате RGBD для их дальнейшего использования в другом поддерживаемом софте.
Для того, чтобы бесплатно протестировать LiDAR в iPhone 12 Pro или iPad Pro, приложение предлагает три видеозаписи. В дальнейшем его придется приобрести.
? Скачать Record3D (бесплатно + покупки)
10. CyberWave — музыкальная визуализация через LiDAR
Без LiDAR данное приложение не работает. С помощью него же оно может создавать визуализацию музыкальных композиций в окружающем пространстве. Достаточно лишь включить программу и активировать воспроизведение любимых треков. Окружающий мир тут же начнет меняться через экран мобильного устройства.
Главное ограничение приложения: оно работает только с музыкой, которая не оснащена через DRM. Поэтому, увы, Apple Music в пролете.
? Скачать CyberWave (бесплатно + покупки)
? Используй лидар и держи свой айфон в красивом чехле:
▪️ Слева пластиковый Guess — 2 990 руб.
▪️ В центре кевларовый Pitaka — 5 990 руб.
▪️ Справа силиконовый Apple — 4 990 руб.
Что такое сканер LiDAR и как его использовать?
Именно с выпуском iPad Pro 2020 года Apple представила весьма интригующий сканер LiDAR. И теперь он стал неотъемлемым элементом iPhone 12 Pro и 12 Pro Max. Но что такое LiDAR и как он работает? Давайте глубоко погрузимся в эту захватывающую технологию, в то, как она связана с дополненной реальностью, и какие преимущества или преимущества может иметь LiDAR.
Что такое сканер LiDAR?
LiDAR расшифровывается как Light Detection and Ranging. ToF, также известный как сканер времени полета, использует свет для определения расстояния между двумя объектами.
Он измеряет время, необходимое источнику света, чтобы достичь объекта и отразиться. Это не новая технология как таковая; НАСА использует его для космических миссий. А метеорологи используют LiDAR для более точных прогнозов погоды.
В последнее время эта технология используется для построения трехмерных карт окрестностей. При этом он физически обметает территорию и вычисляет расстояния, как антенна радара.
Примечательно, что Apple удалось исправить это в серии iPhone 12 Pro и iPad Pro.
Как работает сканирование LiDAR на iPhone 12 и iPad Pro?
Интеллектуально разработанный сканер посылает несколько импульсов невидимых лазеров зеленого спектра и измеряет время их отражения.
Он работает на уровне фотонов и работает с наносекундными скоростями, тысячи раз в минуту.
При использовании он может измерять расстояние между выступом камеры и другими объектами на расстоянии до пяти метров как внутри, так и снаружи.
С помощью этой информации сканер может обнаружить и сфотографировать все, что касается света. Это позволяет сканеру воспринимать глубину, как наши человеческие глаза.
Благодаря чему сканер LiDAR открывает огромные возможности для дополненной реальности и не только.
Согласно Apple, это поможет пользователям тремя способами:
Похож ли он на датчик TrueDepth?
В некотором смысле, LiDAR работает очень похоже на датчик TrueDepth на передней панели, который есть на iPhone X и новее и iPad.
Основное отличие — это количество импульсов. Датчик TrueDepth испускает одиночный импульс инфракрасного света для создания трехмерных карт.
Принимая во внимание, что LiDAR запускает несколько лазерных импульсов в разных направлениях, покрывая область с большей точностью и быстрее.
Что это значит для iPhone 12?
До сих пор такие технологии, как LiDAR, были недоступны для обычных пользователей. С появлением серий iPad Pro и iPhone 12 Pro уравнение меняется.
Посмотрите, как использование технологии определения глубины уже предоставило нам такие удивительные функции, как Animojis, режим автопортрета и эффекты AR портретного освещения.
Представьте себе возможности и пути, которые может повлечь за собой iPhone 12 со сканером LiDAR. От наличия нескольких полезных и реальных функций до потрясающих развлекательных возможностей.
Улучшит ли сканер LiDAR фотографию?
Секрет великолепной фотографии Apple — это продвинутая вычислительная фотография и машинное обучение. И LiDAR добавит в смесь дополнительные данные.
Он отобразит среду и, соответственно, передаст информацию на графический процессор. А поскольку датчик может работать в темноте, стреляя лазером, он может значительно улучшить автофокусировку.
По словам технического гиганта, телефоны iPhone 12 Pro могут в 6 раз быстрее фокусироваться при съемке фото и видео при слабом освещении. Это позволит создавать потрясающие ночные портреты с красивым эффектом боке при слабом освещении.
LiDAR определенно поможет в получении более качественных, резких и контрастных изображений.
Примеры использования LiDAR
Независимо от того, являетесь ли вы поклонником приложений и вариантов использования AR или нет, вы не можете отрицать, что это захватывающая технология. Это то, что может сформировать наше будущее.
Сочетание нового сканера LiDAR, системы определения глубины и ARKit 3.5 делает работу с дополненной реальностью более реалистичной на моделях iPad Pro и iPhone 12 Pro 2020 года.
Разве это не впечатляет. Только представьте, что разработчики приложений и игр могли бы построить из этого сырья.
Что ж, одно можно сказать наверняка: это, несомненно, сделает нашу работу и жизнь более простыми и интересными. Возьмем, к примеру, эти приложения:
Лучшие приложения для iPhone и iPad для тестирования сканера LiDAR
1. Snapchat
Приложение для обмена мультимедийными сообщениями уже предлагает несколько лучших в своем классе фотофильтров AR. И обещает представить объектив с лидаром, специально разработанный для моделей iPhone 12 Pro.
Как уже говорилось в брифинге Apple о лидаре, специальный объектив AR позволит улучшить восприятие глубины. Благодаря лучшему пониманию физического пространства Snapchat будет иметь более реалистичное размещение объектов AR.
2. Измерьте
До сих пор вы могли использовать это приложение для измерения реальных объектов. Теперь приложение LiDAR Measure включает новые горизонтальные и вертикальные направляющие.
Это делает измерение больших объектов удобным и точным. Вы также можете сохранить измерения из одного сеанса и при необходимости поделиться ими. Более того, вы можете мгновенно измерить рост человека.
3. IKEA Place
Подойдет ли этот диван к цветовой гамме вашей комнаты или даже подойдет к этому пространству? Ответьте на все эти вопросы с помощью одного простого приложения и технологии AR.
Во-первых, приложение будет использовать LiDAR, чтобы нарисовать реалистичную картину вашего пространства. Затем вы можете виртуально размещать трехмерные модели в масштабе.
Переместите мебель и найдите ее идеальное место еще до того, как решите купить.
4. Shapr 3D CAD моделирование
Shapr3D сочетает в себе точность и мощность настольного САПР с гибкостью iPad и Apple Pencil.
Он предлагает уникальные инструменты для совместной работы и обучения, полезные для инженеров, промышленных дизайнеров, архитекторов и творцов.
И, как в отличном научно-фантастическом фильме, вы можете оживить свой 3D-объект с помощью AR.
Цена: бесплатно (подписка Pro — 31,99 доллара США).
Скачать
5. Горячая лава
Может ли наш список быть действительно полным без забавной игры с дополненной реальностью? На самом деле, нет! Превратите свое окружение в море раскаленной лавы.
Вы должны бегать, прыгать, лазать и заниматься серфингом от первого лица, чтобы выжить и спасти мир. Также есть море препятствий, от токсичных отходов до бездонной ямы.
Цена: бесплатно с подпиской Apple Arcade.
Скачать
6. Композитор реальности
Собственное приложение Apple, которое помогает пользователям разрабатывать прототип и создавать возможности дополненной реальности. Вы можете настроить виртуальные объекты, добавить анимацию, добавить пространственный звук или создать свою сцену.
Сканер LiDAR открывает путь для перекрытия объектов, т.е. виртуальные объекты перекрываются реальными объектами, чтобы реалистично вписаться в свое окружение.
Более того, размещение для сцен AR и виртуальных целей происходит намного быстрее.
Примечание. Не все приложения с поддержкой AR поддерживают сканер LiDAR. Мы ожидаем, что обновления появятся в ближайшее время, следите за обновлениями в этом месте.
Мы, безусловно, любим LiDAR и варианты его использования. Согласились, что у сканера LiDAR iPhone 2020 года будут ограничения, так как это все еще только зарождающаяся технология.
Но похоже, что это хороший старт для превращения дополненной реальности в «реальность». Что ты думаешь? Как вы думаете, как это может изменить мир, который мы знаем? Что вас больше всего волнует? Сообщите нам свои мнения и отзывы в разделе комментариев ниже.
Что такое сканер iPad Pro LiDAR и как он работает?
Что такое iPad Pro LiDAR?
Новый iPad Pro — первое устройство Apple, оснащенное сканером LiDAR. Но что такое LiDAR и почему Apple использовала этот датчик на новом iPad?
Последний iPad Pro от Apple поставляется со сканером LiDAR, который можно использовать для измерения расстояния между двумя объектами.Когда Apple выпустила новый iPad Pro, то появилась одна особенность, которая привлекла всеобщее внимание наряду с клавиатурой, которая теперь имеет надлежащий трекпад и систему с двумя камерами. Это также первое устройство Apple, оснащенное сканером LiDAR.
Но что такое LiDAR и почему Apple использовала этот датчик на новом iPad?
Что такое LiDAR?
Проще говоря, LiDAR означает обнаружение объекта и расстояния до него. Это в основном метод дистанционного зондирования, который использует свет в форме импульсного лазера для измерения расстояний до объекта. Эти световые импульсы — в сочетании с другими данными генерируют точную трехмерную информацию об объекте с высоким разрешением.
Чем LiDAR отличается Sonar и Radar
Подобно LiDAR, Sonar и Radar также могут давать информацию о форме, размере, направлении и высоте объекта, но они различаются по типу используемого ими сигнала.
Sonar (сокращение от звуковой навигации и определения дальности) использует звуковые волны для обнаружения объектов и, следовательно, обычно используется для обнаружения объектов под водой. Между тем, Radar (сокращение от радиодетектирования и определения дальности) использует радиоволны для определения расстояния до объекта. Радиоволны могут работать на большом расстоянии и лучше работать в запыленных условиях. Датчики LiDAR обычно встречаются в автомобилях с автоматическим управлением.
Где используется LiDAR?
LiDAR обычно используется для сбора данных с высокой плотностью для создания карт высокого разрешения. Датчики LiDAR устанавливаются под беспилотниками для создания показаний местности, линий электропередачи, зданий и деревьев. Эксперты говорят, что LiDAR точно отображает землю под землей и может обеспечить высокоточную трехмерную модель по сравнению с наземными методами сбора информации. Эта технология в основном используется для наземных съемок.
Помимо аэрофотосъемки, датчик LiDAR является наиболее важным компонентом в автомобилях с автоматическим управлением. Датчик LiDAR обеспечивает непрерывную 360-градусную видимость и точную информацию о глубине.
Впервые LiDAR был использован на космическом корабле во время полета на «Аполлон-15» в 1971 году, когда астронавты нанесли на карту поверхность Луны.
Apple считает, что ее сканер LIDAR будет чрезвычайно полезен для опыта дополненной реальности (AR).
Какая польза от LiDAR в iPad Pro?
В сущности, LiDAR — это датчик улучшенный датчик ToF, который можно увидеть на таких устройствах, как Galaxy Note 10+, Galaxy S20 Ultra и Huawei Mate 30 Pro. Но похоже, что Apple использовала собственный сканер LiDAR, который немного более продвинут, чем система ToF.
Apple утверждает, что новый датчик LiDAR может измерять объект на расстоянии до пяти метров. Напротив, датчик ToF на существующих смартфонах может обнаруживать объекты только на максимальном расстоянии около двух метров. Между тем, Apple утверждает, что ее система LiDAR может работать «на уровне фотонов с нано-секундной скоростью».
Apple считает, что ее сканер LIDAR будет чрезвычайно полезен для приложений дополненной реальности (AR). Для тех из вас, кто не знаком, AR относится к технологии, которая накладывает информацию и виртуальные объекты на реальные сцены в реальном времени. Он использует существующую среду и добавляет информацию для создания новой искусственной среды.
Apple уже довольно давно продвигает использование AR на iPad и iPhone. В настоящее время Apple App Store предлагает множество AR-приложений, многие из которых предназначены для студенческого сообщества.
Тем не менее, для разработчиков датчик LiDAR на iPad Pro полезен для создания будущих приложений. Система использует преимущества «ARKit», инструментария для разработчиков для создания мощных AR-приложений. Мы можем ожидать, что приложение Apple «Measure» и приложения сторонних разработчиков попытаются использовать преимущества сканера LiDAR на новом iPad Pro.
Нет ни слова о том, как датчик LiDAR улучшит фотографию на iPad Pro
LiDAR не идеален
Тем не менее, датчик LiDAR также имеет определенные недостатки. LiDAR может измерять расстояние до окружающих объектов на расстоянии до 5 метров, но не очень хорошо распознает находящиеся поблизости объекты. Кроме того, он не может хорошо работать в тумане, дожде, снегу и пыльной погоде. LiDAR также с большим трудом может обнаружить стеклянную стену или дверь, поэтому производители смартфонов и производители автомобилей с автоматическим управлением используют LiDAR вместе со вторыми камерами и датчиками. Как и в случае с iPad Pro, Apple добавила 12-мегапиксельную камеру и 10-мегапиксельную сверхширокую камеру на задней панели рядом с датчиком LiDAR.
Установит ли Apple LiDAR в iPhone 12?
Теперь, когда iPad Pro поставляется с сенсором LiDAR, вполне вероятно, что Apple представит эту технологию в iPhone 12, запуск которого запланирован на конец этого года. Недавние сообщения свидетельствуют о том, что Apple работает над новым приложением AR под кодовым названием «Gobi», которое позволит пользователям просматривать товары / товары в магазине перед их покупкой. Также ходят слухи, что Apple работает над парой очков AR, хотя пока нет фиксированных сроков выпуска. Запуск iPad Pro с сенсором LiDAR может стать началом чего-то большого.