Программы для lidar iphone 12 pro
Обновлено: 14.05.2024
У вас есть сканер LiDAR, если у вас есть iPhone 12 Pro, iPhone 12 Pro Max или iPad Pro, но Apple, похоже, не дает вам возможности его использовать. Вот как это сделать, что вам нужно и почему LiDAR так полезен.
LiDAR является частью iPhone 12 Pro, iPhone 12 Pro Max и iPad Pro, но вас простят за то, что вы этого не заметили. Apple почти не упоминает об этом, и на телефоне нет приложения LiDAR, которое можно было бы попробовать.
Также мало стимулов искать такие элементы управления, потому что, пока вы не увидите их в действии, трудно понять, что LiDAR может для вас сделать. Технология сканирует вашу среду, создавая ее трехмерное изображение, и это изменит качество работы AR и VR.
На данный момент Apple, похоже, рада позволить LiDAR тонко помочь вам тем, как он дополняет существующие приложения и функции.
Как вы уже используете LiDAR
Если вы ранее отказались от использования приложения Apple Measure, попробуйте еще раз. Приложению теперь помогает LiDAR, и это заметно улучшило его.
Теперь можно быстрее начать использовать Measure, потому что он быстрее распознает окружающую среду. А поскольку LiDAR работает для сканирования всей окружающей среды, измерения, которые вы выполняете, более точны.
Это теория, а на практике вы обнаружите, что Measure более полезен, чем раньше. Вместо приложения, которое вы использовали для грубых измерений, когда у вас не было рулетки, теперь оно достаточно хорошее и быстрое, чтобы использовать его где угодно.
Далее, хотя это и сложнее увидеть, LiDAR также ускорил работу автофокуса вашей камеры. Опять же, это потому, что LiDAR отображает окружающую среду вокруг вас, поэтому он начинает вычислять, насколько далеко или близко находится объект, когда вы нажимаете кнопку, чтобы сделать снимок.
Но в целом они также, как правило, хороши в одном из двух. Либо они отлично справляются со съемкой трехмерного изображения вашего окружения, похожего на фотографию, либо лучше снимают изображение объекта.
Это баланс между достаточно медленным сканированием, чтобы избежать размытия, и достаточно быстрым, чтобы закончить, пока приложение все еще может хранить данные.
Захват всей вашей среды
То, что вы видите на экране холста, похоже на голодек из «Звездного пути». Рядом с камерой, видимой прямо перед вами, есть сетка. Когда вы поворачиваетесь, сетка заполняется изображением вашего окружения.
Двигайтесь слишком быстро, и получаемое изображение будет недостаточно детализированным. Если двигаться слишком медленно, приложению может не хватить памяти до того, как вы завершите сканирование. Так что это компромисс между деталями и полнотой, но он дает вам 360-градусное изображение вашей комнаты.
Прямо здесь, на iPhone, вы можете уменьшить масштаб, чтобы увидеть изоморфную проекцию комнаты, повернуть ее жестом и увеличить, чтобы увидеть ее под любым углом. Проведите пальцем по экрану, чтобы показать комнату крупным планом на весь экран, и затем вы можете провести пальцем по экрану, чтобы передвигаться, или физически переместить телефон.
Физическое перемещение телефона показывает, как выглядит захваченное окружение, когда вы поворачиваетесь. Но вам не обязательно находиться в той же среде, в которой вы запечатлели.
Вместо этого вы можете взять свой телефон и изучить сканированное изображение в любом другом месте. Встаньте, например, в поле и посмотрите на свой офис на экране iPhone. Двигайтесь по полю, и экран будет выглядеть так, как будто вы перемещаетесь по офису.
IPhone 12 Pro, Pro Max и iPad Pro 2020 оснащены сканером LiDAR, который добавляет интригующий уровень дополненной реальности. Вот лишь некоторые из приложений, которые могут воспользоваться этой новой функцией.
Сканер обнаружения и определения дальности (LiDAR) в iPhone 12 Pro , iPhone 12 Pro Max и iPad Pro 2020 более точно измеряет расстояния для картирования трёхмерных пространств. Этот навык пригодится при съёмке фотографий ночью, но он также играет роль во множестве мобильных приложений. С помощью сканера LiDAR вы можете лучше оценивать себя на предмет покупки одежды, дома для покупки новой мебели и вашего окружения для сканирования изображений.
Такие компании, как Apple, Ikea и Microsoft, имеют приложения, которые могут измерять рост человека, размещать виртуальную трёхмерную мебель и идентифицировать людей и предметы поблизости. В App Store существует множество других сторонних приложений, но среди них есть несколько выделяющихся.
Измерение
Бесплатное приложение Apple Measure включено в iPhone и iPad как виртуальная альтернатива физической линейке, рулетке и уровню. Вы можете измерить расстояние между двумя точками, определить размеры объекта и даже выяснить, прямая ли поверхность.
Измерьте расстояние, поместив центральную точку внутри круга в начальную точку, затем нажмите кнопку +. Переместите устройство вдоль области, которую вы хотите измерить, затем снова нажмите кнопку + в конечной точке. Общее расстояние отображается на экране.
Если вы ищете размеры фигуры, например, квадрата или куба, запишите длину одной стороны, а затем дважды нажмите кнопку +. Переместите устройство по бокам и дважды нажмите кнопку +, чтобы начать следующую строку. Продолжайте так, пока не будут измерены все стороны, затем нажмите кнопку +, чтобы закончить.
Чтобы использовать приложение «Измерение» в качестве уровня , коснитесь значка «Уровень» в нижней части экрана. Затем вы можете расположить устройство ровно, горизонтально или вертикально вдоль поверхности, пока на экране не отобразится 0 и не станет зелёным, чтобы указать, что вы находитесь на уровне.
Икеа Плейс
Вы можете легко реконструировать и оборудовать свой дом подходящей мебелью с помощью бесплатного приложения Ikea Place . Выбирайте из множества предметов, включая стулья, диваны, столы, письменные столы, книжные шкафы и лампы. Вы можете просматривать по коллекции, категории или теме. Просто поместите объект в определённое место в доме, чтобы посмотреть, как он подойдёт. После того, как вы вставили виртуальный элемент, вы можете изменить его положение и перемещать по комнате. Вы также можете добавить больше предметов и сохранить каждый, чтобы отремонтировать целые комнаты или весь дом.
Seeing AI
Бесплатное приложение Seeing AI, разработанное Microsoft, предназначено для помощи слепым и слабовидящим людям в навигации по окружающей среде. Однако новые функции на основе LiDAR делают приложение увлекательным для всех.
Благодаря мощи искусственного интеллекта приложение может описывать людей, сцены и объекты, которые появляются в видоискателе. Он также может просматривать текст на лету и читать его вслух, определять продукты по штрих-коду и определять цвета и валюту.
Благодаря поддержке LiDAR, Seeing AI может помочь вам почувствовать расстояние до объектов на основе тактильного датчика приближения вашего устройства. А если вы в наушниках, приложение может описывать близлежащие объекты. Чтобы использовать Seeing AI, просто выберите нужный вариант, наведите iPhone или iPad на нужный объект, а приложение сделает всё остальное.
Canvas
Ищете приложение для сканирования, захвата и отображения всей комнаты? Холст: Pocket 3D Room Scanner справится с этой задачей. Выберите комнату, которую вы хотите сканировать, затем перемещайте устройство по комнате, чтобы покрыть виртуальную сетку, отображаемую на экране.
После того, как вы запечатлили всю комнату, приложение сгенерирует трёхмерное изображение, которое вы можете просмотреть и даже пройти. Осмотрите комнату, используя жесты или перемещая свой iPhone или iPad. Вы можете посмотреть изображение комнаты в разрезе, которое затем можно наклонить или повернуть.
Базовое приложение бесплатное. Если вам нужно профессиональное CAD-изображение вашей комнаты для дизайна или архитектуры, вам придётся потратить до 15, 29 или 39 долларов за сканирование в зависимости от требуемой сложности.
Приложение для 3D-сканера
С помощью бесплатного приложения 3D Scanner вы можете сканировать любой объект или сцену, чтобы создать их трёхмерное изображение на своём устройстве. Для начала поместите свой iPhone или iPad перед объектом, который хотите сфотографировать, и нажмите кнопку спуска затвора. Переместите устройство вокруг объекта, чтобы создать изображение, затем снова нажмите кнопку спуска затвора, когда закончите создание 3D-объекта.
По умолчанию сканирование создаётся в низком разрешении, но вы можете переключиться на высокое разрешение, чтобы лучше контролировать качество изображения. Впоследствии вы можете настроить сканирование, чтобы уточнить, сгладить или упростить детали. Вы также можете измерить расстояние между любыми двумя точками на скане и поделиться им в разных форматах.
Scaniverse
Polycam
Бесплатное приложение Polycam — LiDAR 3D Scanner может сканировать и захватывать определённые сцены и объекты, а затем отображать их в виде 3D-изображений. Выровняйте свой iPhone или iPad и нажмите кнопку спуска затвора, чтобы начать. Переместите устройство, чтобы полностью просканировать объект. Когда закончите, снова нажмите кнопку спуска затвора и выберите «Обработка», чтобы создать изображение. Затем вы можете обрезать изображение, измерить расстояние между двумя точками и поделиться изображением, используя множество различных форматов файлов.
ARama!
Это приложение обеспечивает ещё больше удовольствия и гибкости игровой площадке, созданной с помощью LiDAR. Используя бесплатную ARama! app , вы можете взять новое или существующее изображение человека, фигуры или изображения и поместить его как виртуальное изображение в реальную среду.
Для человека или фигуры нажмите соответствующую кнопку, выровняйте объект в видоискателе устройства и коснитесь белых линий, чтобы скопировать его. Переместитесь в то место, где вы хотите разместить элемент, и нажмите кнопку на экране, чтобы вставить его.
Для существующего изображения нажмите кнопку, чтобы получить доступ к своей библиотеке фотографий, выберите изображение и затем вставьте его в своё реальное окружение. Вы можете разместить несколько людей, объектов и изображений как виртуальных объектов в одной сцене.
Детская площадка AR
Вот приложение, простое, но затягивающее. В бесплатной Playground AR: Physics Sandbox вы размещаете виртуальные блоки в реальной среде, чтобы увидеть, как они взаимодействуют друг с другом. Вы можете выбрать кубики, прямоугольники, треугольники, цилиндры, битки и модели автомобилей, а затем нажать кнопку, чтобы положить каждый предмет на пол, стол или другую поверхность.
Самое интересное заключается в размещении и перемещении предметов. Например, вы можете разместить один объект поверх другого, чтобы посмотреть, насколько высоко может подниматься ваша башня, пока она не рухнет. Вы даже можете перемещать определённые объекты. Например, вы можете водить модель автомобиля по экрану и врезаться в свою башню из блоков. Просматривая рекламу, вы можете разблокировать ещё больше объектов модели для текущего сеанса, включая самолёт, вертолёт, пушку и катапульту.
Компания Apple добавила в свои новые iPhone 12 Pro | iPhone 12 Pro Max и iPad Pro (2020) сканер LiDAR. Рассуждаем, для чего можно использовать эту технологию уже сейчас и что будет в будущем.
Компания Apple начала серьезную работу над дополненной реальностью еще в 2017 году, когда им удалось произвести фурор с помощью виртуальной мебели в IKEA, а также довольно реалистичным сражениям Pokemon Go. С тех пор уже утекло немало воды, и сегодня мы держим в кармане новенький iPhone 12 Pro | 12 Pro Max , а также начинаем собирать слухи о выходе первой гарнитуры дополненной реальности производства Apple — Apple Glass.
Почему не Apple Glass?
Почему Apple не пошли шагами Microsoft и Google, представив нам сначала очки дополненной реальности, а сделали смелый шаг и внедрили сканер LiDAR в свои новые iPhone 12? По словам Майка Роквелла, главы разработок Apple AR, сейчас Apple больше заинтересованы не в том, чтобы показать нам что-то из ряда вон выходящее, а максимально адаптировать под будущее уже те продукты, которые сейчас лежат у нас в кармане.
На самом деле, гарнитуры дополненной реальности, такие как Oculus Quest 2, несмотря на улучшения из года в год, интересуют небольшое количество людей. Никто не говорит о количестве проданных VR и AR-гарнитур, кроме Sony.
Между тем, Apple продала около сотни миллионов iPhone и iPad с поддержкой AR, начиная с 2017 года. Также Apple заявляет, что уже существует 10 000 приложений для iOS с поддержкой AR от 7 000 разработчиков, многие из которых сосредоточены на покупках или улучшении дома с использованием AR.
При этом превосходство Apple в том, что компания не предлагает пользователю устанавливать дополнительный софт для того, чтобы воспользоваться услугами AR. Вы можете прямо из Safari посмотреть интересующую мебель в дополненной реальности. А с внедрением App Clips в iOS 14 эта процедура должна стать еще проще и востребованнее разработчиками.
Разработчики Adobe создали свое приложение AR Aero специально для iOS и iPadOS, игнорирую гарнитуры дополненной реальности, потому что понимают — куда больше криэйторов работают именно с iPad и iPhone.
LiDAR — шаг к дополненной реальности
Первые шаги Apple в области дополненной реальности, были сделаны с iPhone 8. Они заключались только в распознавании этажей с помощью датчиков движения, гироскопов и встроенной камеры телефона. Затем iPhone научился узнавать людей, животных.
iPhone и iPad с поддержкой LiDAR, невидимо распыляют массив инфракрасных лазеров, быстро создавая сетку (отображение в 3D) всех размеров комнаты. Это эволюция технологии, которую Google исследовал много лет назад, создав линейку телефонов Tango с датчиком глубины, но Apple сделала это в более продвинутом и широком масштабе.
Популярная социальная сеть Snapchat уже изучает возможности использования LiDAR для создания эффектов дополненной реальности, которые могут превратить виртуальные объекты в реальный мир, и даже проводит масштабные эксперименты, сканирующие целые городские кварталы.
Возможности для фотографии также кажутся потрясающими, потому что приложение Apple Camera использует LiDAR установленный в iPhone 12 Pro и iPhone 12 Pro Max для улучшения фокуса ночных фотографий и портретов. Но Apple пока не включает дополненную реальность в свое приложение камеры и не позволяет выполнять 3D-сканирование.
3D-макеты Tesla сделанные на iPhone 12 Pro с помощью LiDAR
Эти идеи оставлены разработчикам для изучения.
Некоторые приложения, такие как DSLR Camera, уже используют LiDAR в новых iPhone для создания пользовательских слоев 3D-информации поверх данных фотографий и наложения текста в 3D на фотографии.
Кроме этих возможностей, LiDAR помогает обнаруживать людей в iOS 14.2 уже сейчас. Тем самым расширив возможности людей с особыми потребностями.
Какие приложения уде сейчас поддерживают LiDAR
1. Complete Anatomy 2021
2. RoomScan LiDAR
3. IKEA Place
4. 3d Scanner App
5. RC Club — AR Racing Simulator
App Clips — возможность развития AR на iPhone
С новой функцией App Clips, которая позволяет вам не скачивать, а сразу использовать нужное приложение перспективы AR на iPhone возрастают. Все потому, что многие люди в самом деле не используют дополненную реальность только из-за того, что им не хочется переходить и скачивать какое-то приложение, проходить регистрацию и так далее, чтобы просто посмотреть на какой-то объект AR. С App Clips, которые появились в iOS 14 это вам и не будет нужно.
Захотите посмотреть на какой-то объект AR вроде экспоната в музее или карты местности — все что вам будет нужно просто просканировать QR-код.
Вчера Apple представила свои последние флагманские модели iPhone 12 Pro и 12 Pro Max. Среди прочего, по аналогии с планшетами iPad Pro, смартфоны получили продвинутые датчики глубины — лидары, разработанные для более качественной дополненной реальности (AR) и других 3D-задач вроде боке. Snapchat подтвердила, что будет одной из первых, кто применит новую технологию в своём приложении для iOS.
AFP / Getty Images
Лидар излучает свет и замеряет, сколько времени ему требуется, чтобы достичь объекта и отразиться обратно. На основании такой информации устройство строит 3D-модель окружения с высокой точностью на расстоянии до 5 метров. Наряду с возможностями машинного обучения iPhone и API для разработчиков, лидар помогает iPhone понимать мир вокруг.
Apple, например, использовала эту технологию для своих моделей iPhone 12 Pro с целью улучшения фотографий при слабом освещении: благодаря способности видеть в темноте лидар позволяет ускорить автофокус при плохом освещении в 6 раз и улучшить отслеживание объектов.
Разработчики же приложений смогут использовать лидар для сканирования объектов и комнат: в результате можно ждать более совершенные приложения для покупок с дополненной реальностью, инструменты для домашнего дизайна или игры с AR. Можно также добиться более точного наложения фото- и видеоэффектов в режиме AR.
Именно последнее и предложит Snapchat. Компания, которая уже известна своими лучшими фотофильтрами AR, заявила, что скоро выпустит «объективы», использующие лидар специально для моделей iPhone 12 Pro. Apple кратко познакомила публику с функцией Snapchat на основе лидара во время цифровой презентации iPhone.
Она показала фильтр, в котором цветы и травы покрывают стол и пол, а птицы летят к лицу пользователя. При этом наложение трав выглядит очень реалистично, а объекты перекрывают друг друга, словно находятся в реальном физическом пространстве. Птицы пролетают за человеком и даже зависают точно над рукой человека. В деле новый фильтр Snapchat можно оценить на видео презентации iPhone с отметки 59:41.
Читайте также: