Дополненная реальность в ios: Как работает инструмент Apple ARKit, дополненная реальность в айфоне или айпаде

Как работает инструмент Apple ARKit, дополненная реальность в айфоне или айпаде

Как работает инструмент Apple ARKit, дополненная реальность в айфоне или айпаде

8 (8342) 54-62-22

Своё название инструмент Apple ARKit получил в соответствии с главной функцией — предоставить
набор инструментов (Kit) разработчикам приложений, чтобы те могли задействовать дополненную
реальность (AR). Технология Apple ARKit включена в iOS 11 — версию операционной системы для
айфонов и айпадов, которая увидела свет в 2017 году.

Что такое ARKit? Главный успех

Фактически, это готовая, унифицированная платформа для создания приложений с использованием
дополненной реальности. По этой причине многие обозревали сравнили запуск ARKit с созданием
каталога App Store. По масштабности эти два события действительно сопоставимы, и вот почему.

В отличие от прежних версий операционной системы, дополненная реальность в iOS 11 стала
полноценным инструментом, доступным каждому разработчику. Так же как в 2008 году App Store
унифицировал использование сенсорного дисплея, ARKit в 2017 году вывел на единый уровень
возможности, связанные с дополненной реальностью.

Теперь разработчикам не нужно тратить уйму времени и сил, чтобы самостоятельно «учить»
устройство на iOS анализировать окружающий мир и создавать AR в оперативной памяти.

Как создаётся дополненная реальность в iPhone и iPad

Вне зависимости от того планируется использовать созданное приложение для развлечения или для
практических задач, инструментальные средства используются одни и те же:

• камеры устройства получают визуальное изображение;
• микрофон и некоторые другие датчики получают звук, считывают сведения о вибрациях и о других
  изменениях;
• процессор обрабатывает поступающую информацию и согласовывает её с командами, которые
  подаются из самого приложения.

Оснащённые набором инструментов AR iPhone и iPad теперь «умеют» самостоятельно обнаруживать
горизонтальные и вертикальные поверхности, определять источники света и тени, различать голоса и
лица и многое другое. Процессоры семейства A9 и более поздние модели в полной мере справятся с
тем, чтобы задействовать поступающую информацию и создавать дополненную реальность.

Чем дальше, тем больше становится коммерческих, обучающих и игровых программ. Инструменты,
созданные командой Apple, применяются разработчиками по всему миру.

Будущее: Наука и техника: Lenta.ru

В начале декабря появилось несколько новостей о новом продукте Apple. Так, сообщается, что Apple работает уже над вторым поколением гарнитуры смешанной реальности. При этом компания еще не представила даже первое поколение и никак не комментирует его разработку — продукт должны показать в 2022 году. «Лента.ру» расскажет, почему секретный девайс так важен для компании, какие перспективы есть у рынка VR и AR и что уже известно о шлеме виртуальной реальности от Apple.

Дело Тима Кука

В конце лета колумнист Bloomberg Марк Гурман (Mark Gurman) рассказал, что глава Apple Тим Кук начинает размышлять о своем будущем без компании. По идее, в ближайшие пять лет 60-летний руководитель должен покинуть корпорацию, которую он принял из рук Стива Джобса в 2011 году. Гурман загадочно подчеркивает, что в финале своей блистательной карьеры Кук мечтает объявить со сцены о выпуске принципиально нового продукта.

Ностальгирующие по Джобсу критики не могли не принять во внимание, что во времена «скучного менеджера» в неизменной рубашке и очках американская корпорация влетела в топы главных предприятий США и мира. Капитализация Apple уже исчисляется миллиардами, стоимость акций регулярно пробивает рекорд, но в последнее время радикально новых решений и продуктов не появилось.

Судя по словам Гурмана, так думает и Тим Кук. Последним совершенно новым продуктом, созданным под руководством менеджера, были часы Apple Watch, анонс которых состоялся в 2015 году. В завершение предприниматель намерен представить носимое устройство, которое будет представлять собой то ли умные очки, то ли VR-гарнитуру, то ли и то и другое. Аналитики и журналисты упрощенно называют новый продукт VR-шлемом, хотя это устройство правильнее описывать как гарнитуру смешанной реальности (mixed reality). Это гаджет, пользователь которого взаимодействует и с виртуальной, и с дополненной реальностью.

Концептуальное изображение гарнитуры AR / VR от Apple

Кадр: Tech Vision / YouTube

Виртуальная реальность заключается в демонстрации зрителю альтернативного мира, который синтезируется посредством видео и аудио. Дополненная реальность не отменяет реальный мир, накладывая на него полезные объекты.

Если следить за заявлениями Тима Кука, тема с альтернативными реальностями захватила его около пяти лет назад. В 2016 году бизнесмен отметил, что его компания занимается технологиями дополненной реальности (AR), приведя в пример, как хорошо работает на iPhone новая игра Pokemon Go. Вероятно, глава Apple считает, что AR можно использовать в более прикладных сценариях, чем VR, — позже он заявил, что дополненная реальность важнее виртуальной.

При этом дипломат Кук заметил, что обе технологии важны. Вероятно, интерес к дополненной реальности вызван тем, что стандарт VR зарекомендовал себя в видеоиграх — сегменте, которым в компании практически не заинтересованы. Территория AR, напротив, не очень хорошо освоена, технология может быть полезной в «серьезных» делах — например, образовании, медицине, промышленности, автомобильной индустрии. В том же 2016 году Тим Кук говорил, что AR, безусловно, полезнее VR, потому что ничто не заменит настоящего человеческого контакта.

Я считаю дополненную реальность такой же важной идеей, как смартфон

Тим Кук

В перспективе — отказаться от смартфона

В 2017 году Apple анонсирует появление платформы ARKit, в рамках которой на iPhone и iPad могут развиваться сервисы с применением дополненной реальности. «А что если границы между воображением и реальным миром не существует? Благодаря технологиям дополненной реаль­ности это не просто возможно, это уже факт», — говорят в компании. Корпорация предлагает разработчикам создавать свои приложения, определенные функции которых задействованы в альтернативной среде. Спустя несколько лет в App Store появилось несколько десятков, если не сотен программ, которые так или иначе взаимодействуют с дополненной реальностью.

AR-технологии пока еще не стали массовыми. Да и не каждый смартфон Apple можно использовать для серьезного погружения в дополненную реальность. В основном взаимодействие происходит с помощью камеры и встроенных датчиков. Для оценки расстояния между объектами телефон должен иметь двойную камеру или лидар, который появился в последних поколениях iPhone. В этом случае смартфон может накладывать на реальные объекты в объективе виртуальные эффекты.

В качестве примера можно привести функции линейки, которая позволяет с помощью камеры измерить расстояние между объектами. На странице поддержки ARKit компания продвигает приложение Clips, которое умеет добавлять на фотографии и видео конфетти и прочие объекты из альтернативной реальности, программу ARki, необходимую для планирования помещений при строительстве, утилиту IKEA Place, которая предлагает оценить мебель в интерьере дома до ее покупки.

Пример использования дополненной реальности на iPad

Кадр: Tech Vision / YouTube

Очередной шаг к будущему с AR был сделан в 2020 году, когда Apple представила первый продукт с лидаром — планшет iPad Pro с лазерным дальномером для оценки расстояния в пространстве. Осенью были выпущены смартфоны серии iPhone 12, также получившие лидар. С его помощью телефоны могут более точно рассчитывать расстояние до объектов и на основе этого более качественно обрабатывать фотографии.

Пока AR не кажется технологией первой необходимости — например, как видеозвонки или функция бесконтактной оплаты с помощью телефона. Однако Тим Кук уверен, что очень скоро дополненная реальность будет незаменимой. «Я думаю, что AR — одна из тех очень немногих глубоких технологий, на которую мы однажды оглянемся и задумаемся: как мы прожили свою жизнь без нее?» — заметил бизнесмен после анонса iPhone 13.

О том, что в будущем все мы окажемся в метавселенной, в 2021 году не говорил только ленивый руководитель IT-компании или отраслевой аналитик. По оценке занимающейся вопросами VR и AR компании Lumus Vision, к 2025 году рынок дополненной реальности вырастет до 25 миллиардов долларов. Большая часть денег — около 12 миллиардов — будет задействована в индустрии развлечений и видеоигр, примерно по пять миллиардов вложат в здравоохранение, промышленность, недвижимость и прочие отрасли.

Пользователи уже готовы к переходу в альтернативную реальность: так, по данным ARtillery Intelligence, только платформу ARKit к 2020 году поддерживает порядка 1,1 миллиарда устройств

Дополненная реальность может улучшить удаленное взаимодействие между людьми, повысить комфортность и доступность онлайн-образования, совместной работы, моделирования различных виртуальных проектов, создания новых продуктов. AR упростит покупку товаров, примерку одежды и обуви, проектирование и дизайн помещений, поднимет развлечения на новый уровень. В бизнесе, промышленности, медицине, науке альтернативная среда с применением искусственного интеллекта и виртуальных ассистентов позволит оперировать огромными массивами данных, в момент получать доступ к любой информации.

В обычной жизни дополненная реальность поможет в организации рабочего пространства, навигации на незнакомой местности, получении новостей и уведомлений из мессенджеров и почты. В перспективе, при наличии действительно автономного и подключенного к сети устройства, человечество может отказаться от смартфона. И эту перспективу давно описывают футуристы и фантасты.

Все будет!

Засекреченный продукт Apple может появиться уже на осенней презентации 2022 года. Считается, что это будет носимое устройство — вроде смарт-очков или шлема виртуальной реальности по типу Oculus Rift или Valve Index. В пользу идеи более громоздкого корпуса говорят слухи о том, что устройство получит пару высококачественных дисплеев, несколько процессоров и сенсоров. Также в одном из последних отчетов говорилось, что девайс будет полностью независим от других гаджетов — в первую очередь от iPhone. Это намекает на наличие собственного накопителя, аккумулятора и модуля беспроводной связи.

Материалы по теме:

Место притяжения.Как интернет-торговля сделает жизнь миллионов людей лучше и поможет экономить

Гаджеты научились заряжать прямо через вышки 5G.Как новое поколение сотовой связи изменит жизнь людей?

Дивный новый мир.Как технологии виртуальной реальности изменят нашу жизнь к лучшему?

Гарнитура смешанной реальности будет ориентирована на виртуальное взаимодействие с объектами, общение и игры. Последнее может говорить о том, что Apple планирует расширить свое присутствие на рынке игр. Данный сегмент пока очень узок, а продажи VR-игр ничтожны по сравнению с продажами традиционных игр для консолей и ПК. Вероятно, компания будет использовать собственную платформу ARKit и сервис Arcade для создания и публикации новых тайтлов.

Концептуальное изображение умных очков

Кадр: ZONEofTECH / YouTube

До анонса продукта нельзя гарантировать, что очки виртуальной и дополненной реальности будут ориентированы на широкого потребителя. Источники The Information сообщали, что гаджет будет создан для ограниченного применения. Устройство могут использовать профессионалы в медицине, промышленности, IT-разработке и других областях. Также девайс будет иметь два дисплея с разрешением 8К и стоить около трех тысяч долларов.

Судя по отчетам аналитиков, новый продукт Apple может оказаться и дорогим, и специфическим устройством. Однако зачем в этом случае выпускать несколько поколений гарнитуры — одно за другим, как якобы планирует IT-гигант? Для популяризации технологии альтернативной реальности, о которой так часто говорит Тим Кук, нет ничего хуже, чем сделать поддерживающий ее гаджет дорогим и рассчитанным на узкую прослойку профессиональных пользователей.

В этом случае новое устройство может повторить судьбу Google Glass: об умных очках говорили на каждом углу, а в итоге оно оказалось слишком дорогим и сложным и нашло применение только в науке и промышленности. Это явно не тот сценарий, который устроит уходящего на пенсию руководителя одной из самых инновационных компаний мира.

Все, что вам нужно знать

Почему вы можете доверять Pocket-lint

(Pocket-lint) — ARKit — это платформа дополненной реальности (AR) от Apple для устройств iOS. Это позволяет разработчикам создавать приложения, которые взаимодействуют с окружающим миром с помощью камер и датчиков устройства.

Apple уже много лет очень заинтересована в потенциале AR и представила ARKit в 2017 году как часть iOS 11. Впоследствии она объявила о второй версии iOS 12 и, по сути, выпускает новую версию каждый раз, когда обновляет iOS. Существует аналог Google для телефонов Android, который называется ARCore.

Вот все, что вам нужно знать об ARKit, включая его возможности и примеры его возможностей в действии.

Apple

Что такое дополненная реальность?

Дополненная реальность — не новая технология, но относительно новая для персональных устройств. В то время как виртуальная реальность погружает вас в пространство, по сути заменяя все, что вы видите в физическом мире, AR берет мир вокруг вас и добавляет к нему виртуальные объекты.

Что такое Apple ARKit?

Это платформа для разработки, которая позволяет разработчикам приложений быстро и легко встраивать возможности дополненной реальности в свои приложения и игры. Он использует камеру, процессоры и датчики движения вашего устройства iOS для создания иммерсивных взаимодействий.

Как пользователь, вы на самом деле не видите, является приложение с поддержкой ARKit или нет — вы просто видите отличное, веселое или полезное приложение.

• Особенности Apple iPadOS, новости и дата выпуска

ARKit использует технологию визуальной инерциальной одометрии для отслеживания мира вокруг вашего iPad или iPhone. Это позволяет вашему устройству iOS определять, как оно перемещается в комнате.

ARKit использует эти данные не только для анализа планировки комнаты, но и для обнаружения горизонтальных плоскостей, таких как столы и полы. Затем технология может обслуживать виртуальные объекты для размещения на этих поверхностях в вашей физической комнате.

Какой смысл в ARKit?

Разработчики могут свободно создавать любые приложения с помощью ARKit, и теперь доступны различные приложения.

Одним из лучших примеров является Ikea, где вы можете просмотреть продукты Ikea у себя дома перед покупкой. Если бы только это действительно делало вещи также.

Ikea

Для Apple ARKit открывает совершенно новую категорию приложений, которые будут работать на всех iPhone и iPad.

Кроме того, он открывает так много долгосрочных возможностей. Ходят слухи, что компания, например, работает над гарнитурой дополненной реальности. Представьте, что вы носите очки Apple AR, способные каждый день дополнять ваш мир.

В рамках iOS 12 Apple представила версию ARKit второго поколения, которую она запустила вместе с концепцией Lego с виртуальными деталями и минифигурками Lego.

Это должно было продемонстрировать ключевую особенность ARKit 2 — мультиплеер. Разные устройства могут видеть одну и ту же сцену AR. Они также могут приостанавливаться и возобновляться по желанию, создавая более полезные впечатления, когда люди могут вернуться к виртуальному сценарию — Apple привела пример проекта внутренней отделки, к которому вы можете возвращаться несколько раз в течение нескольких дней.

Apple

Что в Arkit 3?

2019 Arkit 3 включал захват движения, чтобы разработчики могли интегрировать движение людей в свое приложение и окклюзию людей. Обе эти технологии означают, что содержание AR будет естественным образом отображаться перед людьми или позади людей, чтобы обеспечить более захватывающие приложения.

Существует поддержка как передних, так и для задних камер, в то время как фронтальная камера также может отслеживать до трех грани.

Однако все эти функции нуждаются в последних устройствах Apple. «Люди окклюзия и использование захвата движения, одновременной передней и задней камеры и нескольких отслеживания лица поддерживаются на устройствах с бионическими чипами A12/A12X, нейронным двигателем Apple и камерой TrueDepth».

Apple также анонсировала новое приложение для разработчиков — Reality Composer, которое позволяет разработчикам создавать прототипы и создавать приложения дополненной реальности, не имея опыта работы с 3D. Есть интерфейс перетаскивания и библиотека уже существующих 3D-объектов и анимаций.

Что есть в ARKit 5?

Последняя версия ARKit — это пятая итерация, которая вышла в 2021 году и позволяет разработчикам создавать приложения дополненной реальности, привязанные к определенным местам, в интересах образования и культуры.

Отслеживание лиц получило расширенную поддержку, в то время как система теперь лучше игнорирует людей, когда они входят и выходят из своих сцен — например, если вы используете приложение AR на тротуаре.

Какие устройства iOS могут работать с приложениями ARKit?

Любой iPhone или iPad, поддерживающий iOS 11 или более позднюю версию, может устанавливать приложения ARKit.

Новые устройства лучше справляются с приложениями. Например, у iPad Pro после 2017 года увеличена частота обновления дисплея до 120 Гц, а это значит, что то, что вы видите через камеру, на этих устройствах должно выглядеть гораздо более впечатляюще.

Как вы создаете приложения ARKit?

Если вы заинтересованы в создании приложений ARKit, перейдите на сайт Apple Developer, на котором есть много информации о создании приложений AR. Вы можете скачать оттуда пример кода для игры SwiftShot.

Авторы Мэгги Тиллман и Дэн Грэбэм. Под редакцией Макса Фримена-Миллса.

6 приложений для iPhone, которые помогут преобразить ваш дом с помощью дополненной реальности

Приложения дополненной реальности (AR) позволяют добавлять виртуальные объекты в реальный мир с помощью камеры телефона. Это удобно, когда вы делаете ремонт, так как вы можете увидеть, как мебель может выглядеть в вашем доме, без необходимости физически вносить ее туда. Вы также можете попробовать разные цвета стен, ландшафтный дизайн и даже спланировать реконструкцию одним нажатием кнопки.

Если вы интересуетесь дополненной реальностью и хотите улучшить свой дом, рассмотрите возможность попробовать эти приложения для дизайна интерьера iPhone с дополненной реальностью.

1. Путь

3 изображения

Wayfair — один из самых популярных мебельных магазинов в Интернете. Wayfair изменил то, как многие из нас покупают мебель, и больше нет необходимости идти в мебельный магазин. Теперь вы можете просматривать тысячи предметов мебели, чтобы найти идеальные предметы и доставить их на дом, часто бесплатно. Wayfair продает даже навесы и бытовую технику.

Если вы хотите приобрести новую мебель и делаете покупки на Wayfair, вы можете примерить мебель перед покупкой. С функцией дополненной реальности Wayfair вы можете увидеть, будет ли мебель хорошо смотреться в вашем доме. Это может помочь вам определить, будет ли он соответствовать вашему нынешнему декору. AR помогает вам лучше совершать покупки в Интернете, и Wayfair не является исключением.

Скачать: Wayfair (бесплатно)

2. Место ИКЕА

3 изображения

ИКЕА — самый популярный мебельный магазин в мире. В конце концов, это единственный мебельный магазин, в котором также продаются фрикадельки! Имея в продаже тысячи недорогих предметов мебели, многие люди часами едут в магазин ИКЕА.

ИКЕА также доставляет мебель к вам домой, или вы можете заказать ее для самовывоза в местном магазине ИКЕА.

Прежде чем сделать заказ в Интернете или отправиться в магазин ИКЕА, рассмотрите возможность загрузки IKEA Place. Это приложение предлагает модели популярных предметов мебели в натуральную величину, чтобы вы могли увидеть, будет ли тот или иной предмет хорошо смотреться в вашем доме. Вы также можете вдохновиться новыми дизайнами и обновлениями вашей комнаты.

IKEA Place также предлагает коллекции, поэтому вы можете увидеть, какие предметы подходят друг другу, если вам нужна вся новая мебель.

Скачать: IKEA Place (бесплатно)

3. ДжигСпейс

JigSpace — приложение, предназначенное для создания 3D-презентаций в AR. Хотя JigSpace не предназначен для реконструкции вашего дома, это лучшее приложение дополненной реальности для совместной работы над 3D-проектами.

Если вы планируете реконструировать свой дом, рассмотрите возможность использования JigSpace для создания макетов в AR. Затем вы можете сотрудничать с другими над тем, как вы хотите, чтобы комната выглядела. Если вы нанимаете кого-нибудь для ремонта вашего дома, JigSpace может помочь вам разработать презентацию. Затем вы можете показать строителям или дизайнерам интерьеров то, что вы ищете.

С JigSpace вы можете использовать большую библиотеку, полную 3D-объектов. Эти объекты могут помочь вам спланировать 3D-макет,

Скачать: JigSpace (бесплатно, доступна подписка)

4. iScape

3 изображения

iScape делает то же, что и предыдущие приложения, но с изюминкой. Вместо того, чтобы работать над реконструкцией вашего дома, iScape поможет вам найти новый ландшафтный дизайн для вашего сада. Для многих первое впечатление о доме начинается с сада. Если вы хотите заняться новым ландшафтным дизайном, но не знаете, чего хотите, загрузка iScape может помочь вам в этом.

В iScape есть тысячи элементов на выбор, включая деревья, цветы и камни. Почти с каждым разнообразием растений и цветов в библиотеке iScape вы можете создать двор, которым вы будете наслаждаться долгие годы.

После того, как вы спроектируете новый ландшафт, вы сможете купить материалы. iScape упрощает это, предлагая список того, что содержит ваш дизайн, чтобы вы могли легко найти нужные продукты. Это также отлично подходит для тех, кто новичок в ландшафтном дизайне и не знает, что купить.

Загрузка: iScape (требуется подписка)

5. магический план

3 изображения

magicplan — это приложение, предназначенное для подрядчиков или тех, кто хочет нанять подрядчика. Если ваш дом нуждается в полной реконструкции, это приложение для вас. Приложение magicplan позволяет легко анализировать макет в AR и планировать, как вы хотите его изменить. Вы можете создавать новые планы этажей, новые комнаты и даже добавлять 3D-объекты.

Поскольку у magicplan есть большая база данных доступных предметов, включая шкафы, сантехнику и окна, вы можете создать лучший дизайн. Это приложение идеально подходит для тех, кто вносит большие изменения в свой дом, и позволяет легко увидеть, как будет выглядеть масштабный ремонт.

Без магического плана вы можете разрушить стену и обнаружить, что она выглядит не так хорошо, как вы ожидали. Или вы можете покрасить весь свой дом только для того, чтобы узнать, что вам не нравится этот цвет. Вот почему магический план так популярен.

Когда вы закончите проектирование, вы можете создать отчет для своего подрядчика или строителя. Они могут использовать этот отчет, чтобы начать проект.

Скачать: magicplan (требуется подписка)

6.

Houzz

3 Изображения

Houzz — одно из самых популярных приложений для дизайна интерьера. В приложении Houzz представлено множество вдохновляющих дизайнов, которые помогут вам решить, как вы хотите украсить свой дом. Благодаря проектам лучших дизайнеров интерьеров вы можете вдохновиться на то, чтобы превратить свой дом в нечто поистине великолепное.

Тем не менее, функция дополненной реальности в приложении Houzz — еще одна функция, которая делает это приложение достойным внимания. С функцией дополненной реальности вы можете опробовать разные предметы у себя дома. Вы можете увидеть, как будет выглядеть мебель, растения, шторы и многое другое.

Хотя это похоже на некоторые другие приложения в этом списке, в Houzz есть из чего выбирать. Если вам захочется еще больше идей, у Pinterest также есть отличная функция дополненной реальности для мебели.

В приложении Houzz также есть интересная функция, позволяющая загрузить изображение, и оно найдет предметы на этом изображении.