iOS 18 с ИИ-функциями: Всё, что известно на данный момент

iOS 18, запланированная к выходу в сентябре 2024 года, обещает стать значимым обновлением операционной системы для iPhone и iPad. Apple активно работает над внедрением усовершенствований на основе искусственного интеллекта, которые коснутся различных встроенных приложений и функций.

Обзор OS 18

Ожидается, что Siri получит значительное обновление, улучшая взаимодействие с пользователем и качество распознавания речи. Функция поиска Spotlight будет интегрировать больше информации из разных уголков операционной системы, а приложение Сообщения сможет автоматически формировать предложения и создавать пользовательские эмодзи на основе текста сообщений.

Кроме того, в Apple Music появятся плейлисты, создаваемые автоматически, приложение Напоминания интегрируется с Календарем, а в приложении Фото появится функция ретуширования фотографий с помощью ИИ.

iOS 18 также предложит более гибкие настройки домашнего экрана: иконки приложений можно будет размещать в любом месте сетки, а также выбирать для них пользовательские цвета.

По словам Марка Гурмана из Bloomberg, iOS 18 может стать "прорывным" обновлением с "важными новыми функциями и дизайном". В Apple описывают это обновление как "амбициозное и убедительное", а Гурман считает, что оно может стать "самым значимым" обновлением программного обеспечения в истории iPhone благодаря "множеству новых функций на базе ИИ".

Генеральный директор Apple, Тим Кук, в феврале заявил, что компания вкладывает "огромные усилия и время" в разработку искусственного интеллекта и подтвердил, что подробности работы над ИИ будут обнародованы "позже в этом году".

Вместе с iOS 18 выйдет и iPadOS 18, версия для планшетов Apple, которая будет включать некоторые функции, специфичные для больших экранов устройств.

ИИ-функции iOS 18

В iOS 18 Apple внедрит множество функций на базе искусственного интеллекта (ИИ), стремясь догнать таких лидеров в области ИИ, как Microsoft, Google, Amazon и OpenAI. Компания инвестирует более 1 миллиарда долларов в год в исследования ИИ и оборудование для работы с крупными языковыми моделями, планируя использовать ИИ для улучшения встроенных приложений и функций в iOS 18.

Некоторые из первых ИИ-функций в iOS 18 будут работать на устройстве без необходимости обращения к облачным серверам, хотя Apple также планирует использовать облачные технологии для обработки данных вне устройства. При этом компания уделяет особое внимание безопасности, используя Secure Enclave в процессорах iOS для изоляции данных, обрабатываемых на её облачных серверах.

Основные ИИ-функции, планируемые в iOS 18:

1. Ретуширование фотографий в приложении Фото.
2. Автоматически создаваемые плейлисты в Apple Music.
3. Транскрипция голосовых заметок.
4. Предложенные ответы на электронные письма и сообщения.
5. Автоматически создаваемые эмодзи на основе содержания сообщений пользователя, причём Apple создаст совершенно новые эмодзи для любых ситуаций.
6. Улучшенный поиск в Safari.
7. Умные сводки пропущенных уведомлений и отдельных сообщений, веб-страниц, новостных статей, документов и заметок.

Apple планирует использовать как собственные серверы, так и партнерские решения от OpenAI и, возможно, Google для реализации облачных генеративных ИИ-функций, таких как создание изображений, написание эссе на основе запроса и суммирование данных. Однако в iOS 18 Apple не будет предлагать собственный генеративный ИИ-чатбот, но может использовать технологии Google или OpenAI для этой цели. Apple близка к заключению сделки с OpenAI и ведет переговоры с Google об интеграции ИИ-движка Gemini в iPhone.

Новый чип A18, который планируется для моделей iPhone 16 Pro, будет оснащен улучшенным нейронным процессором с значительно большим количеством ядер, что позволит улучшить производительность ИИ и машинного обучения. Некоторые функции ИИ могут быть ограничены только новейшими моделями iPhone, включая iPhone 15 и iPhone 16.

Полная реализация генеративных ИИ-функций, задуманных Apple, займет некоторое время, поэтому не все возможности будут доступны в iOS 18 сразу и будут постепенно улучшаться с течением времени.

Siri и Поиск

В iOS 18 Siri получит значительные улучшения благодаря искусственному интеллекту, который Apple интегрирует в новую версию операционной системы. Ожидается, что Apple использует крупные языковые модели (LLMs) для полной перестройки Siri, превращая её в "совершенного виртуального ассистента". Эти модели, аналогичные используемым в чат-ботах, таких как ChatGPT, обрабатывают огромное количество данных и используют алгоритмы для генерации контента.

Основные улучшения Siri в iOS 18

• Более разговорная и проактивная Siri: Siri станет более естественной в общении, с улучшенной проактивной интеллигентностью. Ассистент сможет учитывать различные сущности, такие как люди, компании, события календаря, локации и даты, что сделает её ответы более актуальными и контекстуальными.

• Улучшенные голосовые опции: Новые варианты голоса Siri будут звучать более естественно благодаря улучшенной функции преобразования текста в речь.

• Расширение возможностей в приложениях: Siri сможет управлять отдельными функциями внутри приложений, что расширит её возможности. Первоначально эта функция будет ограничена встроенными приложениями Apple. Siri сможет:

  • Открывать конкретные документы
  • Перемещать заметку из одной папки в другую
  • Перемещать файл между папками
  • Удалять электронные письма
  • Суммировать статьи
  • Суммировать недавние уведомления или сообщения
  • Отправлять веб-ссылки по электронной почте
  • Открывать конкретные новостные сайты в Apple News

• Многошаговые задачи: В будущем Siri сможет выполнять многошаговые задачи, например, превращать фото в GIF и отправлять его кому-то.

Apple планирует показать новые возможности Siri на WWDC, но обновлённая версия ассистента появится не в сентябре с выходом iOS 18, а в будущем обновлении iOS 18, запланированном на 2025 год.

Поиск Spotlight

Функция встроенного поиска Spotlight станет более интеллектуальной и получит улучшенные возможности сортировки. iPhone сможет лучше интегрировать информацию из таких приложений, как Контакты и Календарь, что сделает результаты поиска более точными и полезными.

Siri для Apple Watch

Siri на Apple Watch также улучшится. Ожидается версия Siri, оптимизированная для выполнения задач "на ходу", что сделает её ещё более полезной для пользователей, которые часто находятся в движении.

Изменения дизайна в iOS 18

В iOS 18 ожидаются некоторые изменения в дизайне, и, по словам Марка Гурмана из Bloomberg, Apple планирует обновить дизайн операционной системы уже в этом году.

Обновление главного экрана

iOS 18 предложит более настраиваемый главный экран, предоставляя пользователям iPhone больше возможностей для изменения внешнего вида своего устройства. Apple планирует дать пользователям больше контроля над расположением иконок приложений.

Новая организация иконок

Хотя иконки приложений по-прежнему будут привязаны к невидимой сетке для упорядочивания, обновление может добавить возможность создания пустых пространств, рядов и колонок между иконками. Это сделает главный экран более гибким и позволить пользователям лучше организовать свои приложения. Это обновление станет одним из самых значительных изменений главного экрана за последние годы, сравнимым с изменениями экрана блокировки, введенными в iOS 16.

Цвета иконок

Apple также планирует позволить пользователям изменять цвета иконок приложений в iOS 18, поэтому иконки не будут ограничены цветами, предложенными разработчиками. Например, пользователи смогут сделать все социальные иконки синими, а все иконки сообщений зелеными, что позволит более эффективно организовать главный экран и придать ему единую цветовую гамму.

Обновления приложений и функций

В iOS 18 ожидаются значительные обновления для нескольких встроенных приложений и функций. Вот основные изменения, которые ожидаются:

Safari

Safari получит значительное обновление, включающее новый внешний вид и инструменты для улучшения работы с браузером. Функция "Интеллектуальный поиск" будет использовать технологии ИИ на устройстве для определения ключевых тем и фраз на веб-страницах и предоставления их краткого обзора.

Инструмент "Web Eraser" позволит пользователям удалять нежелательные части веб-страниц, например, рекламу. Удалённые части будут сохраняться при повторных посещениях, пока изменения не будут отменены.

Также будет обновлённое меню быстрого доступа из адресной строки, объединяющее инструменты страницы и некоторые функции, которые в настоящее время находятся в Share Sheet.

Apple также планирует дополнительно согласовать версии Safari для iPadOS и macOS.

Сообщения

Приложение "Сообщения" будет предлагать ряд предложений для быстрого ответа на входящие сообщения.

Apple планирует функцию автоматической генерации эмодзи, которые будут создаваться на основе содержания сообщений пользователя с помощью ИИ, а не из существующего каталога эмодзи.

iMessages будут поддерживать текстовые эффекты, позволяющие анимировать отдельные слова в сообщениях. С поддержкой RCS текстовые эффекты могут работать и при обмене сообщениями с пользователями Android.

Почта

Приложение "Почта" также будет предлагать предложения для ответов на входящие письма, аналогично приложению "Сообщения".

Карты Apple

Ожидается несколько новых функций для приложения "Карты" в iOS 18.

С поддержкой пользовательских маршрутов пользователи Apple Maps смогут задавать собственные маршруты, а не ограничиваться предложенными вариантами от Apple. Это позволит выбирать дороги для живописных поездок или маршруты, с которыми пользователь знаком.

Также Apple может перенести функцию топографических карт из watchOS 10 на iPhone в iOS 18. Топографические карты включают в себя тропы, контурные линии, высоты, точки интереса и другие функции, полезные для пеших прогулок и активного отдыха на природе.

Фото

Apple планирует добавить функции редактирования фотографий на основе ИИ в приложение "Фото" в iOS 18, хотя по словам Марка Гурмана из Bloomberg, эти функции не будут такими впечатляющими, как у других платформ для редактирования, таких как Photoshop.

Одной из опций будет возможность ретуширования фотографий с удалением нежелательных объектов с помощью генеративного ИИ.

Заметки

Приложение "Заметки" в iOS 18 получит поддержку записи голосовых заметок прямо в приложении, с возможностью встраивания записей в заметки. Также ожидается поддержка отображения математических обозначений и уравнений.

Приложения "Заметки" и "Голосовые заметки" будут включать функции транскрипции звука, предоставляя автоматические расшифровки аудиозаписей. Также приложение "Заметки" сможет предоставлять ИИ-сводки ключевых моментов в аудиозаписях и заметках.

Календарь и Напоминания

Приложение "Календарь" получит интеграцию с "Напоминаниями", что позволит пользователям просматривать и взаимодействовать с напоминаниями непосредственно в приложении "Календарь".

Приложение "Калькулятор"

Apple планирует представить встроенное приложение "Калькулятор" для iPad с iPadOS 18. Это будет универсальное приложение, работающее на iPhone, iPad и macOS, обеспечивая одинаковый внешний вид и функциональность на всех трёх устройствах.

Приложение "Калькулятор" для iPhone также может получить некоторые улучшения в дизайне, включая интеграцию с приложением "Заметки", улучшенный интерфейс для конвертации единиц и список недавних вычислений.

Freeform

Приложение Freeform будет обновлено с функцией "Сцены", которая позволит пользователям выбирать определённые секции или сцены в своих досках для более быстрого навигации. Сцены будут доступны через новый интерфейс "Сцены", который можно использовать для переключения между сохранёнными сценами.

Музыка Apple

iOS 18 и macOS 15 включат умные переходы между песнями, которые улучшат существующую функцию кроссфейда. С умными переходами пользователи Apple Music смогут настраивать длительность кроссфейда от 1 до 12 секунд.

Также в Apple Music может появиться функция автоматического создания плейлистов, где пользователи смогут вводить настроение, время дня и другие параметры для получения музыкальных предложений.

Keynote, Numbers и Pages

Приложения iWork, такие как Keynote, Numbers и Pages, получат новые функции на базе ИИ. В Keynote появится опция автоматического создания слайдов, а в Pages — функция генерации текста.

Быстрые команды

Приложение "Быстрые команды" будет лучше интегрироваться с Siri, позволяя автоматизировать сложные задачи с меньшими усилиями.

Здоровье

Приложение "Здоровье" может получить новые функции на базе ИИ, но конкретные детали пока неизвестны.

Уведомления

iOS 18 добавит умные сводки пропущенных уведомлений и отдельных сообщений, что позволит быстрее наверстывать упущенное и пропускать уведомления, которые не являются полезными.

Центр управления

Центр управления будет обновлён, с добавлением нового виджета Apple Music и улучшенными элементами управления для продуктов HomeKit.

Настройки

Приложение "Настройки" будет упрощено, с новым пользовательским интерфейсом, имеющим более организованную и чистую структуру. Обновлённое приложение станет проще в навигации, и Apple также планирует улучшить поиск в приложении "Настройки".

Обновления CarPlay

В iOS 18 Apple планирует расширить функциональность CarPlay, добавив несколько новых возможностей, направленных на улучшение доступности.

Основные обновления CarPlay:

• Голосовое управление: Позволяет пользователям управлять опциями и приложениями CarPlay с помощью голосовых команд. Это значительно улучшит удобство использования, особенно во время вождения, когда необходимо минимизировать отвлечение от дороги.
• Цветовые фильтры: Изменяют внешний вид интерфейса CarPlay для людей с дальтонизмом. Эти фильтры помогут лучше различать элементы интерфейса, что сделает использование CarPlay более комфортным для пользователей с нарушением цветового восприятия.
• Распознавание звуков: Позволяет водителям или пассажирам, которые глухие или имеют проблемы со слухом, получать уведомления CarPlay о звуках, таких как автомобильные сигналы и сирены.

Поддержка стандарта Rich Communication Services (RCS)

Apple планирует внедрить поддержку стандарта Rich Communication Services (RCS) в iOS 18 "позднее в 2024 году" в качестве альтернативы SMS/MMS. Это нововведение направлено на улучшение общения между пользователями iPhone и Android. Хотя iMessage продолжит существовать для обмена сообщениями между iPhone, RCS значительно улучшит качество общения с пользователями Android.

Основные преимущества RCS:

• Поддержка более высокого разрешения фотографий и видео: Отправка фото и видео пользователям Android с iPhone больше не будет приводить к ошибкам и потере качества.
• Поддержка больших размеров файлов и файловый обмен: Пользователи смогут отправлять и получать большие файлы, что улучшит обмен мультимедийными данными.
• Аудиосообщения: Возможность отправки аудиосообщений, что сделает общение более удобным и разнообразным.
• Кроссплатформенные реакции эмодзи: Пользователи смогут реагировать на сообщения эмодзи, независимо от платформы.
• Индикаторы набора текста в реальном времени: Пользователи будут видеть, когда собеседник набирает сообщение.
• Уведомления о прочтении: Отправители смогут видеть, когда их сообщения были прочитаны получателем.
• Отправка сообщений через сотовую связь или Wi-Fi: Сообщения RCS можно отправлять через Wi-Fi без дополнительных затрат, в отличие от SMS, которые отправляются только через сотовую сеть.
• Улучшенные групповые чаты: Групповые чаты станут более функциональными и стабильными.

Apple пока не предоставила точных сроков внедрения RCS, но "позднее в 2024 году" указывает на то, что поддержка появится после запуска iOS 18.

«Универсальный доступ»

В мае Apple анонсировала несколько новых функций доступности, которые появятся в iOS 18, предоставив краткий обзор ожидаемых обновлений.

Снижение укачивания

Появится новая опция Vehicle Motion Cues, предназначенная для предотвращения укачивания при использовании iPhone или iPad в движущемся транспортном средстве. Укачивание часто вызывается конфликтом между тем, что человек видит, и тем, что он чувствует, что особенно актуально в движущемся автомобиле.

Vehicle Motion Cues используют визуальные элементы на экране, которые указывают на изменения движения в реальном времени. Анимированные точки по краям экрана отображают изменения движения транспортного средства, уменьшая сенсорный конфликт без вмешательства в основной контент. Эта опция может быть автоматически включена на iPhone и может быть включена и выключена через Центр управления.

Отслеживание взгляда

Функция Eye Tracking позволяет пользователям управлять интерфейсом iPhone или iPad только с помощью глаз. Эта функция использует ИИ и фронтальную камеру для определения того, куда смотрит пользователь. С помощью Eye Tracking можно активировать кнопки, свайпы и другие жесты.

Музыкальная тактильность

При включении функции Music Haptics, Taptic Engine iPhone будет воспроизводить "токи, текстуры и утонченные вибрации", соответствующие аудио музыки. Эта функция работает с миллионами песен в каталоге Apple Music, и разработчики могут внедрить её в свои приложения.

Голосовые "быстрые команды"

С помощью Vocal Shortcuts пользователи iPhone и iPad могут назначать "пользовательские фразы", чтобы Siri могла запускать ярлыки и понимать сложные задачи.

Другие функции

• Новые голоса для VoiceOver, гибкий Voice Rotor и настройка громкости.
• Голосовое управление теперь поддерживает пользовательские словари и сложные слова.
• Новый режим чтения для Лупы и опция запуска режима обнаружения с помощью кнопки действия.
• Обновления для доступа к вводу через экран Брайля.
• Hover Typing показывает больший текст при вводе в текстовое поле.
• Live Speech включает категории и совместимость с Live Captions.

Режим слухового аппарата для AirPods Pro 2

С запуском iOS 18 ожидается, что AirPods Pro получат новый режим "слухового аппарата". Хотя изначально предполагалось, что эта функция будет доступна в следующем поколении AirPods Pro, теперь сообщается, что Apple планирует внедрить её через обновление программного обеспечения. Apple уже предлагает функцию Conversation Boost для увеличения громкости и ясности речи людей, находящихся прямо перед пользователем, поэтому пока неясно, чем режим слухового аппарата будет отличаться от существующей функции.

Возможности нового режима:

• Conversation Boost: Увеличение громкости и чёткости речи людей, находящихся прямо перед пользователем, уже доступно в текущих моделях.
• Новый режим слухового аппарата: Пока неизвестно, какие именно улучшения принесёт новый режим, но можно ожидать, что он будет направлен на улучшение восприятия звуков окружающей среды.

Правовые ограничения:

Apple не может продавать AirPods Pro как устройства, предназначенные для помощи людям с нарушением слуха, но Управление по санитарному надзору за качеством пищевых продуктов и медикаментов США (FDA) одобрило продажу слуховых аппаратов без рецепта, предназначенных для клиентов без серьёзных нарушений слуха. Это позволяет Apple позиционировать AirPods Pro как устройство, которое может помочь улучшить качество звука для пользователей, не имеющих официальных диагнозов потери слуха.

Совместимость и поддержка iOS 18

Ожидается, что iOS 18 будет совместима со всеми iPhone, которые поддерживают iOS 17, включая iPhone XR, iPhone XS, iPhone SE 2-го поколения и новее.

Совместимые модели iPhone:

• Все модели iPhone 15
• Все модели iPhone 14
• Все модели iPhone 13
• Все модели iPhone 12
• Все модели iPhone 11
• iPhone XS и XS Max
• iPhone XR
• iPhone SE (2-го и 3-го поколений)

Совместимые модели iPad:

iPadOS 18, по слухам, прекратит поддержку для iPad Pro первого поколения с диагональю 10.5 дюймов и iPad Pro второго поколения с диагональю 12.9 дюймов, которые использовали чип A10X Fusion. Обновление также, вероятно, не будет поддерживаться на iPad шестого и седьмого поколений.

Ожидается, что обновление будет совместимо со следующими моделями iPad:

• iPad Pro: 2018 года и новее
• iPad Air: 2019 года и новее
• iPad mini: 2019 года и новее
• iPad: 2020 года и новее

Требования для возможностей ИИ

Хотя iOS 18 будет совместима со многими старыми моделями iPhone, некоторые возможности ИИ, работающие на устройстве, вероятно, будут требовать iPhone 15 Pro или новее. Для iPad требуется чип M1 или новее для реализации возможностей ИИ на устройстве.

Эти требования обусловлены тем, что новейшие функции ИИ требуют значительной вычислительной мощности, которая доступна только в более современных процессорах. Таким образом, владельцы новейших устройств смогут воспользоваться всеми преимуществами iOS 18.

Дата выхода iOS 18

iOS 18 будет представлена на Всемирной конференции разработчиков Apple (WWDC) 10 июня. После WWDC iOS 18 станет доступна для разработчиков с целью тестирования, а публичная бета-версия, скорее всего, выйдет в июле.

После периода бета-тестирования iOS 18 будет официально выпущена в сентябре 2024 года вместе с новыми моделями iPhone.