Искусственному интеллекту – быть: какие обновления представила Apple на WWDC 2024

Значительную часть летней конференции Apple уделила внедрению искусственного интеллекта в свои устройства и традиционно рассказала об обновлениях операционных систем своих устройств. Технический директор студии разработки мобильных приложений CleverPumpkin Александр Кияйкин внимательно посмотрел презентацию и поделился главными новостями, которые нельзя пропустить.

Искусственный интеллект

Технологии ИИ, наконец, добрались и до техники Apple. Компания запустит собственную систему искусственного интеллекта, улучшит Siri и будет сотрудничать с OpenAl.

Искусственный интеллект Apple появится на iPhone, iPad и Mac

Apple Intelligence — это новая система искусственного интеллекта компании. Владельцы свежего iPhone 15 тихо грустят в сторонке: функции AI будут доступны только на iPhone 15 Pro и 15 Pro Max, а также на iPad или Mac с чипами M1 и для более поздних версий. Новые опции будут работать только тогда, когда на устройстве установлен английский язык в качестве основного.

Siri усилили с помощью ИИ

Обновленный голосовой помощник будет более глубоко интегрирован в iPhone. Например, пользователи смогут попросить Siri найти информацию в конкретном электронном письме или отыскать среди скриншотов фотографию водительских прав.

Apple использует LLM (large language model, большую языковую модель), которая поможет Siri лучше понимать запросы пользователей.

Кроме того, Siri получит новый дизайн и логотип. Во время использования на устройстве будет отображаться светящаяся разноцветная рамка на экране.

ChatGPT подружится с Siri

Apple объявила о сотрудничестве с OpenAI для внедрения ChatGPT в Siri. Чат-бот будет доступен бесплатно в iOS 18 и macOS Sequoia без учётной записи и появится в этом году. Подписчики платной версии ChatGPT смогут связать свои учётные записи для доступа к премиум-функциям OpenAI.

Генерация эмодзи и работа с фотографиями

Компания продемонстрировала новую функцию Genmoji, позволяющую создавать собственные эмодзи на основе текстового запроса, а также новый генератор изображений с помощью AI под названием Image Playground.

Apple также внедряет искусственный интеллект в приложение «Фото». С помощью него пользователи смогут убирать лишние объекты на изображениях.

iOS

Основные изменения в iOS 18 коснутся кастомизации. Главный экран, центр управления, сообщения, эмодзи — кастомизируем всё!

Изменения на главном экране и в центре управления

Дождались! Значки приложений теперь можно будет размещать не только сверху, но и в любом месте экрана.

При использовании тёмной темы значки приложений и обои будут автоматически затемняться, чтобы снизить нагрузку на глаза. Кроме того, иконки можно будет подстроить под единую стилистику.

В центре управления теперь можно будет размещать кнопки сторонних приложений,настраивать в том числе действия на экране блокировки и экшн-кнопке. Можно поставить на экран блокировки иконку вызова любимого мессенджера или убрать камеру.

Кроме того, Apple добавила возможность блокировать приложения по Face ID, Touch ID или код-паролю. Для секретов особой важности добавили Hide an App с возможностью полностью спрятать выбранные приложения в закрытой папке.

iMessage

В приложении появится функция Tapback в виде реакций на сообщения (по подобию реакций в Telegram), а также будет добавлено форматирование текста для выделения жирным шрифтом, подчеркиванием, зачеркиванием и курсивом.

iMessage будет работать и без интернета. С помощью технологий спутниковой связи пользователи смогут отправлять и получать сообщения, смайлы и Tapbacks через iMessage и SMS. Эта функция будет доступна на iPhone 14 и более новых версиях смартфонов, обновлённых до iOS 18.

Кроме того, сообщения получили поддержку RCS! Новый стандарт, который уже используется в большинстве телефонов Android, появится и в iPhone в этом году.

Мы считаем, что универсальный профиль RCS обеспечит лучшую совместимость по сравнению с SMS или MMS. Он будет работать в iMessage, который по-прежнему будет лучшим и наиболее безопасным средством обмена сообщениями для пользователей Apple, — сообщила представитель Apple Жаклин Рой.

iPhone, использующий RCS, может обеспечить поддержку шифрования, уведомлений о прочтении, индикаторов набора текста, изображений и видео в высоком разрешении и многого другого при отправке сообщений между iPhone и устройствами Android.

Редизайн приложения «‎Фото»

Отдельно презентовали самый большой редизайн приложения «Фото». Приятный внешний вид, группировка фотографий по датам, категориям, людям и животным. На презентации показали отдельный экран для просмотра всех фотографий и видео за день в виде коллажа. Приложение собирает снимки в коллекции и позволяет быстро исключать из просмотра, например, скриншоты.

Кроме того, теперь приложение можно кастомизировать под себя и создавать собственные коллекции. В интерфейс добавили фильтр для поиска по годам и месяцам, а снимки можно сортировать и скрывать.

Обновления «‎Почты»‎

В приложении появятся новые автоматические и настраиваемые категории: Primary, Transactions, Updates и Promotions.

Сюда же проберётся искусственный интеллект и сможет собирать информацию из писем. Например, подсказать, во сколько приземлится самолёт, на котором летит ваша мама.

Статистика в приложении Journal

Дорогой дневник… В приложении для личных записей добавили опцию Insights, которая будет предоставлять статистику на основе того, что вы записываете.

Игровой режим

Теперь и на iPhone появится игровой режим, который будет сводить к минимуму фоновую активность для оптимизации игрового процесса. Ранее Game Mode был доступен только на Mac.

iPadOS

Фантастическое обновление операционки для iPad, которое уже разлетелось на мемы, — добавление приложения «‎Калькулятор»‎ спустя 10 лет после его выпуска. Дождались!

Приложение «Калькулятор» с поддержкой Apple Pencil

iPad, наконец, получил приложение «Калькулятор». Он будет представлен с новой функцией Math Notes, которая позволит использовать Apple Pencil для написания математических выражений на iPad, а приложение решит их за вас. Кроме того, приложение сможет строить графики и решать сложные математические примеры.

Улучшили работу с Apple Pencil

В новой ОС появится плавающий Tab Bar. Он упрощает навигацию по приложению, держа все нужные функции всегда под рукой. Теперь пользователи смогут кастомизировать Tab Bar: добавлять туда новые элементы или удалять старые. Также его можно переделать в боковой Side Bar с красивой анимацией. Важный момент: эти все элементы будут доступны и разработчикам через новые API.

Кроме того, в iPadOS 18 перекочевали функции кастомизации значков приложений, обновленный Control Center и переработанное приложение Photos. А ещё Apple переделала дизайн стандартных приложений: Pages, Keynote, Numbers и т.д.

SharePlay + Freeform

Девайсом теперь можно будет управлять прямо через SharePlay. Изображения, нарисованные на вашем планшете, будут отображаться на втором устройстве, соединенном через SharePlay. Более того, управление своим планшетом можно будет передать другому человеку, используя удалённый доступ.

Notes

Улучшили заметки новой функцией — Smart Script. Создавайте письменные заметки, а новая опция сделает ваш почерк более понятным. Кроме того, печатный текст можно будет превратить в записи, сделанные от руки.

macOS

Несколько новых функций появилось и в операционной системе для десктопов. Теперь прямо с ноутбука можно будет управлять вашим iPhone и автоматически находить важную информацию на странице браузера с помощью AI.

Управление iPhone с macOS

Главная фишка обновления — iPhone Mirroring. Открывается iPhone Mirroring в отдельном окне на macOS. Прямо с компьютера можно не только управлять приложениями на iPhone, но и печатать текст, а также использовать реальный iPhone в качестве подставки со статичным текстом.

Вы сможете просматривать уведомления телефона на Mac и отвечать на них, а также перетаскивать текст и изображения между двумя устройствами. При использовании зеркалирования ваш iPhone останется заблокированным и будет находиться в режиме ожидания.

Safari

В браузере появились крутые фишки на базе искусственного интеллекта. Например, Safari может автоматически скомпилировать статью, убирая все лишние и отвлекающие элементы, оставляя исключительно полезную выжимку.

Для просмотра видео в Safari встроили Viewer. Функция определяет видео на странице и подгоняет его под собственный плеер Apple. Есть даже возможность открыть видео в режиме «картинка-в-картинке».

Новые игры

Разработчики выпускают на Mac множество новых игр. Ubisoft выпустит Prince of Persia: The Lost Crown и Assassin’s Creed Shadows, а Capcom предложит еще больше игр из популярной серии RESIDENT EVIL, включая RESIDENT EVIL 7 biohazard и RESIDENT EVIL 2.

Следующее крупное обновление World of Warcraft: The War Within выйдет позже в этом году, а также на подходе Frostpunk 2, Palworld, Sniper Elite 4 и RoboCop: Rogue City. Кроме того, скоро выйдут Control Ultimate Edition и Wuthering Waves, в которых используются преимущества новейшего семейства чипов M3.

watchOS

В новой версии обновления для смарт-часов появится множество новых функций. Большая часть из них коснётся приложения «‎Здоровье»‎, а также добавятся автоматические виджеты.

Здоровье и активность

Каждая версия watchOS, как и всегда, содержит новые функции для отслеживания показателей здоровья. В этом году спортсмены получат новую опцию — расчёт тренировочной нагрузки, которая учитывает интенсивность и продолжительность тренировок за последние 28 дней.

Как и в обновлениях iOS 18, фитнес-приложение также получает более настраиваемую вкладку «Сводка». Вы сможете расположить виджеты, отображающие наиболее интересующие вас показатели — для бега, пеших прогулок, плавания и медитаций.

Кроме того, теперь кольца активности можно будет поставить на паузу во время перерыва от тренировок — во время отпуска или больничного. Также можно будет настроить цели кольца активности в зависимости от дня недели.

GPS-маршруты для новых видов спорта

Приложение добавит GPS-маршруты для большего количества типов тренировок, включая футбол, американский футбол, австралийский футбол, хоккей на открытом воздухе, лакросс, различные виды катания на лыжах, сноуборде, гольф и греблю на открытом воздухе. Вы сможете создавать собственные тренировки в бассейне, а также просматривать пошаговую навигацию прямо с Apple Watch в приложении «Карты», даже если у вас нет с собой телефона.

Приложение Vitals

Появится новое приложение Vitals, которое даст вам представление о показателях здоровья в ночное время: частота сердечных сокращений, частота дыхания, температура запястья, продолжительность сна и уровень кислорода в крови (по крайней мере, на Apple Watch, которые всё ещё поддерживают функцию отслеживания этого показателя). Приложение уведомляет пользователей при изменении состояния здоровья и предоставляет дополнительный контекст относительно того, что могло стать этому причиной (например, болезнь, чрезмерное употребление алкоголя на мероприятии и т.д.).

Отслеживание беременности

Беременные смогут отслеживать развитие плода по неделям, а также записывать изменения показателей здоровья во время беременности. Кроме того, в приложении «‎Здоровье»‎ появятся ежемесячные оценки психического здоровья и уведомления об устойчивости ходьбы в третьем триместре, если будет обнаружен повышенный риск падения.

WatchOS 11 получила поддержку Live Activities

Если ваш билет на концерт хранится в приложении Wallet, вы можете увидеть всплывающую информацию о мероприятии во всплывающем виджете. Smart Stack также будет более разумно перемешивать соответствующие виджеты в зависимости от вашего местоположения и других факторов.

Новое приложение «Перевод» автоматически появится, если вы отправитесь в регион, где родной язык отличается от языка на ваших Apple Watch. Если в вашем районе надвигается гроза, вы увидите виджет погоды. Помимо этих, появится ещё несколько виджетов, в том числе из Shazam, Photos и Distance.

Опция двойного касания, представленная в прошлом году, также получит несколько новых дополнений. В основном вы сможете использовать его для прокрутки в приложениях «Сообщения», «Календарь» или «Погода».

Разработчики получат доступ к API двойного касания и улучшенному API Live Activities и Smart Stack.

Новые циферблаты

Удивительно, но в этом году было не так много новых циферблатов. Вместо этого Apple сделала акцент на новом обновленном циферблате с собственными фотографиями пользователя. Будет больше возможностей настройки размера времени, макета и шрифтов.

visionOS

Apple анонсировала visionOS 2 — первое крупное обновление операционной системы. В новой версии будет реализован сверхширокий виртуальный дисплей Mac, появятся более интуитивные жесты и заработает поддержка режима путешествия в поездах и на самолетах.

Новые жесты и сохранение данных о близких

Пользователи получат возможность изменять порядок приложений на главном экране, включая приложения для iPad и iPhone. Кроме того, появятся новые жесты для перехода на домашний экран, просмотра центра управления и проверки заряда батареи или времени.

А если у вас есть семья или друзья, с которыми вы хотите поделиться гарнитурой, Apple заявляет, что сохранит данные о гостевых пользователях в течение 30 дней.

Spatial Personas и пространственные изображения

В новом обновлении пользователи смогут конвертировать любое изображение в приложении «Фото» в пространственное.

В приложение visionOS Photos будет добавлена функция SharePlay: теперь вы сможете поделиться своим изображением с помощью Spatial Personas и совместно редактировать документы и фотографии в режиме реального времени.

Для разработчиков добавили новые API для более простой разработки приложений на visionOS: Volumetric APIs, Tabletop Kit и Enterprise APIs.

AirPods Pro

Apple представляет Siri Interactions, которая включает в себя новые элементы управления жестами для AirPods, позволяющие по-новому управлять Siri. Теперь пользователи смогут отвечать Siri «‎да»‎ или «‎нет»‎ с помощью покачивания головой.

Ещё AirPods Pro получают новую технологию изоляции голоса, которая использует чип H2 и технологии машинного обучения для изоляции и улучшения качества голоса, удаляя при этом фоновый шум, чтобы слушатель мог вас четко слышать.

Также появился новый персонализированный пространственный звук (Personalized Spatial Audio API) с динамическим отслеживанием головы — теперь он поддерживается и в играх. Разработчики могут воспользоваться преимуществами этого звука в своих игровых приложениях. Ранее он был доступен только для стриминговых сервисов видео и музыки. Одной из первых игр с таким обновлением стала Need for Speed Mobile для iOS.

Обновления Apple TV и приложение для хранения паролей

Узнай имя актёра на экране

Apple TV Plus в этом году исполняется пять лет. В юбилей приложение получит несколько новых функций. Узнать имя актёра можно будет с помощью проведения пальцем вниз по пульту (по подобию такой же опции в «‎Кинопоиске»‎ или Amazon). Также можно будет узнать, какая песня играет в данный момент, и добавить ее в свой плейлист Apple Music.

Apple TV Plus будет автоматически показывать субтитры при отключении звука и поддерживать соотношение сторон 21:9 для проекторов.

Новое приложение для хранения паролей

Apple представила новое приложение «Пароли», которое позволит отслеживать данные для входа в систему на разных устройствах. Оно позволит создавать и хранить пароли, аналогичные другим менеджерам паролей (как LastPass и 1Password).

Автономное приложение Apple Passwords синхронизируется на iOS, iPad, Mac и даже Windows.

Новинки для разработчиков

Xcode 16 и Swift Assist

Обновлённая среда для разработки задаёт новые стандарты для производительности разработчиков. В Xcode 16 добавили Swift Assist — помощника во всех задачах разработчиков. Помощник знает все новые функции Swift и обновления системных SDK. Он поможет эффективнее экспериментировать с новыми фреймворками и идеями. Работает в облаке, но Apple заявляет, что код не будет храниться на их серверах.

Кроме того, добавили предиктивный ввод для написания кода. Теперь Xcode сможет сам генерить большие блоки кода, а не только предлагать подходящие названия разработчику. Работает прямо на девайсе.

Swift Testing

Apple представили новый фреймворк для более простого написания тестов — Swift Testing. Фреймворк включает в себя гибкую систему тегов, которая помогает организовать свои тесты и планы тестирования. Причем этот фреймворк кроссплатформенный, поэтому его можно использовать не только при написании мобильных приложений, но и при использовании Swift для серверной разработки!

________

Среди выдающихся новинок на конференции отметим внедрение искусственного интеллекта в работу девайсов и инструментов для разработчиков, а также коллаборацию с OpenAI (насколько она будет успешной — покажет время).

Посчитали, сколько раз за время конференции упомянули слово «‎кастомизация»‎? Она коснулась и экрана «Домой»‎, и приложения «‎Фото»‎, и центра управления, и, конечно, стала одной из больших частей конференции.

Кастомизируемся и следим за обновлениями!