Прошла открывающая презентация конференции разработчиков Apple, где показали то, чем будут пользоваться ближайший год. Что интересного нас ждёт в iOS 18, есть ли Калькулятор в iPadOS 18, чего ждать в watchOS 11, чем удивит visionOS 2, как подружить iPhone с macOS Sequoia и какие движения в Умном доме от Apple. А также о долгожданном ИИ – Apple Intelligence наконец-то вышел, рассказываем и показываем, как это может работать. Заходите читать, если что-то пропустили!

Начало презентации Apple WWDC24 вышло как у настоящего экшена, началось со сценки где Крейг Федериги в самолёте подготавливал свою команду по спасению операционных систем к воздушной высадке. Этот забавный, но очень оригинальный ролик пронизан отсылками и пасхалками: у руля Филл Шиллер, давний «пилот» компании по презентациям, управлявший музыкой со старинного iPod, а в экипаже у Крейга все ответственные за каждую систему: iOS, iPadOS, tvOS, watchOS, visionOS и macOS. Каждый из них выпрыгивал из самолёта со своим парашютом с названием системы, попутно отключая «авиарежим» на iPhone – что значит вышли в сеть, и затем приземлялись на территорию Park, что явная отсылка к «обновлениям по воздуху». Тим Кук, стоя на крыше, приветствовал эти обновления и как обычно пожелал всем доброго утра.

Начал он с новостей об tv+ – сервисе достаточно успешном, настолько, что уже который год он обгоняет другие международные стриминговые сервисы по качеству контента, это согласно исследованию агентства AACC. Тим похвалился фильмами номинантами и даже победителями премий. А затем представил несколько новинок и следующие сезоны: Тёмная материя, Презумпция невиновности, Покажи мне Луну, Укрытие, Разделение, Медленные лошади и другое.

visionOS 2 – смотри в оба

А после короткого вступления о новинках киносервиса, Кук представил программу вечера, в которой первым значилась система для Vision Pro. Сам пространственный компьютер был представлен ровно год назад, на WWDC23, а в феврале этого года запустились продажи в США. Приложений уже много, будет ещё больше, надеемся. Теперь же стало известно, что с 14 июня стартует предзаказ на устройство в новых странах: Китай, Япония, Сингапур, Австралия, Канада, Франция, Германия и Великобритания. Слухи оказались правдой – запуск пришлось перенести аж на конец июня-начало июля. Уже стали известны цены на Vision Pro в новых странах:
С 28 июня:
?? Китай – от RMB 29999
?? Япония – от ¥599800
?? Сингапур – от S5299

С 12 июля: ?? Канада – от CA4999
?? Великобритания – от £3499
???? Германия и Франция – от €3999
?? Австралия – от A$5999

Наконец-то старт продаж Apple Vision Pro в других странах!
Наконец-то старт продаж Apple Vision Pro в других странах!

Новая visionOS 2 – это свежий взгляд на возможности устройства, но не сильно больше, чем в текущей visionOS 1.2, если так посмотреть. Теперь приложение Фото поддерживает новые пространственные фото, снятые как на саму Vision Pro, как на iPhone, так и на специальную камеру от Canon.

Такие фото можно смотреть и в режиме SharePlay с друзьями
Такие фото можно смотреть и в режиме SharePlay с друзьями
Для поддержки этих пространственных фото и видео разработчикам представлены новые API. А ещё новый API TabletopKit, позволяющий использовать плоские поверхности для приложений и игр.
Для поддержки этих пространственных фото и видео разработчикам представлены новые API. А ещё новый API TabletopKit, позволяющий использовать плоские поверхности для приложений и игр.

Пространственные видео теперь можно обработать в FinalCut Pro, а также в скором загрузить в Vimeo. Да и вообще обещают больше демонстрационных иммерсивных видео внутри системы.

Ещё улучшен режим путешествий и теперь поддерживает не только самолёты, но и поезда
Ещё улучшен режим путешествий и теперь поддерживает не только самолёты, но и поезда

Добавили и новые жесты для работы через Virtual Display через Mac. Да и сам дисплей Mac можно теперь увеличить на область до 180° вокруг вас внутри системы visionOS. Клавиатура Magic Keyboard внутри системы теперь может постоянно отображаться сквозь пространство, без наложения, а ещё наконец-то появилась поддержка Magic Mouse 2.

Можно расширить экран Mac на почти 180°
Можно расширить экран Mac на почти 180°

У Apple есть и новые коллаборации с компанией BlackMagicDesign там заявлена поддержка софта для Vision Pro и внутри visionOS.

Иконки можно двигать, наконец-то!
Иконки можно двигать, наконец-то!

И по мелочи: иконки теперь можно двигать и размещать как угодно, появились новые настройки гостевого режима, а AirPlay теперь работает и в обратную сторону.

Новые жесты в visionOS 2
Новые жесты в visionOS 2

В целом, хорошо, что хоть какие-то новшества, но как будто ожидалось ещё больше, да и мультифункциональность устройства не выросла, а ИИ-функций, забегая вперёд, тут нет вообще. Пока что visionOS 2 больше просто очередное обновление, чем что-то совершенно новое.

Коротко о новшествах visionOS 2
Коротко о новшествах visionOS 2

iOS 18 – где-то икнул зелёный робот

Следом вернулись к Крейгу Федериги, который начал свой рассказ про свежую iOS 18. Система и ранее была достаточно способной и удобной в персонализации. Но теперь он обещал нечто ещё большее и новое. Например, полная свобода на экране Домой: иконки теперь можно размещать как угодно! Даже через пробелы вокруг, даже одну иконку в центре экрана, даже по диагонали, да как угодно, короче говоря. А ещё иконки можно окрасить в чёрный цвет под тёмную тему, да и вообще окрасить в один акцентный цвет на ваше усмотрение. Ладно иконки, можно даже виджеты заодно перекрасить и даже на экране Домой моментально изменить их размер. Интересно посмотреть на лица брендов, у которых гайдлайны скрипят от такой возможности.

Что-то нам это напоминает, да?
Что-то нам это напоминает, да?
Кстати, приложения можно и совсем скрыть с экрана, они будут отображаться только в специальной папке в запароленной Библиотеке приложений и никак иначе не найти!
Кстати, приложения можно и совсем скрыть с экрана, они будут отображаться только в специальной папке в запароленной Библиотеке приложений и никак иначе не найти!

Конфиденциальность это важно везде, очнулись в Apple и наконец-то добавили возможность закрыть доступ к приложениям и разделам внутри системы если не срабатывает хоть раз правильно Face ID/Touch ID. 

Новое приложение Пароли – хранит все пароли отовсюду, бывший раздел Настроек стал приложением.
Новое приложение Пароли – хранит все пароли отовсюду, бывший раздел Настроек стал приложением.

Кроме того, у паролей появилось отдельное приложение Пароли, где собраны все имеющиеся пароли, связки ключей, коды безопасности и многое другое. Грубо говоря, раздел паролей вынесли из Настроек. Сами Настройки тоже изменили, теперь они выглядят проще и логичнее для тех, кто там постоянно путался. Не обошлось и без новых возможностей, например, ограничение максимального значения при зарядке. 

Далее нам показали совершенно новый Пункт управления. Он теперь более скруглённый. Внутри доступно несколько страниц для пролистывания, включая управление расширенное Музыкой и Умным домом. Весь Пункт управления теперь можно редактировать вдоль и поперёк, от изменения размера кнопок до их нахождения там. Разработана целая галерея контролсов – там все возможные кнопки и функции, которые можно добавить в любом виде и размере в Пункт управления. Для разработчиков открыто Controls API.

Новый Пункт управления и галерея для его настройки
Новый Пункт управления и галерея для его настройки

Экран блокировки уже давно имеет те самые две кнопки: фонарик и камера и их теперь можно заменить на любую другую функцию, а если не нужны, то можно убрать совсем!

А так можно было, что ли? 
А так можно было, что ли? 

У кнопки Action Button на iPhone 15 Pro появились новые возможности: быстрые заметки, таймер, пульт tv и калькулятор.

Приложение калькулятора на iOS сильно изменилось: теперь есть режимы как цифрового счёта, так и ручного. Есть и функции конвертации, научного калькулятора и боковая история вычислений.

Новое приложение Калькулятор на iOS 18
Новое приложение Калькулятор на iOS 18

Новый iMessage похорошел при Telegram – реакции на сообщение в виде эмодзи из гигантского списка двойным тапом, а на сообщение можно вернуться простым кликом по нему, есть возможностью отложить отправку сообщения, изменить шрифты и даже эффекты шрифтов. Но теперь ещё можно отследить местоположение через спутник (работает не везде). Наконец-то и поддержка RCS – сообщения с Android будут отображаться не как плебейские, а как и у всех яблочников. 

Telegram, ты? В iMessage теперь и такое есть!
Telegram, ты? В iMessage теперь и такое есть!

Приложение Почта преобразилось: новый интерфейс, рубрикация писем от каждой из компаний в свою папку, суммаризация писем и вывод самых важных на первый план, тут поможет ИИ. 

Новое приложение Почта – письма от каждой компании на своём месте.
Новое приложение Почта – письма от каждой компании на своём месте.

Напоминания наконец-то интегрированы в Календарь, работает и обратная связка, удобно добавить в одном приложении, а управлять всем вместе в Календаре. 

У системы теперь есть меню подключения к аксессуарам и устройствам, схожее с pop-up меню как у наушников AirPods/Beats. 
У системы теперь есть меню подключения к аксессуарам и устройствам, схожее с pop-up меню как у наушников AirPods/Beats. 

Билеты в Wallet теперь в новом интерфейсе и с маршрутами как пройти к вашему месту. Также в кошельке обновили анимации отправки средств через счёт Pay Cash, а ещё обновили окно подтверждения покупки через Pay. 

Новый Wallet в iOS 18 умеет отображать анимацию отправки денег Pay Cash и показывать навигацию к месту по билету.
Новый Wallet в iOS 18 умеет отображать анимацию отправки денег Pay Cash и показывать навигацию к месту по билету.

Приложение Карты получило новые топографические карты с маршрутами, а также карту площадки мероприятия, куда у вас куплен билет. 

Приложение Дневник получило новые виджеты, а также поддержку свежих функций режима осознанности.

Таким образом, теперь записать своё состояние в тот или иной момент можно и в Дневник.
Таким образом, теперь записать своё состояние в тот или иной момент можно и в Дневник.

Игровой режим теперь поддерживается и на iPhone, а значит параллельно с контроллером можно подключить и наушники, а все остальные процессы устройства будут заглушены и замедлены во время игр.

Самое большое обновление и редизайн получило приложение Фото: Новая панель отображения фото и видео, фильтрация по типам изображений, коллекции по времени, людям и событиям. Возможность при помощи ИИ создать мини-фильм о событии в пару кликов и даже выбрать свою музыку для этого фильма. Так как раз обновили галерею Воспоминаний, теперь её можно просматривать в отдельном меню и редактировать многократно. 

Приложение Фото получило масштабный редизайн
Приложение Фото получило масштабный редизайн

В целом освежили систему, но ещё больше новшеств явится благодаря другой фишке, о которой ниже. Хотя и без того много всего, что уже не раз видели в других местах, что немного намекает на то, что подсмотрели в других приложениях и системах. Хорошо ли это? Сомнительно, но окэй. Поддержку iOS 18 получили все те же iPhone, что поддерживают iOS 17. Так что старичок iPhone XR будет получать обновления ещё один год!

Все новшества iOS 18 в одном месте
Все новшества iOS 18 в одном месте

AirPods, tv и HomePod – навстречу умному дому

Компания Apple ранее на презентациях WWDC частенько молчала о новшествах в этой категории, лишь с прошлого года она поднялась на свет и тут есть что менять и улучшать. Начали с наушников AirPods Pro 2 – они получат осенью новую прошивку, в которой будет парочка приятных новшеств. Новые фишки со звукоизоляцией, чтобы не пропустить важного и не отвлекаться на ложный шум. Доработали поддержку Siri, да и вообще AirPods научились распознавать жесты головой, включая кивок и покачивание из стороны в сторону. Наушники также умеют теперь поддерживать несколько пар при просмотре контента через tv. Для игрового режима они теперь поддерживают Personalized Spatial Audio API.

Теперь даже в такой ситуации AirPods могут вас изолировать от постороннего шума
Теперь даже в такой ситуации AirPods могут вас изолировать от постороннего шума

Сама телеприставка получила новые заставки, теперь ещё и с часами, Снупи и другими героями tv+, а картинку можно вывести на экран с соотношением сторон 21:9, всё для домашних кинотеатров!

Циферблаты теперь и на телевизоре
Циферблаты теперь и на телевизоре

При просмотре контента через tv+ на всех устройствах, включая tv 4K есть знакомая многим по сервису Okko функция под названием InSight, когда в специальных карточках по ходу фильма или серии рассказываются интересные и важные дополнения по сюжету.

InSight в tvOS, но работает только в проектах Apple Originals
InSight в tvOS, но работает только в проектах Apple Originals

Субтитры теперь умеют работать в беззвучном формате и распознают интонации без активного звука. Siri теперь умеет работать без выхода в интернет, но функциями всё же это ограничено, с интернетом будет больше возможностей. Обновили и дизайн приложения Apple Fitness+, а ещё добавлены живые субтитры для разговора по FaceTime в Универсальном доступе. Добавлены новые настройки Гостевого режима и многое другое. 

Коротко о новых фишках Дома и AirPods
Коротко о новых фишках Дома и AirPods

HomePod получил некоторые функции: SharePlay, поддержку управления роботами-пылесосами и другие улучшения через обновлённое приложение Дом.

Тут также без фишек с ИИ, но для них ещё всё впереди, увидим.

watchOS 11 – время на одиннадцать

Apple продолжила часами, и нет, речь не о длительности, а о часах WATCH. В этом году у часов, мягко говоря, не задался год: отмена функции замера кислорода в крови, приостановка продаж часов, косяки с железом и вообще мало чем привлекательные часы. Система watchOS должна дать им новые возможности и это может случиться с новой версией. Первым делом показали фишки для спорта: Шкала оценки тяжести тренировок и новые режимы для бега и других спортивных тренировок.

Для спорта много новых фишек, если вообще кому-то полезные
Для спорта много новых фишек, если вообще кому-то полезные

Для пульса добавлена новая аналитика, которая позволит вам наблюдать за его динамикой и связью с другими факторами. Полезное для здоровья есть теперь и у женщин – добавлен календарь для беременных и улучшили трекинг по показаниям сердца.

 Меню «Сводка» теперь можно кастомизировать
Меню «Сводка» теперь можно кастомизировать

Совершенно новая функция – Vitals. Это объединённое приложение для отслеживания ключевых показателей вашего здоровья. Оно учитывает несколько параметров, такие как пульс, дыхание, температура, насыщение кислорода в крови и сон. 

Новое приложение для отслеживания нескольких показателей разом
Новое приложение для отслеживания нескольких показателей разом

WATCH получили новый режим виджетов LiveActivities на циферблате, вы можете следить за уведомлениями от приложений не открывая часы, как на iPhone! 

LiveActivies теперь и в watchOS 11
LiveActivies теперь и в watchOS 11

Осенью обещают ещё кое-какие функции, но вероятно, это будет уже для новых WATCH, а пока так. 

Конечно же, новые жесты, циферблаты, которые теперь создаются с помощью фотографий и переводчик прямо на часах.
Конечно же, новые жесты, циферблаты, которые теперь создаются с помощью фотографий и переводчик прямо на часах.

Ну и с грустью провожаем WATCH Series 4, WATCH Series 5 и WATCH SE (1-го поколения), не получивших поддержку watchOS 11.

Все новинки watchOS 11
Все новинки watchOS 11

iPadOS 18 – Калькулятор есть и больше ничего не надо


Новая iPadOS 18 это с виду полный дубль iOS 18, но отдельно приятного здесь тоже много. Точно также можно размещать иконки и виджеты как угодно на экране Домой, также можно «красить» иконки, также можно редактировать Пункт управления, а ещё такой же крутой новый iMessage с реакциями и отложенными сообщениями. 

Также обновили дизайн многих приложений, включая Фото, Apple tv, Дом и Почта.
Также обновили дизайн многих приложений, включая Фото, Apple tv, Дом и Почта.

Но главное ведь другое – приложение Калькулятор теперь есть на iPad! В приложении имеется как цифровой, так и ручной режим, который поддерживает Pencil. Есть функции конвертации, научного калькулятора и боковая история вычислений. 

Калькулятор на iPad. Дождались!
Калькулятор на iPad. Дождались!

Да, считать теперь можно и от руки, да и вообще это идеальный калькулятор как замена всем сторонним из App Store, просто уничтожили все остальные приложения одним щелчком. Вычисления теперь можно делать и в Заметках, туда тоже встроили Калькулятор, который позволит одной чертой автоматически подсчитать результат или сделать замер математических показателей на графиках. 

Приложение Календарь получило интеграцию с Напоминаниями, а приложение FreeForm обзавелось сценами, которые можно распределить в зависимости от задач. 
Приложение Календарь получило интеграцию с Напоминаниями, а приложение FreeForm обзавелось сценами, которые можно распределить в зависимости от задач. 

Записи с помощью Pencil в Заметках теперь стали ещё умнее, с их помощью можно создать текст, убрать текст зачёркиванием сгенерировать изображение и даже с помощью ИИ суммаризовать всё написанное в короткий вывод!

Зачеркнул – исчезло, гениально!
Зачеркнул – исчезло, гениально!

Добавлен новый игровой режим с поддержкой одновременного использования контроллера и наушников по Bluetooth, а также можно подключить новые аксессуары в формате как у AirPods.

Кроме того, SharePlay теперь может дать доступ к экрану собеседника, чтобы показать или подсказать что нужно сделать на экране, удобно.
Кроме того, SharePlay теперь может дать доступ к экрану собеседника, чтобы показать или подсказать что нужно сделать на экране, удобно.

В целом, освежающее и обнадёживающее обновление iPadOS, можно ставить, если конечно, ваш планшет её поддерживает. Ведь в этом году мы провожаем на покой iPad Pro 10.5” и iPad Pro 12.9 (2-го поколения), они обновление не получат, увы.

Коротко о новом в iPadOS 18
Коротко о новом в iPadOS 18

macOS 15 Sequoia – объединяются все возможности

После эффектного паркура от Крейга Федериги, мы перенеслись на подземный этаж, где завели разговор о macOS. Система получила название Sequoia (секвойя). Первой фишкой, которую презентовали – Continuity с возможностью дублировать экран iPhone на Mac, да не просто, а с возможностью даже управлять iPhone прямо курсором и клавиатурой компьютера, что творится-то!

iPhone Mirroring на macOS с полной функциональностью iPhone
iPhone Mirroring на macOS с полной функциональностью iPhone

Причём работает это без необходимости держать телефон постоянно включённым, можно даже на режим StandBy оставить телефон или вообще в сумке! Amazing и Magic в действии, о да. Уведомления с iPhone тоже будут приходить на Mac, а если нажать на них – приложение откроется прямо в режиме iPhone Mirroring. 

В macOS Sequoia новый многооконный режим, с разделением на все четверти приложений. 
В macOS Sequoia новый многооконный режим, с разделением на все четверти приложений. 

В FaceTime теперь можно с помощью ИИ задать любой фон при видеоразговоре, а можно выбрать из галереи. 

Для видеозвонков можно выбрать обои на фон, теперь никто не увидит вашу гору неглаженного белья.
Для видеозвонков можно выбрать обои на фон, теперь никто не увидит вашу гору неглаженного белья.

У Паролей теперь отдельное приложение, как и в других системах. Содержит в себе вообще все пароли и с синхронизацией между всеми устройствами и даже на Windows.

Приложение Пароли доступно не только на macOS, но и на других системах
Приложение Пароли доступно не только на macOS, но и на других системах

Самый безопасный браузер Safari стал более лёгким и теперь может работать на 4 часа больше, чем Chrome в режиме воспроизведения видео, похвально. Кроме того, в браузер добавили новые Профили, переводчик, не только по тексту, но и по фото и даже стоп-кадру видео, менеджер паролей и суммаризация статей в один клик – краткая выжимка текста со страницы. 

Краткая выжимка из статьи с важными ссылками теперь в Safari
Краткая выжимка из статьи с важными ссылками теперь в Safari

В прошлом году игры на Mac зашли как к себе домой и в этом году Apple продолжает развивать это направление. Добавлен новый механизм Game Porting ToolKit 2 – портировать можно будет ещё больше игр, а новый игровой режим даст невероятную производительность даже для топ-игр вроде Assassin’s Creed Shadows, которая выходит и на Mac (и iPad), одновременно с остальными платформами.

Кажется, нас ждёт ещё больше портов игр на Mac
Кажется, нас ждёт ещё больше портов игр на Mac
На презентации выступил Марк-Алексис Кот из Ubisoft и рассказал о планах добавить много других игр на Mac до конца года. 
На презентации выступил Марк-Алексис Кот из Ubisoft и рассказал о планах добавить много других игр на Mac до конца года. 

Редизайн произошёл с ридером текста, приложением Фото, а также приложения FreeForm с новыми Сценами. Разумеется, macOS также получил поддержку новых Топографических Карт, свежих фишек iMessage, сторонние браузеры теперь поддерживают оплату с помощью Pay, а Заметки получили доп.функционал Калькулятора как на iPad.

Новый iMessage от Telegram тут тоже есть :)
Новый iMessage от Telegram тут тоже есть :)
Общее впечатление от системы оставляет хорошие впечатления и надеемся, так будет продолжаться, хотя и не все желания пока что исполняются.
Общее впечатление от системы оставляет хорошие впечатления и надеемся, так будет продолжаться, хотя и не все желания пока что исполняются.

С поддержкой компьютерами Mac новой macOS 15 всё плюс-минус стабильно, точно получат обновление все модели на чипах Apple Silicon, а вот старый Intel уже не годится ни на что практически. Это также огромное достижение компании, собственный чип умеет уже многое и будет ещё больше, о чём далее.

Apple Intelligence – AI

Близится, как казалось, конец презентации, как вдруг Тим Кук заговорил о чём-то мощном, интуитивном, персонализированном и приватном. И стало понятно – ИИ от Apple сейчас, про него не забыли, но оставили напоследок, на самую интригу. И вот он, долгожданный генеративный ИИ – Apple Intelligence!

Apple Intelligence – генеративный ИИ от Apple
Apple Intelligence – генеративный ИИ от Apple

Слово снова перехватил Крейг и начал со слов, что компания к этому очень долго шла, но с целью, чтобы создать персональный генеративный искусственный интеллект, который будет безопаснее, чем другие и умнее для вас конкретно, чем другие. А ещё это ИИ, который работает прямо на чипе вашего устройства и вот это уже реально круто! Да, нейросетей уже валом на рынке и компания не могла пройти мимо этого, потому договорилась с OpenAI о том, чтобы часть наработок ChstGPT-4o применить у себя, а позже компания планирует использовать инструменты Google Gemini и других сервисов. Всё это будет работать совсем бесплатно, включая интеграцию с другими ИИ. Но подчёркивают главное: ни одна единица информации о вас не будет отдана или продана, всё будет защищено. Это отличает компанию от некоторых других, которые тянут некоторые данные от пользователей для обучения своих моделей ИИ.

Да, если у Siri не будет нужного ответа, но она найдёт хороший вариант у ChatGPT, то она у вас спросит: хотите ли вы узнать ответ не у меня, а у другого ассистента? И если вы соглашаетесь – ответ будет дан от имени ChatGPT. И это всё будет работать бесплатно, но если у вас есть расширенный доступ, то вы сможете привязать аккаунт и получить доступ.
Да, если у Siri не будет нужного ответа, но она найдёт хороший вариант у ChatGPT, то она у вас спросит: хотите ли вы узнать ответ не у меня, а у другого ассистента? И если вы соглашаетесь – ответ будет дан от имени ChatGPT. И это всё будет работать бесплатно, но если у вас есть расширенный доступ, то вы сможете привязать аккаунт и получить доступ.

Как же будут учить тут? По отзывам и фидбэкам от разработчиков. Пока сами не укажут на проблему – движений не будет. Тестировать будут в бета-версиях iOS 18, iPadOS 18 и macOS 15 Sequoia. Именно с этими системами функционал ворвётся на наши устройства.

Важные уведомления на первом плане
Важные уведомления на первом плане

Первая фишка – вывод на экране блокировки самых важных уведомлений, чтобы вы не пропустили чего-то важного. А ещё суммаризация уведомлений за промежуток времени.

Суммаризация в Почте и Заметках – выделяет главное без потери смысла
Суммаризация в Почте и Заметках – выделяет главное без потери смысла

Инструменты письма в macOS смогут прямо в текстовом документе или письме в приложении Почта переписать или отредактировать текст по вашему желанию. Можно сократить текст в Safari, Заметках и даже перевести аудиозапись в текст.

Причём Apple Intelligence умеет переводить и суммаризировать разговор по телефону, если вам это понадобится. 
Причём Apple Intelligence умеет переводить и суммаризировать разговор по телефону, если вам это понадобится. 

Генерация изображений по запросу или на основе события, фото человека и контекста – Image Playground, новая фишка в iMessage с помощью Apple Intelligence. Также генерация изображений будет доступна по жесту «Волшебной палочки», которая будет работать в Заметках, Pages, Keynotes и в Почте – просто покрутить вокруг необходимого места и изображение готово. Вы можете соединить фото, эмодзи, тему, цвета и получить изображение по запросу.

Image Playground – генерация изображений на основе заданных параметров и текстового запроса
Image Playground – генерация изображений на основе заданных параметров и текстового запроса

А ещё вы сможете сгенерировать сотни эмодзи по текстовому запросу и отправить их в iMessage или даже оставить реакцию на сообщение – всё это с помощью GenMoji.

GenMoji – генномодифицированные эмодзи :D
GenMoji – генномодифицированные эмодзи :D

А свежая функция Очистки предлагает удалить лишнего человека из кадра на фото. Столько лет об этом мечтали же!

Теперь есть и поиск по видео, и удаление лишних объектов с фото
Теперь есть и поиск по видео, и удаление лишних объектов с фото

Apple Intelligence умеет понимать контекст и персональные предпочтения, а также обрабатывать данные, чтобы составить очень сложные результаты с учётом множества факторов. Например, запрос имени, контактных данных, места, времени, неизвестных точек и даже документа, необходимого для конкретного запроса или всего этого вместе одновременно – даст ответ с учётом всех данных и их условий. Например, запрос по фото или видео в галерее работает достаточно точно и выдаёт результат с демонстрацией запрашиваемого даже если вы не упомянули какую-то из деталей. И всё это безопасно, как говорит Apple.

Все процессы защищены, часть обрабатывается на чипе без выхода в сеть, другая часть в облаке и не сохраняется нигде, Apple обещает не продавать и не отдавать любые данные пользователей.
Все процессы защищены, часть обрабатывается на чипе без выхода в сеть, другая часть в облаке и не сохраняется нигде, Apple обещает не продавать и не отдавать любые данные пользователей.

Всё в основном будет работать на чипе, поддерживаются только A17 Pro, а также вся линейка чипов M. Но иногда пригодится облачный способ и тут тоже Apple защищает данные для вас, а вы можете проконтролировать этот момент. Всё будет работать благодаря Private Cloud Compute, тех самых мощных серверных моделях на базе M2 Ultra, которые смогут реализовать запрос на своих мощностях. При этом компания говорит, что данные не сохраняются и их просто некуда сохранять. Компания будто создала новый стандарт конфиденциальности для ИИ – не даст запрос/ответ к Apple Intelligence до тех пор, пока обратная сторона не даст подтверждение о безопасности пути для обработки данных. 

Так выглядит интерфейс работы Siri на устройствах
Так выглядит интерфейс работы Siri на устройствах

Далее компания продемонстрировала новую Siri, которая поумнела, за столько-то лет, аж не верится. Она стала более живой, интегрированной в систему и понятной. Теперь она выглядит на устройстве по-новому, при нажатии на боковую кнопку экран по рамке окрашивается в разноцветную анимацию, а в районе кнопки при нажатии создаётся дополнительный эффект. И даже если спросить что-то невнятное или банально неравномерно спросить – Siri поймёт. Как говорит компания: «теперь нет ситуаций, когда бы Siri ответила «я не знаю». Ответы могут быть по любому запросу, понимая контекст, от Погоды и Напоминаний до отправки сообщений с изображениями. Siri поймет даже то, что вы не знаете как называется или как это работает. Запросы можно делать голосом или текстом. 

Такой ИИ от Apple умеет работать не только вне приложений, но и внутри них, понимая запрос, например, пересказать написанный текст, сгенерировать выжимку или показать результат на экране тут же. Также у разработчиков будет возможность добавить поддержку элемента App Intents для запуска ИИ-фишек прямо внутри приложения.
Такой ИИ от Apple умеет работать не только вне приложений, но и внутри них, понимая запрос, например, пересказать написанный текст, сгенерировать выжимку или показать результат на экране тут же. Также у разработчиков будет возможность добавить поддержку элемента App Intents для запуска ИИ-фишек прямо внутри приложения.

Apple отмечает, что для работы Apple Intelligence вам не нужно ничего дополнительно качать – всё будет работать уже у вас на устройстве и во встроенных приложениях. Просто один запрос и это будет реализовано. Конечно, разработчики получат SDK с доступом ко всем необходимым фишкам, среди них на старте будут доступны: Writing Tools, Image Playground, Genmoji, Siri with App Intents. Позднее также SiriKit и новый Swift Assist в свежем Xcode 16, который поможет разработчикам писать код по голосовому запросу. 

Новый Xcode 16 с ИИ в функции Swift Assist
Новый Xcode 16 с ИИ в функции Swift Assist

Apple Intelligence сможет даже извлечь данные из ваших фото, сообщений, файлов, заметок и других мест и вставить или добавить в тот результат, где вы запросили это, будь то имя или данные документа для оформления авиабилета. 

Siri на базе Apple Intelligence будет учиться на вашем устройстве, на ваших запросах и хотя ИИ от Apple будет пополняться функциями с обновлениями системы, способности ассистента будут накопительными, а не фрагментарными.

Нюансы? Есть. Работает не на всех устройствах, только на iPhone 15 Pro, а также на iPad и Mac с чипами серии M, пока только на этих устройствах, но в будущем список может пополниться. И пока что бета, но и потом не всем доступно будет, возможны региональные ограничения. Кроме того, пока что работает только на английском языке в США.

Такое начало Apple Intelligence сейчас, выглядит многообещающе, уже гораздо интереснее, чем ничего, и это ведь только часть того, что нас ждёт!

Уже сейчас разработчикам доступны для установки первые бета-версии новых систем, и там уже есть интересные новости. Apple изменила формат образа системы – вместо IPSW компания теперь выдаёт для установки файлы Apple Encrypted Archive (dmg.aea). Для простых тестировщиков и пользователей мало что изменилось. Устанавливать всем остальными пока не советуем, подождите более стабильной сборки.

А следить за всеми новостями можно в наших соцсетях, присоединяйтесь!

 ? (бывший Twitter) / Telegram / VK

Комментарии (1)


  1. Octabun
    11.06.2024 09:01

    Мне всегда интересно, но пока ни один автор не раскололся. Буду продолжать спрашивать.

    Это написано с нуля по ходу просмотра презентации или использовались ранее полученное под NDA? Уж больно ладно получается, но но Хабре авторов много, вполне возможно что найдётся...

    Разве писать статью с таким названием по одной открывающей презентации из двух - правильно?

    Что из не комментиремого я считаю главным

    На 29-й минуте Platform State of the Union. Эппл будет работать над распространением Swift на другие платформы - пока несколько дистрибутивов Линукс, бэкэнд и Windows. Мне это кажется разворотом Эппл в деле привлечения разработчиков - вместо предложения счастливо жить на платформах Эппл, что должно быть особо привлекательно раз уж Мак и iPad сделали почти одним устройством, и игнорировать всё остальное, на что конкуренты ответили продвижением кросс-платформы, сама Эппл продвигает, или начинает продвигать, кроссплатформу.

    В этом есть логика - достигшие определённого уровня за чужой счёт на других платформах попадают к Эппл через Swift, а другие и не нужны.

    Что из не прозвучавшего я считаю главным

    Слушал один раз так что не 100%, нет слова Playgrounds. Воспринимаю как окончательное признание Эппл провала идеи привлечь на платформу молодых и/или начинающих разраюотчиков через iPad.

    В этом была логика - Эппл начинает битву одна против всех и выигрывает, что может быть лучше...