Apple Intelligence

Apple Intelligence— платформа искусственного интеллекта, разработанная компаниейApple Inc. Технология, основанная на сочетании обработки данных как на самом устройстве, так и вИИ-облаке, где большие ИИ-модели развёрнуты вдата-центре, была анонсирована 10 июня 2024 года на конференцииWWDC 2024в качестве функции операционных системiOS 18,iPadOS 18иmacOS Sequoia, которые были анонсированы вместе с Apple Intelligence. Apple Intelligence включает в себя интеграцию сChatGPTи будет бесплатной для всех пользователей с поддерживаемыми устройствами. Запуск бета-версии для разработчиков запланирован на конец 2024 года.
Для работы, поддержки и развития Apple Intelligence компания Apple создала собственную инфраструктуру ИИ-кластеров, и заново сформировала новую команду специалистов по инфраструктуре иоблачнымтехнологиямApple Cloud, которую возглавил Сумит Гупта (Sumit Gupta) — один из бывших руководителейGoogle.
Для безопасного ИИ-облака Apple использует кастомные серверы на процессорах собственной разработки серииApple Mи собственную серверную ОС, основанную наmacOS. Плюс для своих ИИ-облаков Apple разрабатывает собственные серверныеИИ-ускорители.
Но Apple пока не хватает собственной облачной ИИ-инфраструктуры для Apple Intelligence, поэтому компания также использует ИИ-кластерыGoogle Cloud. Для обучения своих ИИ-моделей Apple Intelligence компания также использует Google Cloud с тензорными процессорамиGoogle TPU.
Apple Intelligence предлагает инструменты для написания текстов на базе искусственного интеллекта, включая функции изменения тона повествования и поиска ошибок. Эти функции помогают упростить работу пользователей с текстом, делая его более понятным, кратким и профессиональным. Эти инструменты также можно использовать для выделения основной мысли, ключевых моментов, форматирования таблиц и списков из статьи или письменного текста. GPT-4o доступен как дополнительный инструмент для написания текстов.
Данное приложение (загружается отдельно из AppStore) можно использовать для генерации изображений, используя ресурсы устройства. Image Playground можно использовать для создания изображений, используя фразы и короткие описания. Приложение так же предлагает несколько готовых тем (диско, фантазия, любовь), костюмов (астронавт, фермер, робот, супергерой), аксессуаров (берет, шарф, солнечные очки), и мест (город, пустыня, стадион). Можно так же выбрать стиль конечно изображения: анимация или иллюстрация. Через приложение «Заметки» на iPad, macOS и iPhone пользователи могут получить доступ к Image Playground с помощью инструмента Image Wand в палитре Apple Pencil, не открывая приложение Image Playground. Черновые наброски, сделанные с помощью Apple Pencil, можно преобразовать в изображения.
Пользователи могут сгенерировать уникальные эмодзи, не входящие в стандартный набор Unicode, по короткому описанию, используя возможности генеративных моделей «Genmoji». Пользователи могут выбирать людей на фотографиях, которых были распознанны в приложении «Фото», и создавать похожие на них изображения Genmoji. Подобно эмодзи, Genmoji можно добавить в форме текстовые сообщения, реакции или стикера и использовать в приложении «Сообщения», а также в сторонних приложениях в виде встроенных сообщений или стикеров.
Siri, виртуальный ассистент Apple, получил дополнительные возможностями, которые стали возможны благодаря Apple Intelligence. Новая версия получила обновленный интерфейс и анимацию, улучшенную обработку естественного языка и возможность взаимодействия с текстом с помощью двойного нажатия на главную панель без включения функции в меню специальных возможностей или двойного нажатия клавиши command в macOS. В более позднем обновлении Apple Intelligence добавит в Siri возможность использовать личный контекст действий на устройстве для ответа на запросы.
Apple Intelligence добавляет в приложение «Почта» функцию «Приоритетные сообщения», которая отображает срочные письма, такие как приглашения на тот же день или посадочные талоны, с кратким изложением, сгенерированным искусственным интеллектом. Приложение «Почта» также получает возможность разделить письма по таким категориям как «основные», «транзакции», «обновления» и «рекламные акции» на основе того, что содержится в письме. Данные вычисления, по утверждению Apple, выполняется непосредственно на устройстве.
Приложение Apple «Фото» включает в себя функцию создания пользовательских видеороликов-воспоминаний и расширяет возможности поиска. Пользователи теперь могут описать историю и, используя Apple Intelligence, выбрать для неё подходящие фотографии, видео и музыку. Пользователи теперь могут удалить отвлекающие элементы на фотографиях, используя инструмент Clean Up в приложении «Фото». Apple Intelligence способна распознать фоновые объекты и удалить их через касание или обводку. Кроме того, пользователи могут искать конкретные фотографии или видео по описанию и/или ключевым словам, а Apple Intelligence может точно определить конкретные моменты в видеоклипах.
Используя функцию сводки уведомлений, Apple Intelligence может суммировать уведомления из приложений для обмена сообщениями и группы уведомлений из приложений, чтобы пользователям не приходилось просматривать большое количество уведомлений. Новый режим фокусировки «Уменьшить количество прерываний» отключает уведомления, которые считаются неважными, и оставляет важные.
На iPhone 16 и 16 Pro или более поздних версиях iPhone, где доступен контроллер камеры, пользователи могут нажать и удерживать кнопку управления камерой чтобы сфотографировать объект, а затем отправить его в ChatGPT или выполнить поиск с помощью Google. Полученное изображение не сохраняется на вашем устройстве, и так же не отправляется на сервера компании, по утверждению Apple. Это сделано для того, чтобы пользователи могли быстрее узнавать больше об окружающих их объектах.
В результате партнерства компании с OpenAI, Apple Intelligence также получила глубокую интеграцию с ChatGPT, позволяя Siri определить, когда стоит отправить сложный запрос пользователя ChatGPT. Эта глубокая интеграция основана на GPT-4o. Интеграция с ChatGPT поддерживается по умолчанию, при этом пользователь уведомляется перед отправкой каких-либо данных или фотографий на серверы ChatGPT, а IP-адреса скрываются при отправке запросов на серверы OpenAI.[28] Использование функций ChatGPT бесплатно для всех пользователей без необходимости входа в систему, однако они будут получать только ограниченное количество запросов GPT-4o до перехода на менее мощный GPT. Платные подписчики могут войти в систему, чтобы получить доступ к платным функциям по всей системе, включая большее число запросов с использованием GPT-4о. В будущем Apple планирует интегрировать в систему другие модели, такие как Gemini от Google.
Все компьютеры Mac и iPad с процессорамиApple siliconсерии M будут поддерживать Apple Intelligence с выходомmacOS SequoiaиiPadOS 18. iPhone, оснащённые, по крайней мере,A17 Proили более поздней версией, также будут поддерживаться с выходомiOS 18. Аналитик Минг-Чи Куо предполагает, что требования Apple к оперативной памяти будут снижены. Модель «на устройстве» запрещает запуск Apple Intelligence на более ранних моделях iPhone.