Apple AI улучшит Siri, Safari, Spotlight и «Сообщения»
Некоторые стандартные системные компоненты Apple находятся на пороге значительных улучшений, связанных с искусственным интеллектом, причем Safari, Spotlight Search и Siri являются первыми в очереди на обновление.
За последние несколько месяцев ходили различные разговоры о функциях, связанных с искусственным интеллектом, которые будут доступны в iOS 18, и с тех пор узнал некоторые подробности о функциональности модели большого языка Apple Ajax (LLM), а также информацию о функциях, которые компания тестирование параллельно с ним.
В этом отчете основное внимание уделяется только информации, которую можно проверить независимо от людей, знакомых с программным обеспечением. Помимо конкретных функций, они также поделились некоторой информацией о внутренних средах тестирования искусственного интеллекта производителя iPhone.
Прежде чем подробно изучать запланированные обновления ИИ, важно рассмотреть мотивацию решения Apple разработать собственную технологию генеративного ИИ и то, чего она стремится достичь с помощью этого.
Почему Apple включает генеративный искусственный интеллект в свои будущие операционные системы?
Поскольку популярность генеративного программного обеспечения для искусственного интеллекта продолжает расти, для Apple вполне логично применять LLM для улучшения существующих стандартных приложений, которые широко развернуты на миллиардах устройств по всему миру. Те, кто знаком с ранними усилиями компании, полагают, что компания сохраняет четкое видение своих приложений и услуг, улучшенных искусственным интеллектом, с безошибочным чувством направления.
Apple дополнит свои операционные системы функциями, подобными GPT
Подход Apple к генеративному искусственному интеллекту будет сосредоточен на практических преимуществах для конечного пользователя, одновременно пытаясь сохранить конфиденциальность пользователей с помощью LLM на устройстве.
Вместо того, чтобы предлагать краткосрочную развлекательную ценность в виде чат-бота с искусственным интеллектом, компания стремится улучшить свой существующий портфель системных приложений с помощью генеративного искусственного интеллекта. Такие функции, как суммирование текста, анализ документов и расширенные возможности поиска с помощью искусственного интеллекта, принесут прямую пользу конечным пользователям.
Apple намерена представить улучшения, связанные с искусственным интеллектом, в нескольких своих встроенных системных приложениях, начиная со следующего месяца, включая Siri, Spotlight Search, Messages, Mail и Safari.
Обобщение текста на основе искусственного интеллекта для Safari и Siri
Как подробно описано в нашем эксклюзивном отчете о следующей версии Safari, Apple тестирует улучшения приложения, связанные с искусственным интеллектом, при этом обобщение текста является одной из ключевых функций в разработке.
Функция интеллектуального просмотра Safari предоставит сводку страниц и другую информацию.
Ожидается, что с выпуском Safari 18 Apple представит обобщение статей с помощью новой функции интеллектуального поиска. Это означает, что у пользователей будет возможность создать краткое описание любой веб-страницы, отображаемой в данный момент на экране.
Встроенное программное обеспечение Apple для искусственного интеллекта может анализировать ключевые слова и фразы на веб-странице или в документе и генерировать краткое резюме, содержащее только самую важную информацию.
По словам людей, знакомых с планами Apple, Siri также должна получить аналогичное обновление, поскольку компания намерена более тесно интегрировать цифрового помощника со встроенным приложением «Сообщения».
Программное обеспечение AI компании может анализировать содержимое сообщений в предварительных версиях операционных систем Apple следующего поколения. Сообщается также, что LLM способен генерировать ответы, которые в упрощенном виде передают содержание сообщений.
Среды внутреннего тестирования дают существенное представление об общих возможностях Ajax, особенно в отношении генерации ответов на устройстве — еще одной ключевой функции, над которой работает Apple.
Ajax сможет генерировать базовые ответы полностью на устройстве
На данный момент Apple изучает программное обеспечение для генерации ответов в автономном режиме уже более года, и вполне вероятно, что оно может дебютировать в следующем месяце на WWDC в той или иной форме.
Spotlight станет намного лучше благодаря более интеллектуальным результатам и сортировке.
Возможно, самая ценная особенность, разработанная Apple, — это способность программного обеспечения генерировать ответы длиной в несколько предложений и функционировать в прежнем режиме без облачной обработки.
При наличии текстового ввода искусственный интеллект на устройстве генерирует несколько ответов в течение миллисекунд. В тестовых средах Apple эти ответы организованы на основе точности, скорости и других важных факторов.
При создании ответов Ajax LLM от Apple проверит, содержит ли текстовый ввод имя сохраненного контакта, и при необходимости отобразит информацию о контакте. Программное обеспечение также будет взаимодействовать с приложением «Календарь» и учитывать события при создании ответа.
Хотя Ajax может генерировать элементарные текстовые ответы на устройстве, более сложные ответы или текстовые сводки, по-видимому, требуют обработки на стороне сервера. Это согласуется с другими отчетами, в которых утверждается, что Apple ведет переговоры с OpenAI и Google о лицензировании их облачной технологии искусственного интеллекта.
Что касается генерации текста из подсказки, Apple, как сообщается, изучала способы сделать это полностью на устройстве, но остается неясным, удалось ли ей реализовать генерацию текста в автономном режиме.
Хотя более сложные функции искусственного интеллекта, вероятно, потребуют подключения, обработку на устройстве Apple все равно можно использовать для более простых функций, таких как анализ текста и элементарное обобщение с помощью ключевых слов и предложений.
Анализ текста и обобщение для Safari и Сообщений
В своих тестовых приложениях, связанных с искусственным интеллектом, и связанных с ними средах Apple уделяет особое внимание анализу и обобщению текста — все это выполняется с помощью встроенного в устройство LLM компании Ajax.
Альтернативные браузеры, такие как Arc, предлагают сводки статей, и вскоре Safari тоже будет.
Прежде чем начать тестирование, инженеры Apple сначала предоставляют LLM необходимый текстовый ввод. Программное обеспечение может получать ввод текста через специальное текстовое поле, через цифровые документы или использовать информацию из приложений Safari и Messages.
При получении ввода текста искусственный интеллект Apple на устройстве выбирает ключевые слова и фразы в тексте, обозначая их как текстовые темы. Предложения, содержащие пояснения, описания, определения или обозначающие разновидности предметов, также выделяются из остального текста.
При анализе текстов программа учитывает всю доступную информацию. Он может распознавать и классифицировать такие объекты, как компании, люди и местоположения. Например, если имя появляется вверху текста, программа, скорее всего, распознает это имя как принадлежащее автору текста.
Выбранные ключевые предложения и темы в конечном итоге представляют собой элементарное текстовое резюме, которое программное обеспечение Apple для генерации ответов на устройстве может использовать для более связного ответа.
Поскольку программное обеспечение компании для анализа текста способно функционировать полностью на устройстве, это может дать Apple преимущество перед конкурентами в области защиты конфиденциальности.
Как новые улучшения ИИ повлияют на конфиденциальность пользователей?
Программное обеспечение Apple для искусственного интеллекта на устройствах также, похоже, уделяет большое внимание сохранению конфиденциальности своих пользователей, что будет соответствовать существующим функциям компании, ориентированным на конфиденциальность, таким как iCloud Private Relay.
Apple считает конфиденциальность одним из основных прав человека и будет уделять ей приоритетное внимание с помощью ИИ.
Даже в тестовых средах Apple предупреждения о конфиденциальности пользователей все еще существуют. По словам людей, знакомых с программным обеспечением, тестовые утилиты компании отображают сообщение до того, как Ajax LLM использует любую информацию из Safari или приложения «Сообщения».
Устраняя необходимость облачной обработки — по крайней мере, в самых простых ситуациях — вероятность возникновения проблем, связанных с конфиденциальностью, значительно снижается. Если пользовательские данные не передаются, вероятность их компрометации, очевидно, намного ниже.
По сравнению с существующими реализациями ИИ в конкурирующих продуктах и услугах, реализация Apple, возможно, является инновационной в плане сохранения конфиденциальности и эффективной обработки данных на устройстве.
Как «Аякс» выглядит на фоне конкурентов?
Усовершенствования Apple, связанные с искусственным интеллектом, призваны конкурировать с постоянно растущим числом приложений с поддержкой искусственного интеллекта, которые доступны от широкого круга третьих сторон.
Siri ждет большое обновление
Практически каждое приложение, от Slack до Google Chrome, теперь имеет некоторую степень интеграции с искусственным интеллектом в дополнение к различным приложениям для чат-ботов с искусственным интеллектом, которые сейчас доступны на рынке.
Такие продукты, как Rabbit R1 или Humane AI Pin, также можно рассматривать как конкуренцию, поскольку их обычно воспринимают как виртуальных личных помощников или замену смартфонов.
Создавая версию Siri, наполненную искусственным интеллектом, с обработкой на устройстве, Apple надеется затмить многие существующие реализации генеративного искусственного интеллекта, особенно физические продукты на тему искусственного интеллекта.
И Rabbit R1, и Humane AI Pin работают посредством облачной обработки, причем для работы последнего даже требуется отдельная ежемесячная подписка. Эти устройства также обычно считаются незавершенными или частично функциональными, как отмечается в различных отзывах пользователей.
Apple будет конкурировать с такими продуктами, как Rabbit R1, предлагая вертикально интегрированное программное обеспечение для искусственного интеллекта на уже существующем оборудовании.
Версия Siri с поддержкой искусственного интеллекта также обеспечит большую защиту конфиденциальности за счет обработки данных на устройстве, и все это без затрат на дополнительную ежемесячную подписку. Учитывая устоявшееся присутствие Apple на рынке, методы контроля качества и доступные ресурсы, у Siri появился новый потенциал стать серьезной конкурентной угрозой.
Во время последнего сообщения Apple о финансовых результатах 2 мая генеральный директор Apple Тим Кук ответил на два вопроса о монетизации компанией генеративного искусственного интеллекта, но не дал конкретных ответов. Ранее в ходе разговора Кук подтвердил «непоколебимое внимание Apple к конфиденциальности» и сказал, что у компании есть «преимущества, которые отличают ее от конкурентов в области искусственного интеллекта».
По сравнению с приложениями и сервисами чат-ботов с искусственным интеллектом, такими как ChatGPT от OpenAI, обновленная версия Siri будет иметь свои преимущества в виде функциональности на устройстве. Он также будет использовать существующую интеграцию с другими встроенными приложениями Apple, обеспечивая большую функциональность, чем любой обычный чат-бот.
Что касается предстоящей функции интеллектуального просмотра Safari с суммированием текста, она, вероятно, будет конкурировать с известными сторонними браузерами, такими как Arc Browser, который также содержит собственную функцию суммирования текста.
Учитывая недавний интерес Apple к искусственному интеллекту, мы должны увидеть, как некоторые из этих функций дебютируют на ежегодной Всемирной конференции разработчиков позднее в этом году.
