Приложения Apple для заметок станут более «умными». В iOS 18 появится функция транскрибирования аудио в текст в режиме реального времени и интеллектуальное составление аннотаций текстовых заметок на основе технологии искусственного интеллекта. ИИ-помощник сможет распознавать речь в аудиозаписях и выделять ключевые моменты в текстах.

Источник изображения: macrumors.com

Как сообщает издание Appleinsider, Apple разрабатывает улучшенные функции транскрибирования аудио и генерации кратких аннотаций на основе записанной речи в реальном режиме времени. Это коснётся таких приложений, как «Заметки» и «Голосовые заметки», а также некоторых других приложений. Будем надеяться, что со временем iPhone научатся превращать аудиосообщения в мессенджерах в текст, но пока что об этом речи не идёт. Согласно источникам, Apple уже протестировала работу функций в предварительных версиях приложений, которые выйдут в составе обновлений iOS 18, iPadOS 18 и macOS 15 несколько позднее в этом году.

В частности, в приложение «Голосовые заметки» будет добавлена возможность мгновенной транскрипции аудиозаписей. При этом текстовая расшифровка речи будет отображаться в центре интерфейса приложения вместо традиционного графического представления звука. Для запуска транскрибирования пользователям достаточно будет нажать на специальную кнопку.

Аналогичный инструмент появится и в приложении «Заметки». Более того, наряду с транскрипцией речи в «Заметках» будет реализована функция автоматического создания кратких текстовых аннотаций на основе записанного аудио. Эти конспекты, генерируемые технологией искусственного интеллекта, мгновенно выделят ключевые моменты записи, предоставив пользователю сжатый текстовый конспект без необходимости прослушивать всю аудиозапись.

По замыслу Apple, сочетание расширенных возможностей обработки аудиозаписей, транскрибирования речи и генерации аннотаций превратит приложение «Заметки» в мощный инструмент для структурирования различной информации. Новые функции текстовых и голосовых заметок существенно повысят эффективность работы для студентов, журналистов, писателей и многих других. Можно с лёгкостью записывать лекции, интервью, идеи и прочее, а затем получать готовые расшифровки и краткие резюме без необходимости тратить время на расшифровку и обработку аудио вручную. Вместе с тем, для минимизации ошибок транскрибирования и обобщения информации, исходные аудиозаписи будут сохраняться в «Заметках» вместе с сгенерированным текстом. Это сделано для того, чтобы избежать потери важных данных.

Компания Apple готовится представить долгожданные функции искусственного интеллекта в iOS 18 и macOS 15. Однако эти функции изначально будут выпущены с пометкой «предварительная версия», что может быть показателем того, что Apple не успела полностью подготовить все запланированные возможности ИИ к полноценному релизу, сообщает Марк Гурман (Mark Gurman) из Bloomberg.

Источник изображения: 9to5mac.com

На фоне неоднозначного представления поисковых результатов AI Overview от Google, который стал выдавать множество неточных и даже опасных результатов, Apple, возможно, решила действовать более осторожно и протестировать свои инструменты в бета-режиме.

По информации, компания выбрала гибридный подход к интеграции ИИ. Одна часть задач будет обрабатываться локально на устройствах, а другая часть на облачных серверах компании. Для каждого запроса система сама будет определять, где его лучше выполнить. Отмечается, что локальная обработка данных будет доступна только на новых устройствах Apple, включая iPhone, iPad и Mac последних поколений.

Среди конкретных функций, которые сможет выполнять ИИ, будут краткий пересказ диалогов из текстовых сообщений, транскрибация аудиозаметок, редактирование фотографий, автоматические ответы на сообщения и генерация смайликов на лету. Safari и Spotlight также получат обновления, связанные с генеративным искусственным интеллектом.

Однако встаёт вопрос, как Apple объяснит переход к гибридной схеме обработки данных с ИИ после многих лет продвижения концепции локальных вычислений ради конфиденциальности пользователей, при том, что возможности современных нейросетей требуют мощностей крупных облачных серверов. Хотя облако Apple будет работать на собственных чипах для сохранения конфиденциальности, передача данных за пределы устройств по определению менее безопасна.

В iOS 18 также будет отдельно интегрирован чат-бот на базе ChatGPT от OpenAI. О партнерстве во время WWDC, возможно, объявит Сэм Альтман (Sam Altman) лично. Также разрабатывается специальная компактная модель ИИ для часов Apple Watch.

Компания Meta✴ изучает возможность введения платной подписки для своего интеллектуального помощника Meta✴ AI на базе ИИ. Платная версия предоставит более широкие возможности пользователям, которым это необходимо. При этом базовая версия останется бесплатной.

Источник изображения: Mariia Shalabaieva/Unsplash

Согласно внутреннему сообщению, опубликованному в The Information, услуга искусственного интеллекта Meta✴ AI на основе платной подписки сравнима с аналогичными сервисами Google, Microsoft, OpenAI и Anthropic. В настоящее время конкурирующие компании взимают около 20 долларов в месяц за доступ к своим более продвинутым чат-ботам на основе ИИ.

Подписка обычно включает различные преимущества, такие как интеграция с офисными приложениями вроде Microsoft Word и приоритетный доступ в периоды высокой нагрузки. Предполагаемая премиальная версия от Meta✴, вероятно, будет предлагать аналогичный набор функций, хотя конкретные детали и ценообразование пока не разглашаются.

Хотя точный набор возможностей для платного тарифа Meta✴ AI остается неопределенным, предположительно, компания стремится улучшить взаимодействие с пользователями за счет расширенных функций, возможно следуя успешным моделям своих конкурентов. Как пишет Winbuzzer, рассмотрение платной подписки отражает общую тенденцию в технологической отрасли к монетизации передовых возможностей ИИ, так как потенциально создаёт новые источники дохода и укрепляет взаимоотношения с аудиторией за счет улучшенного сервиса.

К примеру, Microsoft уже предлагает свою технологию Copilot как платное дополнение в рамках подписки Microsoft 365 стоимостью 30 долларов в месяц. Copilot расширяет функциональность офисных приложений, таких как Word, Excel и PowerPoint, используя возможности генеративного ИИ.

В то же время рынок чипов и оборудования для нужд искусственного интеллекта переживает беспрецедентный рост. Компания Nvidia на этой неделе в очередной раз отчиталась об огромных доходах от продаж чипов для ИИ. Успех на этом направлении настолько велик, что Nvidia теперь обязуется ежегодно выпускать новое поколение графических процессоров для ИИ.

Таким образом, по мере расширения возможностей ИИ в сервисах технологических компаний появляются и новые источники дохода от монетизации этих инновационных решений. Планы Meta✴ по платной подписке для Meta✴ AI является еще одним примером этой тенденции.

Глава ИИ-подразделения Google DeepMind Демис Хассабис (Demis Hassabis) в рамках ежегодной конференции для разработчиков Google I/O рассказал о ранней версии того, что в компании называют универсальным ИИ-помощником. Речь идёт о системе под кодовым названием Project Astra, которая представляет собой мультимодальный ИИ-помощник, работающий в режиме онлайн. Он может «видеть» окружающее пространство, распознавать объекты и помогать в выполнении различных задач.

Источник изображения: Google

«Я уже давно вынашивал эту идею. У нас будет этот универсальный помощник. Он мультимодальный, он всегда с вами<…> Этот помощник просто полезен. Вы привыкните к тому, что он всегда рядом, когда это нужно», — рассказал Хассабис во время презентации.

Вместе с этим Google опубликовала небольшое видео, в котором демонстрируются некоторые возможности ранней версии Project Astra. Одна из сотрудниц лондонского офиса Google активирует ИИ-помощника и просит его сообщить, когда он «увидит» что-либо, способное издавать звуки. После этого она начинает поворачивать смартфон и когда в объектив камеры попадает стоящая на столе колонка, алгоритм сообщает об этом. Далее она просит описать стоящие на столе в стакане цветные мелки, на что алгоритм отвечает, что с их помощью можно создавать «красочные творения». Далее камера телефона направляется на часть монитора, на котором в это время выведен программный код. Девушка спрашивает ИИ-алгоритм, за что именно отвечает эта часть кода и Project Astra практически моментально даёт верный ответ. Далее ИИ-помощник определил местонахождение офиса Google по «увиденному» из окна пейзажу и выполнил ряд других задач. Всё это происходило практически в режиме онлайн и выглядело очень впечатляюще.

По словам Хассабиса, Project Astra намного ближе предыдущих аналогичных продуктов к тому, как должен работать настоящий ИИ-помощник в режиме реального времени. Алгоритм построен на базе большой языковой модели Gemini 1.5 Pro, наиболее мощной нейросети Google на данный момент. Однако для повышения качества работы ИИ-помощника Google пришлось провести оптимизацию, чтобы повысить скорость обработки запросов и снизить время задержки при формировании ответов. По словам Хассабиса, последние шесть месяцев разработчики трудились именно над тем, чтобы ускорить работу алгоритма, в том числе за счёт оптимизации всей связанной с ним инфраструктуры.

Ожидается, что в будущем Project Astra появится не только в смартфонах, но и в смарт-очках, оснащённых камерой. Поскольку на данном этапе речь идёт о ранней версии ИИ-помощника, точные сроки его запуска в массы озвучены не были.