Microsoft представила радикальное обновление помощника с искусственным интеллектом Copilot — он получил зрение и голос, благодаря чему стал более персонализированным. Новые возможности Copilot включают режим виртуального ведущего новостей, который зачитывает заголовки; голосовая функция позволяет общаться с ним естественным образом, как Advanced Voice Mode от OpenAI; наконец, ИИ-помощник может «увидеть» то, на что ему укажет пользователь.

Источник изображений: blogs.microsoft.com

Microsoft Copilot был радикально переработан на мобильных устройствах, в веб-версии и в приложении для Windows — он теперь напоминает ИИ-помощник Pi, созданный компанией Inflection, значительное число сотрудников которой перешло в Microsoft. Бывший гендиректор Inflection и сооснователь Google DeepMind Мустафа Сулейман (Mustafa Suleyman) сейчас возглавил ИИ-отдел Microsoft. Существенной переработке подвергся интерфейс ИИ-помощника — теперь это персонализированная страница Copilot Discover, более полезная и привлекательная, чем одно только текстовое поле для запросов к чат-боту. Домашняя страница настраивается на основе истории пользователя с чат-ботом; со временем на ней будут представлены полезные поисковые запросы, советы и релевантная информация.

ИИ-помощник получил полноценный голосовой интерфейс аналогично ChatGPT — теперь с ним можно общаться, задавать вопросы, прерывать его, как при разговоре с товарищем или коллегой. В Copilot доступны четыре варианта голоса, один из которых придётся выбирать при первом использовании. Вторая крупная ставка Microsoft — функция зрения Copilot Vision, позволяющая ассистенту видеть то, что видит пользователь на открытой веб-странице. Можно задавать вопросы о тексте, изображениях и любом другом содержимом, и помощник даст естественный ответ. Это поможет при совершении покупок в интернете — система предложит различные варианты товаров и отзывы. Подключать Copilot Vision придётся вручную, и просматриваемый системой контент нигде не хранится и не используется для обучения ИИ, уверяет Microsoft. Кроме того, компания наложила ограничения на типы сайтов, с которым может работать Copilot Vision; платные и конфиденциальные материалы система тоже не поддерживает. В одном из приведённых Microsoft примеров функция используется для сканирования рукописных кулинарных рецептов — ИИ поясняет, о каком блюде идёт речь, и сколько времени уйдёт на его приготовление.

Copilot Daily, ещё одна функция, представляет аудиосводку новостей и погоды, которую ИИ-помощник зачитывает как диктор новостной службы. Сводка представляет собой короткую заметку, которую пользователь может слушать по утрам — в качестве источников используются только ресурсы, которые согласились на использование контента системой Copilot. На начальном этапе это Reuters, Axel Springer, Hearst и Financial Times, но в перспективе их число будет расширяться. Многообещающей также представляется функция Think Deeper — благодаря новейшим ИИ-моделям OpenAI система Copilot теперь может отвечать и на сложные вопросы, предлагая пошаговые ответы или проводя сравнения. Функция пока остаётся на ранней стадии разработки, и доступна она на площадке Copilot Labs наряду с Copilot Vision — участники тестирования могут отправить в Microsoft отзывы об их работе. Компания осторожничает неспроста, если учесть опасения, которые вызвала функция Recall до того, как подверглась переработке.

Обновлённый пакет Copilot доступен в мобильных приложениях для iOS и Android, на сайте copilot.microsoft.com, а также в приложении Copilot для Windows. Функция Copilot Voice на начальном этапе доступна на английском языке в Австралии, Канаде, Новой Зеландии, Великобритании и США, а в перспективе появится и в других регионах. Copilot Daily пока можно пользоваться лишь в США и Великобритании, а Copilot Vision работает лишь у некоторых подписчиков Copilot Pro в США.

Авторы исследования Uplevel, охватившего деятельность примерно 800 разработчиков программного обеспечения, утверждают, что применение инструментов с искусственным интеллектом для написания программного кода пока не выявило ни повышения производительности труда профильных специалистов, ни снижения их эмоционального выгорания.

Источник изображения: Unsplash, Luca Bravo

В ходе исследования сравнивались результаты труда выборки из 800 разработчиков на протяжении двух трёхмесячных периодов. В первом периоде программисты трудились с использованием традиционных инструментов, во втором они перешли на использование ИИ-ассистента GitHub Copilot. Примечательно, что на производительности труда разработчиков подобная миграция особо не сказалась в рамках данного эксперимента.

Первоначально ожидалось, что применение GitHub Copilot снизит количество ошибок в программном коде и увеличит производительность труда, но по факту в первом случае наблюдался рост количества ошибок на 41 %, а ещё попытки применять ИИ-ассистента не привели к существенному улучшению ситуации с эмоциональным выгоранием специалистов. По данным GitHub, применение помощника Copilot способно на 55 % повысить скорость написания кода разработчиками.

Некоторые эксперты признались, что написанные с помощью ИИ участки программного кода трудно поддаются анализу и выявлению ошибок, поэтому порой проще переписать нужный фрагмент заново. На ранних этапах развития ChatGPT, например, отмечалось, что этот чат-бот более половины всех запросов, связанных с оптимизацией работы создателей программного кода, просто неверно истолковывает. Представители Gehtsoft, например, убеждены, что разработка программного обеспечения на 90 % зависит от функций человеческого мозга, в части понимания требований, разработки системы и определения ограничений. Превращение сформированных взаимных зависимостей в программный код является самой простой частью работы программиста.

С другой стороны, находятся и те, кто восхваляет возможности ИИ в разработке программного кода. Представители провайдера облачных услуг Innovative Solutions, например, отмечают почти троекратное повышение производительности после перехода на использование ИИ-ассистентов типа Claude Dev и Copilot.

В предварительной сборке Windows 11 22635.4225 (KB5043186) на канале бета-версий появилась функция, которая позволяет менять назначение клавиши Copilot, присутствующей на ноутбуках класса Copilot+ PC. Вместо помощника с искусственным интеллектом по нажатию клавиши можно запускать другое приложение, но не любое. И это ограничение можно обойти.

Источник изображения: blogs.windows.com

В настройках системы теперь можно выбрать, какое приложение будет запускаться по нажатии кнопки Copilot — единственное требование состоит в том, что оно должно быть «упаковано и подписано MSIX». Microsoft объяснила это ограничение стремлением обеспечить безопасность и конфиденциальность пользователей Windows 11. Иными словами, по нажатию клавиши Copilot можно запускать не любые, а только сертифицированные приложения.

MSIX — новый формат упаковки ПО, предполагающий повышенную надёжность, а также приоритет в использовании пропускной способности сети и дискового пространства в сравнении с традиционными исполняемыми файлами, отличными от формата упаковки MSIX.

Предложенный в бета-версии Windows 11 способ изменить назначение клавиши Copilot не является единственно возможным. Copilot соответствует кнопке F23, восходящей к эпохе IBM, когда на клавиатурах присутствовал набор функциональных клавиш от F1 до F24. Поэтому можно воспользоваться сторонним ПО и назначить на F23 (она же Copilot) запуск любого другого приложения, не дожидаясь общедоступного обновления Windows 11.

В начале 2025 года AMD планирует выпустить процессоры Kraken, нацеленные на сегмент ИИ-ноутбуков стоимостью до $799. Это позволит перенести функции флагманских чипов Strix Point в более доступный ценовой сегмент, расширив тем самым линейку Copilot+ PC на чипах AMD. Напомним, ИИ-функции на ноутбуках с процессорами AMD и Intel появятся в ноябре этого года.

Источник изображения: AMD

На выставке IFA 2024 в Берлине Джек Гуинь (Jack Huynh), старший вице-президент и генеральный менеджер группы вычислительных и графических решений AMD, подтвердил, что процессоры Kraken выйдут в начале 2025 года. Эти чипы, ранее упоминавшиеся в слухах как Kraken Point, помогут создать нишу доступных ноутбуков с поддержкой ИИ, в то время как чипы Strix Point уже используются в устройствах премиум-класса. Официальные спецификации будущих процессоров пока не раскрыты, однако некоторые характеристики уже можно предположить, исходя из требований к устройствам Copilot+ PC.

Характеристики процессоров AMD. Источник изображения: ComputerBase

Чтобы соответствовать этому стандарту, процессоры Kraken должны иметь нейропроцессорный блок (NPU) с производительностью не менее 40 TOPS (триллионов операций в секунду). Это указывает на то, что AMD, вероятно, использует решение, аналогичное или идентичное тому, что применяется в более мощных чипах Strix Point. Однако для снижения себестоимости, скорее всего, будут уменьшены ядра CPU и GPU. Это позволит чётко позиционировать Kraken ниже Strix Point в линейке продуктов AMD. Интересно, что источники в Азии также упоминают о поддержке памяти LPDDR5-8000, что может стать существенным преимуществом для устройств бюджетного сегмента.

Несмотря на амбициозные планы, AMD продолжает сталкиваться с серьёзными проблемами в увеличении объёмов поставок процессоров, что сказывается на расширении доли рынка. Например, на IFA 2024 практически не было представлено новых ноутбуков с процессорами AMD. Многие крупные OEM-производители воздерживаются от расширения своих линеек продукции на базе AMD из-за неспособности компании обеспечить быструю и стабильную поставку чипов. Эта проблема настолько серьёзна, что один из производителей в частной беседе с ComputerBase заявил, что AMD оставила миллиарды долларов США лежать без дела.

Доля рынка AMD в настольном, мобильном и серверном сегментах за период с I квартала 2023 года по II квартал 2024 года

Парадоксально, но сложившаяся ситуация косвенно способствует успеху конкурента — компании Qualcomm. Несмотря на первоначальную осторожность некоторых производителей в отношении Qualcomm, уже сейчас у ряда OEM-партнёров доступно до полудюжины моделей ноутбуков на базе её чипов, и эта тенденция усиливается. Тем не менее, AMD удалось увеличить свою долю на рынке ноутбуков до более чем 20 % за последние годы. Согласно данным сравнения цен, среди ноутбуков, доступных для покупки с 2024 года, 24 % оснащены процессорами AMD. Однако эксперты, присутствовавшие на IFA, утверждают, что доля рынка AMD могла бы быть значительно выше при отсутствии проблем с поставками.

ASUS продемонстрировала на IFA 2024 новые ноутбуки серии Vivobook Flip с поддержкой Microsoft Copilot+. Устройства получили процессоры Intel Core Ultra Series 2 (Lunar Lake), OLED-дисплеи и возможность работать в автономном режиме до 25 часов.

Источник изображения: ASUS

Особое внимание на выставке привлекли трансформеры Vivobook Flip в 14-дюймовой и 16-дюймовой версиях с поддержкой Copilot+, предлагающие максимальную гибкость благодаря четырём режимам использования: ноутбук, планшет, стенд и «палатка».

Источник изображения: ASUS

Обе модели оснащаются процессором Intel Ultra 7 (Series 2), который обеспечивает ИИ-производительность 47 TOPS и включает GPU Xe2 ARC. Как отмечает OC3D, в тестах производительности Vivobook Flip с Core Ultra 7 показал на 40 % более высокую скорость работы в CPU-задачах и на 82 % более быструю обработку графики по сравнению с предыдущим поколением процессоров.

ASUS также уделила большое внимание автономности. Vivobook Flip могут проработать до 25 часов на одном заряде, что стало возможным благодаря аккумуляторам ёмкостью 70 Вт·ч для модели 14 дюймов и 75 Вт·ч для модели 16 дюймов. Кроме того, внедрена технология быстрой зарядки, позволяющая наполнить аккумулятор до 60 % всего за 49 минут.

Источник изображения: ASUS

Ноутбуки Vivobook Flip оборудованы широким набором интерфейсов, включая Thunderbolt 4, USB Type-A, HDMI 2.1 и аудиоразъём. Также есть встроенный картридер microSD и поддержка стилуса Pen 2.0 для более удобной работы с сенсорным экраном. В зависимости от конфигурации, Vivobook Flip может быть оснащён до 32 Гбайт LPDDR5X и PCIe 4.0 SSD ёмкостью до 1 Тбайт. Обе модели оснащены OLED-дисплеями, но 14-дюймовая версия имеет разрешение 1080p и частоту обновления 60 Гц, а 16-дюймовая — до 3K и 120 Гц соответственно. Поддержка новейшего стандарта Wi-Fi 7 обеспечит максимальную скорость передачи данных при подключении к совместимым беспроводным сетям.

Новые модели Vivobook Flip поступят в продажу в течение месяца.

В середине месяца Microsoft намеревается провести специальное мероприятие, посвящённое «следующей фазе инноваций Copilot». Мероприятие Wave 2 пройдёт 16 сентября, а проведут его генеральный директор компании Сатья Наделла (Satya Nadella) и вице-президент по рабочему искусственному интеллекту Джаред Спатаро (Jared Spataro).

Источник изображений: Microsoft

Мероприятие будут проходить в LinkedIn, и основной его темой станет деловая сторона продуктов Microsoft Copilot — компания, по неподтверждённым данным, уже собирается провести ребрендинг продуктов в области ИИ: «Copilot в Word» будет переименован в «Microsoft 365 Copilot в Word», а «Microsoft Copilot для Microsoft 365» станет называться «Microsoft 365 Copilot».

Но одним ребрендингом дело, вероятно, не ограничится. Компания может представить новые функции Copilot для Microsoft 365, призванные стать стимулом для компаний оформить подписку за $30 в месяц на пользователя. Возможно, будет расширен набор функций Copilot Pro — потребительской подписки на ИИ-продукт Microsoft. Она стоит $20 в месяц, и с момента запуска компания не баловала пользователей новыми возможностями — напротив, из ассортимента Copilot Pro был удалён GPT Builder.

Новейшие компьютеры с искусственным интеллектом Microsoft Copilot+ PC обеспечивают высокий уровень производительности при выполнении ИИ-задач, а также другие преимущества. Однако есть и проблема: процессоры, которыми оснащены многие ИИ-компьютеры, не совместимы со многими современными играми. Об этом известно уже несколько месяцев, но не похоже, чтобы ситуация как-то улучшилась.

Источник изображения: Microsoft

Речь идёт о компьютерах Copilot+ PC на базе ARM-процессоров Qualcomm Snapdragon, которые объединяют в себе CPU, GPU и нейронный сопроцессор (NPU), предназначенный для ускорения выполнения задач искусственного интеллекта. Получается, что Microsoft столкнулась с теми же проблемами, что и Apple в своих компьютерах Mac, например, невозможностью запускать популярные игры, разработанные для процессоров на архитектуре x86. Системы класса Copilot+ PC на новейших чипах Intel и AMD проблем с запуском игр не имеют.

Для решения этой проблемы разработчики из Microsoft создали эмулятор Prism, который, по сути, является аналогом Rosetta 2 для компьютеров Mac. Используя Prism, пользователи могут запускать x86-приложения на компьютерах с Windows и Arm-процессорами. Однако оказалось, что эмулятор решает проблему не полностью. В ходе тестирования 1300 игр для ПК было установлено, что только около половины из них работают в Prism без ошибок, сбоев и вообще могут запуститься.

В некоторых случаях не работают софт для защиты от читеров, из-за чего даже нетребовательные к ресурсам игры, такие как Fortnite и League of Legends, также не могут быть запущены на компьютерах Copilot+ PC на базе Arm. По всей видимости, быстрого решения этой проблемы не существует. Любопытно, что проблемы в работе Prism отмечались в обзорах Copilot+ PC ещё в июне. В Microsoft, комментируя данный вопрос, рекомендовали пользователям выбирать альтернативный компьютер для обеспечения качественного игрового процесса.

Новые функции Windows 11 на базе искусственного интеллекта появятся на некоторых ноутбуках класса Copilot Plus PC с новейшими чипами AMD и Intel в ноябре, сообщил ресурс The Verge. На данный момент ИИ-функции доступны только на новых моделях на базе Arm-процессоров Qualcomm, хотя в продажу уже поставили ноутбуки на чипах AMD, соответствующие аппаратным требованиям Copilot Plus PC.

Источник изображения: Microsoft

Intel сегодня представила процессоры Intel Core Ultra 200V под кодовым именем Lunar Lake, устройства с которыми начнут получать функции Copilot Plus PC в конце этого года. «Все проекты с процессорами серии Intel Core Ultra 200V и работающие под управлением последней версии Windows смогут получить функций Copilot Plus PC в качестве бесплатного обновления, начиная с ноября», — сообщается в пресс-релизе Intel.

Microsoft ранее сообщила, что ноутбуки с процессорами Intel Lunar Lake и AMD Strix Point получат бесплатное обновление с добавлением ИИ-функций Copilot Plus PC «по мере их появления» без указания дат. Теперь же компания говорит, что новые компьютеры категории Copilot Plus PC с чипами Intel Core Ultra 200V и AMD Ryzen AI 300 получат новые функции ИИ в ноябре, и некоторые «избранные функции могут быть предварительно представлены в сообществе Windows Insider» перед их полномасштабным развёртыванием.

Ноутбуки категории Copilot Plus PC получат новую функцию Microsoft Auto Super Resolution, конкурента DLSS, которая повышает частоту кадров в играх за счёт масштабирования контента. Для её работы используются возможности нейропроцессорного блока (NPU), чтобы разгрузить центральный процессор и графический ускоритель от обработки масштабирования.

Кроме того Copilot Plus PC на чипах Intel и AMD с бесплатным обновления получат функции обработки изображений с помощью в приложении «Фото», ИИ-генератор изображений Cocreator в Paint, функцию Live Captions с поддержкой перевода на лету и улучшенные эффекты Windows Studio. Также новые ПК смогут задействовать NPU для ускорения работы таких приложений, как DaVinci Resolve Studio.

Microsoft также планирует внедрить на компьютерах Copilot Plus PC функцию Recall, запуск которой пришлось отложить из-за возможных проблем с обеспечением конфиденциальности. Компания намерена выпустить её для тестеров Windows Insider в октябре, прежде чем функция появится на ноутбуках в рамках обновления ОС Windows.

Производители ПК с энтузиазмом оценивают перспективы выхода на рынок моделей, соответствующих требованиям Copilot+ PC, которые позволяют ускорять работу систем искусственного интеллекта на локальном уровне. Компания Acer ожидает, что уже в третьем квартале 2025 года такие компьютеры будут составлять до 40 % отгружаемой ею продукции.

Источник изображения: Acer

Даже при отсутствии соединения с интернетом такие ПК будут способны генерировать изображения по текстовому описанию или переводить речь с одного языка на другой в масштабе реального времени. Acer собирается выделить свою продукцию семейства Copilot+ PC на фоне конкурентов, оснастив свои компьютеры такого класса дополнительными функциональными клавишами. В области тачпэда появится индикатор активности, который будет подсвечиваться при использовании специализированного сопроцессора для обработки команд ИИ.

Acer собирается выпускать компьютеры Copilot+ PC, оснащаемые процессорами всех разработчиков, одобренных для этого семейства систем компанией Microsoft, как признался в интервью Nikkei генеральный директор тайваньского производителя Джейсон Чэнь (Jason Chen). Помимо Qualcomm, поставлять совместимые процессоры собираются Intel и AMD. В Японии первые ноутбуки с поддержкой данных функций сейчас предлагаются по цене $1800, их доля не превышает пары процентов в структуре поставок продукции Acer. В первую очередь объёмы поставок Copilot+ PC компания собирается наращивать в корпоративном сегменте, через год их доля должна будет вырасти до 40 %.

Напомним, что конкурирующая Lenovo в этом году рассчитывает приблизить такой показатель к 10 %, а в 2026 году покорить рубеж в 50 или 60 %. Центральные процессоры для Copilot+ PC в следующем году подешевеют, как считает руководство Acer, и это позволит увеличить объёмы поставок соответствующих ПК. По прогнозам Gartner, рынок ПК в целом по итогам текущего года вырастет на 4 % до 250,4 млн штук.

Инвестиции в помощников по программированию на базе ИИ достигли почти $1 млрд с начала прошлого года. Microsoft, Amazon и Google включились в гонку за лидерство в этом сегменте, внедряя технологию в свои продукты, что уже приносит значительную прибыль как компаниям, так и разработчикам. Более того, в Microsoft заявили, что скоро перестанут нанимать программистов, которые не используют ИИ-помощников.

Источник изображения: Copilot

Компании, разрабатывающие ИИ-ассистентов для программирования, такие как Replit, Anysphere, Magic, Augment, Supermaven и Poolside AI, привлекли $433 млн только в этом году, что в совокупности с инвестициями прошлого года составляет почти $1 млрд. Стремление вкладывать деньги в ИИ-помощников для программирования указывает на то, что кодинг может стать первой областью, которая существенно трансформируется под влиянием последней волны технологий ИИ.

«Сегодня программная инженерия и программирование — это номер один среди областей, на которые влияет ИИ, — заявил Хади Партови (Hadi Partovi), генеральный директор некоммерческой образовательной организации Code.org, давний инвестор проектов Кремниевой долины и советник Airbnb, Uber, Dropbox и Facebook✴. — На сегодняшний день программирование без ИИ немного похоже на письмо без текстового редактора».

Интересно, что растущая уверенность в преимуществах ИИ-кодирования контрастирует с вопросами некоторых инвесторов об экономической выгоде генеративного ИИ и вероятной окупаемости прогнозируемых триллионных инвестиций в крупнейшие технологические компании (Big Tech) в вычислительную инфраструктуру для поддержки этой технологии в ближайшие годы. Но в то время как некоторые инвесторы сомневаются в экономической выгоде ИИ и рентабельности инвестиций Big Tech в его инфраструктуру, в Кремниевой долине наоборот растёт уверенность.

Ханна Сил (Hannah Seal), партнёр Index Ventures, которая инвестировала в стартап Augment, сказала, что «гораздо проще монетизировать ИИ, если вы можете встроить свой продукт в существующий рабочий процесс и сделать все преимущества мгновенно видимыми». Для неё вопросы монетизации ИИ-инструментов заключаются в следующем: «Каково время получения прибыли и насколько эта прибыль значима?». При этом она отмечает, что с ИИ-помощниками по кодированию таких вопросов уже не возникает.

Энтузиазм в отношении ИИ побудил стартапы и технологических гигантов Microsoft, Amazon, Meta✴ и Google бороться за доминирование в переполненном секторе, создавая ИИ-помощников и агентов, которые могут писать и редактировать программный код. Более того, руководитель совета директоров Code.org, в который входят Дэвид Тредвелл (David Treadwell), глава электронной коммерции Amazon, и Кевин Скотт (Kevin Scott), технический директор Microsoft, недавно сказал Партови, что их компания к концу года прекратит нанимать людей, которые программируют без использования ИИ.

Напомним, GitHub, пионер в области ИИ-кодирования, стал одним из первых, кто интегрировал большие языковые модели (LLM) в свои продукты. «Когда мы начали использовать GPT-3, мы быстро поняли, что он очень хорошо пишет код, и решили создать на его основе GitHub Copilot», — заявил Томас Дохмке (Thomas Dohmke), генеральный директор GitHub. GitHub Copilot, был запущен в 2022 году и уже насчитывает почти 2 млн платных подписчиков и, как утверждает Дохмке, он пишет код гораздо лучше, чем средний разработчик.

Источник изображения: GitHub

Доход GitHub, по состоянию на апрель, увеличился на 45 % по сравнению с прошлым годом, и по словам генерального директора Microsoft Сатьи Наделлы (Satya Nadella), годовой доход GitHub на начало этого месяца составил $2 млрд. «Copilot стал причиной более чем 40-% роста доходов GitHub в этом году и уже превышает по размеру весь бизнес GitHub с момента его приобретения», — отметил Наделла.

Тем не менее, IT-отделы крупных компаний всё ещё имеют некоторые опасения по поводу безопасности использования автоматизированных инструментов программирования для создания кода, готового к производству. Дохмке подчеркнул, что пока не следует ожидать внедрения сгенерированного искусственным интеллектом кода без ручного тестирования.

Компания Microsoft объявила, что участники программы предварительной оценки Windows Insider получат доступ к спорной функции Recall в Windows 11 в октябре этого года. Изначально софтверный гигант планировал запустить Recall на первом поколении компьютеров Copilot Plus PC летом, но в итоге отказалась от этой идеи из-за проблем с конфиденциальностью и безопасностью.

Источник изображения: Microsoft

В середине июня Microsoft заявила, что функция Recall, которая фиксирует активности пользователей ПК, чтобы они могли позднее продолжить выполнение начатых задач, будет доступна инсайдерам «в ближайшие недели». Однако теперь похоже, что это случится в ближайшие месяцы. «Принимая на себя обязательства предоставить клиентам надёжную и безопасную функцию Recall (предварительная версия) на компьютерах Copilot Plus PC, мы сообщаем, что функция Recall станет доступна участникам программы Windows Insider начиная с октября», — говорится в сообщении Microsoft.

Напомним, функция Recall использует работающие локально ИИ-алгоритмы для регистрации действий пользователя в приложениях, во время онлайн-бесед, просмотра веб-страниц и др. Сохранённые в процессе работы Recall данные отображаются на временной шкале, за счёт чего пользователь может найти интересующую его информацию из прошлого и вернуться к взаимодействию с ней. При этом Recall не будет работать на любом ПК с Windows 11, поскольку ей требуется процессор со встроенным нейронным сопроцессором (NPU).

Microsoft утверждала, что функция Recall является безопасным и конфиденциальным инструментом, который работает локально на устройстве пользователя. Однако исследователи в сфере информационной безопасности обнаружили, что собираемые этим инструментом данные хранились в незашифрованной базе, из-за чего вредоносное программное обеспечение потенциально могло получить доступ к данным пользователя. В настоящее время Microsoft стремится переработать Recall. Ожидается, что функция не будет работать по умолчанию, как это планировалось, а пользователям придётся активировать её самостоятельно. Кроме того, база данных Recall будет шифроваться, а для аутентификации будет задействован инструмент Windows Hello.

В Microsoft не уточнили, что по каким именно причинам запуск Recall откладывается. При этом в компании напомнили, что «безопасность по-прежнему остаётся нашим главным приоритетом, и когда Recall станет доступна инсайдерам в октябре, мы опубликуем в блоге более подробную информацию». Вполне возможно, что Microsoft попросту нужно больше времени, чтобы убедиться в безопасности новой функции. Однако это может означать, что в стабильных версиях Windows 11 функция Recall в этом году уже не появится, поскольку тестирование новых инструментов среди инсайдеров обычно занимает несколько месяцев.

Компания GitHub представила инструмент на базе искусственного интеллекта Copilot Autofix для помощи программистам в быстром устранении ошибок в коде, которые впоследствии могут стать одной из главных причин нарушений безопасности всего проекта.

Источник изображения: Copilot

Copilot Autofix анализирует дефекты, обнаруженные в запросах на внесение изменений, предоставляет объяснения и предлагает исправления. Разработчики могут с лёгкостью отклонить, скорректировать или принять предложения ИИ-бота. При этом инструмент способен обрабатывать широкий спектр уязвимостей, включая SQL-инъекции и межсайтовый скриптинг (XSS), помогая устранять в коде как новые, так и существующие погрешности, поясняет ресурс TechSpot.

Источник изображения: TechSpot/GitHub

Как отмечается в пресс-релизе GitHub, «разработка программного обеспечения движется с головокружительной скоростью, и разработчики постоянно выпускают новые проекты и дорабатывают старые. Однако, несмотря на все их усилия, уязвимости безопасности всё же попадают в рабочий код, причиняя много неприятностей».

Хотя инструменты сканирования могут обнаружить недостатки, их исправление требует специальных знаний и значительного времени. Другими словами, проблема не всегда заключается в выявлении уязвимостей, а в необходимости их быстрого устранения. Во время публичной бета-версии ранее в этом году GitHub обнаружил, что разработчики решали проблемы безопасности более чем в три раза быстрее с помощью Copilot Autofix по сравнению с ручным исправлением.

Microsoft стремится интегрировать максимальное количество ИИ-функций в свой веб-обозреватель. Новую порцию ИИ-улучшений получил и встроенный в Microsoft Edge инструмент для чтения документов PDF. ИИ-функция, добавленная в Copilot, сканирует документ, выделяя ключевые слова и фразы, а затем предоставляет пользователю дополнительную информацию. Обработка, вероятно, производится на серверах Microsoft, что может нарушить конфиденциальность.

Источник изображения: Microsoft

Новый инструмент доступен при нажатии кнопки, появившейся рядом с существующей кнопкой «Спросить Copilot» в интерфейсе PDF-ридера. Она запускает сканирование всего PDF-документа для генерации соответствующих ключевых слов и фраз. Затем пользователь может выбрать любое из них, чтобы открыть боковую панель Copilot в браузере и получить больше контекста или информации, связанной с этим ключевым словом.

Содержимое PDF-файла, вероятно, обрабатывается и анализируется серверами Microsoft, что потенциально может привести к утечке конфиденциальной информации. Скорее всего, при обработке документов также будет производиться масштабный сбор данных для улучшения модели ИИ и изучения пользовательского опыта. Стоит дважды подумать, прежде чем использовать новую функцию для обработки документов с чувствительной информацией, например, налоговых форм или финансовых договоров.

Весьма вероятно, что в ближайшее время Microsoft расширит область применения новой ИИ-функции, добавив в список обрабатываемых файлов документы Word, электронные таблицы Excel и презентации PowerPoint.

Эта функция — лишь одна из нескольких возможностей на базе ИИ, которые были добавлены в Edge. Ранее обозреватель получил функцию интеллектуального поиска, которая обнаруживает связанные совпадения и слова, что упрощает поиск информации на странице. «Генератор тем» на базе ИИ преобразует текстовые подсказки в визуальные дизайны. ИИ даже научился автоматически присваивать названия группам вкладок для эффективного просмотра.

Сейчас, если судить по предварительной сборке Canary, Microsoft работает над улучшением способности ИИ в Edge предлагать пользователю сайты для просмотра. Точная природа и функциональность этих нововведений пока не известна, но, учитывая стремление Microsoft к массированному внедрению ИИ везде, где только можно, рано или поздно они появятся.

На конференции Black Hat USA исследователь в области кибербезопасности Майкл Баргури (Michael Bargury) продемонстрировал уязвимости помощника с искусственным интеллектом Microsoft Copilot — потенциальные злоумышленники могут использовать его для кибератак. Его проект указывает, что организациям стоит пересмотреть политики безопасности при использовании ИИ-технологий, включая Copilot.

Источник изображения: Ivana Tomášková / pixabay.com

Баргури выделил несколько методов, с помощью которых злоумышленники могут использовать Microsoft Copilot при осуществлении кибератак. Плагины Copilot, в частности, позволяют устанавливать бэкдоры, эксплуатируемые при работе других пользователей с ИИ, а также служат подспорьем при осуществлении атак, при которых задействуются методы социальной инженерии.

Используя метод инъекций в запросах, хакер изменяет ответы ИИ в соответствии со своими целями — это позволяет производить скрытный поиск и извлечение данных в обход стандартных мер защиты файлов и информации. ИИ также оказывается эффективным оружием в атаках с применением методов социальной инженерии — Copilot можно использовать при создании убедительных фишинговых писем и подготовке других методов взаимодействия с потенциальными жертвами, у которых киберпреступник пытается получить конфиденциальную информацию.

Чтобы наглядно продемонстрировать эти уязвимости, Баргури создал инструмент LOLCopilot — он предназначается для этичных хакеров и работает в любом клиенте с поддержкой Microsoft 365 Copilot, используя конфигурации по умолчанию. Специалисты по кибербезопасности могут с его помощью исследовать сценарии эксплуатации уязвимостей Copilot для кражи данных и организации фишинговых атак.

Разработчик указывает, что существующие настройки безопасности Microsoft Copilot по умолчанию недостаточно эффективны для предотвращения этих атак. Наличие инструмента для получения доступа и обработки больших объёмов данных свидетельствует о риске, с которым сопряжена работа систем ИИ. Исследователь рекомендует внедрять дополнительные меры защиты, в том числе многофакторную авторизацию и строгий контроль доступа к данным. Кроме того, необходимо информировать сотрудников о связанных с ИИ рисках и иметь комплексные протоколы реагирования на инциденты.

На квартальной отчётной конференции руководство Qualcomm никак особо не выделяло выручку, полученную от реализации процессоров семейства Snapdragon X для так называемых AI PC, но дало понять, что в следующем году на рынке появятся ПК на их основе, чья стоимость будет начинаться с отметки $700.

Источник изображения: Qualcomm

Напомним, что сейчас самым доступным ноутбуком на базе процессора Qualcomm Snapdragon X Plus является Microsoft Surface за $999, однако компактную настольную систему на базе Snapdragon X Elite можно приобрести на $100 дешевле. «Глядя в 2025 год, в дополнение к появлению новых моделей устройств, наш перспективный план выпуска продуктов семейства X расширится, чтобы охватывать изделия стоимостью $700 без необходимости жертвовать производительностью нейронного сопроцессора (NPU)», — заявил генеральный директор Qualcomm Криштиано Амон (Cristiano Amon), которого цитирует ресурс The Verge. Прямого указания на то, что это будут именно ноутбуки, глава компании не делал.

В финансовой отчётности Qualcomm выручка от реализации процессоров для ПК пока не обособляется, поскольку делать это сейчас слишком рано, но руководство компании подтвердило, что ведёт с OEM-производителями работу над созданием следующего поколения Copilot+ PC. В начале сентября в Германии будет проводиться выставка IFA 2024, на ней Qualcomm намеревается представить новые продукты для ПК. По мнению Амона, Qualcomm продолжит оставаться одним из ведущих поставщиков компонентов для сегмента AI PC. «Мы верим, что ПК станут новым серьёзным драйвером диверсификации для компании», — заявил генеральный директор.

И всё же, переход рынка на AI PC, по мнению Амона, будет стабильно медленным. При этом уже сейчас некоторые модели ПК на основе процессоров Snapdragon X уже распроданы. Новый процессор в более традиционном для себя мобильном семействе Snapdragon 8 компания собирается представить до конца октября, а смартфоны на его основе выйдут либо к концу этого года, либо к началу следующего. Компании также удалось заключить долгосрочные лицензионные заключения с двумя крупными китайскими производителями смартфонов.