Компания Google расширяет присутствие функции «Помоги мне написать» на веб-версию своего почтового сервиса Gmail. Этот инструмент позволит пользователям генерировать письма с помощью ИИ-помощника, основой которого стала нейросеть Gemini. Как и на мобильных устройствах, предложение использовать упомянутую функцию будет появляться при открытии пустого черновика Gmail.

Источник изображения: Solen Feyissa / unsplash.com

На данном этапе функция «Помоги мне написать» стала доступна пользователям с подпиской Google One AI Premium, а также тем, кто имеет доступ к Gemini в Workspace. Помимо генерации черновика сообщения данный инструмент может давать советы, как лучше написать то или иное сообщение, как сократить текст послания и др.

Google также добавила ярлык для функции «полировка», которая является частью набора инструментов «Помоги мне написать». Он будет отображаться в черновиках сообщений, содержащих более 12 слов. В веб-версии Gmail для использования данной функции можно нажать соответствующий ярлык или сочетание клавиш Ctrl+H. В мобильной версии сервиса эта опция заменит существующий ярлык «Улучшить мой черновик». Вместо того, чтобы проводить пальцем по экрану, чтобы посмотреть варианты доработки, приложение будет автоматически вносить корректировки. После использования новой функции пользователь сможет доработать сообщение с помощью других ИИ-инструментов.

Google представила технологию для маркировки и распознавания текстов, созданных генеративными моделями ИИ. Инструмент под названием SynthID Text не повлияет на качество и скорость генерации контента, и будет доступен совершенно бесплатно для разработчиков и компаний.

Источник изображения: Copilot

SynthID Text работает следующим образом. При генерации текста модель предсказывает, какой «токен» (символ или слово) будет следующим, основываясь на вероятности появления каждого токена, и добавляет дополнительную информацию в распределение этих вероятностей, модулируя скорректированные символы. В конечном итоге из них формируется водяной знак (watermark), который помогает определить, был ли текст создан ИИ. «Окончательный паттерн вероятностей слов, выбранных моделью, в сочетании с изменёнными оценками вероятностей будет считаться водяным знаком», — объясняется в блоге компании.

Google утверждает, что SynthID Text, который уже весной был интегрирован в Gemini, не влияет на качество, точность или скорость генерации. При этом текст, который был обрезан, перефразирован или изменён может обрабатываться несколько хуже. Что касается фактов, то «в ответах на слишком определённые и однозначные вопросы меньше возможностей для корректировки распределения токенов без ущерба для фактической точности».

Стоит отметить, Google — не единственная компания, работающая над технологией нанесения водяных знаков на текст, созданный ИИ. Например, OpenAI также разрабатывала методы нанесения «вотермарков», но отложила их запуск из-за технических препятствий и коммерческих соображений.

Если технология будет широко внедрена, то возможно получится переломить ситуацию с неточными, но все более популярными «детекторами ИИ», которые ошибочно определяют студенческие работы или эссе как сгенерированные нейросетью. Как пишет TechCrunch, «вопрос остаётся открытым». Однако в некоторых странах уже принимаются меры. Например, правительство Китая ввело обязательную маркировку контента, созданного ИИ, а штат Калифорния (США) собирается последовать этому примеру.

Как Google пообещала в августе, модель искусственного интеллекта для генерации изображений стала доступной для всех пользователей службы Gemini.

Источник изображения: x.com/GeminiApp

Обновлённую модель Imagen 3, представленную в мае на мероприятии Google I/O 2024, по версии разработчика, отличают три аспекта:

• потрясающее качество изображения — чёткие детали, яркие цвета и уменьшенное число недостатков;
• реалистичные визуальные эффекты — яркие фотореалистичные детали;
• разнообразие стилей — от классического масла до современного цифрового искусства.

Для создания изображений пользователям необходимо использовать в запросах к Gemini слова вроде «нарисуй» или «создай»; можно указать желаемый стиль, например, «фотореалистичная акварель» или «мультяшная иллюстрация»; помогут и детальные пояснения. В ответ чат-бот пояснит, что картинка создаётся при помощи Imagen 3; кроме того, скачиваемый файл получит пометку SynthID. Воспользоваться генератором изображений могут и пользователи бесплатных учётных записей, но для них возможности пока ограничены — система откажется создавать картинки с людьми. Первыми доступ к Imagen 3 получили англоязычные пользователи подписок Gemini Advanced, Business и Enterprise.

С 1 октября Google сделала бесплатной работу с голосовым помощником Gemini Live на телефонах под управлением Android. Система помогает в управлении устройствами, ориентируется в происходящем на экране и генерирует тексты в различных приложениях.

Источник изображения: blog.google

Запуск Gemini Live производится долгим нажатием кнопки питания — вместо традиционного значка «Google Ассистента» появилась иконка с голубой звездой Gemini. Интеллектуальный помощник понимает, что происходит на экране — ему, например, можно задать вопрос о просматриваемом в настоящий момент видео на YouTube. В любом приложении он может создать изображение или текст. Ранее эти функции были доступны только пользователям подписки Gemini Advanced — в первый месяц она бесплатна, а в каждый последующий придётся отдавать $20. Если нажать и удерживать кнопку питания, появится всплывающее окно со значком сервиса в правом нижнем углу; далее потребуется изучить одностраничное руководство и выбрать мужской или женский голос с одним из диалектов английского языка.

В интерфейсе Gemini Live можно общаться с ИИ естественным образом, не беспокоясь о речевых ошибках, запинках или акценте, которые могли помешать «Google Ассистенту». При запущенном приложении микрофон по умолчанию включён — чтобы его отключить, придётся нажать соответствующие кнопки в интерфейсе. Расшифровки разговоров хранятся в журнале пользователя Gemini Apps в течение 72 часов. Для сравнения, представленная ранее функция Microsoft Copilot Vision не предполагает сохранения данных ни локально на устройстве, ни в облаке — они удаляются сразу по завершении работы с системой, уверяет разработчик.

Google выпустила обновление приложения Gmail для Android и iOS — более тесная интеграция с ИИ Gemini помогла повысить качество умных ответов. О новом механизме работы функции компания рассказала ещё в мае: теперь ИИ учитывает содержимое всей цепочки писем.

Источник изображения: Solen Feyissa / unsplash.com

Пользователю доступен предварительный просмотр нескольких вариантов умных ответов — можно выбрать тот, что наиболее полно соответствует его потребностям или стилю письма. Идея нововведения в том, чтобы сэкономить время тем, кто ведёт активную переписку по электронной почте, а также разнообразить набор доступных автоматических ответов — в обновлённом варианте они содержат даже начальное приветствие и подпись.

Умные ответы с учётом контекста доступны для всех подписчиков планов Gemini Business, Enterprise, Education, Education Premium и Google One AI Premium. Обновлённая функция основана на оригинальных «умных ответах», которые дебютировали в Gmail в 2017 году. Ранее Google представила функцию Gmail Q&A — она позволяет задавать чат-боту вопросы, для ответа на которые ИИ придётся анализировать переписку пользователя.

Google запустила бесплатный голосовой режим Gemini Live для всех пользователей Android. Эта функция, доступная через приложение Gemini, позволяет вести голосовой диалог с ИИ-ассистентом в реальном времени, прерывать его ответы и выбирать различные голоса.

Источник изображения: Google Gemini App / X

Google впервые анонсировала Gemini Live на презентации Pixel 9 в прошлом месяце, но до сих пор эта функция была доступна только подписчикам Gemini Advanced. Как сообщает ресурс 9to5Google, для активации режима достаточно выбрать новую иконку в форме волны в правом нижнем углу интерфейса.

Gemini Live предлагает функциональность, схожую с голосовым чатом ChatGPT, но обладает рядом уникальных особенностей. Пользователи могут не только задавать вопросы голосом, но и прерывать ответы ИИ-ассистента в середине фразы, что позволяет вести с ним более естественный и динамичный диалог. Интерфейс предоставляет опции «hold» для приостановки ответа Gemini и «end» для завершения беседы, что даёт пользователю полный контроль над диалогом.

Для ещё большей персонализации взаимодействия с ИИ пользователи могут выбрать для ассистента один из понравившихся голосов. На данный момент Gemini Live работает только на английском языке, но Google уже сообщила о планах расширения языковой поддержки и разработки версии для iOS.

Google приступил к тестированию новой функции Ask Photos (спроси у фото) на основе искусственного интеллекта, с помощью которой можно задавать вопросы по фотографиям и получать ответы на основе их содержимого. Также обновится функция поиска в приложении Google Photos, сообщает The Verge, позволив искать изображения более интуитивным способом.

Источник изображения: Solen Feyissa/Unsplash

Ask Photos использует ИИ-ассистента Gemini, который анализируют фотографии и предоставляют ответы вместе с показом изображений, соответствующих запросу. Это значительно облегчит поиск информации о прошедших событиях и поможет пользователям вспомнить важные моменты, сохранившиеся на их фотографиях. Google отмечает, что с помощью этой функции можно также выполнять различные задачи, такие как подведение итогов недавних поездок или выбор лучших семейных фотографий для совместного альбома.

Кроме того, Google улучшила традиционный поиск изображений в приложении Google Photos, который теперь называется «классическим поиском» (classic search). Пользователи смогут искать фотографии, используя естественный язык, например, вводя запросы вроде «Алиса и я смеёмся». Для удобства поиск также будет упорядочен по дате или релевантности. Пока эта функция будет доступна на английском языке как для Android, так и для iOS, а поддержка других языков появится в ближайшие несколько недель.

В рамках подготовки к этим изменениям произошла замена вкладки «Библиотека» на новую страницу «Коллекция», которая должна упростить поиск фотографий и видео. Google обещает, что поиск на интуитивно понятном языке поможет пользователям находить конкретные изображения без необходимости прокручивать тысячи снимков или фильтровать их по местоположению.

Google меняет подход к поиску информации в Gmail. Вместо того чтобы искать письма вручную, пользователи смогут задавать вопросы чат-боту Gemini, который проанализирует всю почту и предоставит нужные данные. Новая функция, получившая название Gmail Q&A, будет пока доступна на устройствах под управлением Android, сообщил TechCrunch.

Источник изображения: Solen Feyissa/Unsplash

Gmail Q&A позволяет взаимодействовать с искусственным интеллектом Google Gemini непосредственно в приложении Gmail, используя его как персонального помощника для работы с электронной почтой. Gemini может анализировать весь почтовый ящик пользователя и выполнять различные задачи, например, предоставлять краткие обзоры писем по определённой теме или искать конкретную информацию в переписке.

Например, можно попросить Gemini «ввести в курс дела по письмам о квартальном планировании» или узнать, «сколько компания потратила средств на последнее маркетинговое мероприятие». Однако, как и другие ИИ-модели, Gemini может допускать ошибки и неточности, поэтому рекомендуется проверять данные, которые он предоставляет.

Традиционно, чтобы найти информацию в Gmail, надо было использовать строку поиска. Сейчас строка поиска также будет доступна, однако рядом с ней будет добавлена кнопка Gemini. Теперь, вместо того чтобы искать нужное письмо, пользователи по желанию смогут получать необходимую информацию непосредственно от чат-бота, который будет ссылаться на источник в своих ответах.

На данный момент Gmail Q&A доступна только подписчикам Gemini и Google One AI Premium. Стоимость подписки составит около 20 долларов в месяц. Доступ к функции возможен через значок чёрной звезды в правом верхнем углу приложения, который уже стал символом Gemini в продуктах Google. Позднее Gmail Q&A сможет работать не только с письмами, но и с файлами аккаунта Google Drive.

Google также добавит Gemini во все свои существующие продукты, включая Google Docs, Google Calendar и другие. Как отмечает TechCrunch, к сожалению маловероятно, что функция Gmail Q&A в ближайшее время станет доступна для бесплатных пользователей. Компания также анонсировала скорое появление этой функции на устройствах iOS.

Компания Google скоро вернёт пользователям доступ к генератору картинок в ИИ-чат-боте Gemini. Функция была удалена из чат-бота в феврале из-за того, что что она допускала серьёзные исторические ошибки в изображении людей, связанные с расовыми и гендерными вопросами. К примеру, расовое разнообразие солдат по запросу «римский легион» — явный анахронизм.

Источник изображения: Google

Ранний доступ к новому генератору изображений Imagen 3 от Google откроется платным пользователям Gemini на тарифах Advanced, Business и Enterprise в ближайшие дни, сообщил в официальном блоге Google Дэйв Ситрон (Dave Citron), старший директор по продуктам Gemini. Изначально функция будет поддерживать запросы только на английском языке.

«Мы внесли технические исправления в продукт, а также поработали над более продвинутыми алгоритмами оценки и защитой от red-teaming-атак», — написал Ситрон.

В феврале этого года Google приостановила работу функцию генерации изображений в Gemini, объяснив это тем, что она предлагает «неточности» при генерации исторических изображений. Компания приняла решение направить генератор изображений Gemini на доработку менее чем через сутки после поступления первых жалоб.

По словам Ситрона, новый генератор Imagen 3 «не поддерживает создание фотореалистичных идентифицируемых лиц, изображений несовершеннолетний или чрезмерно кровавые, жестокие или сексуальные сцены».

«Конечно, как и в случае с любым генеративным инструментом ИИ, не каждое изображение, создаваемое Gemini, будет идеальным, но мы продолжим прислушиваться к отзывам пользователей и будем совершенствовать наш продукт».

Он также пообещал, что в дальнейшем пользоваться генератором изображений смогут больше людей, а сама функция получит поддержку дополнительных языков.

Google обновила инструменты системы искусственного интеллекта Gemini в Gmail — теперь ИИ поможет в доработке черновиков писем, которые пользователь уже написал. К присутствующим в Gmail функциям «Помощь в написании», «Формализация» и «Уточнение» добавилась опция «Доработать» (Polish).

Источник изображений: workspaceupdates.googleblog.com

Чтобы с большей очевидностью указать пользователям на наличие новых функций, Google добавила ярлыки на них прямо в текст письма в приложениях для Android и iOS. Инструменты доступны только для подписчиков Google One AI Premium и тех, кто заплатил за дополнение Gemini в Workspace. При переходе к написанию письма эти пользователи увидят ярлык «Помощь в написании», по нажатии на который Gemini сам пишет черновик. Когда в черновике набираются более 12 слов, появляется ссылка на новую функцию «Доработать мой черновик» (Refine my draft), оформленная серыми буквами под основным текстом.

Можно также провести большим пальцем по тексту, и система предложит выбор «Доработать», «Формализовать», «Дополнить» или, напротив, «Сократить». Gemini может и полностью переписать черновик. Если ярлык «Доработать мой черновик» не появляется, эта функция также доступна по нажатии кнопки со значком карандаша.

Новая линейка Google Pixel 9 отличается от других Android-смартфонов компании одной большой деталью: в качестве стандартного цифрового помощника в этих устройствах используется новый ИИ-чат-бот Gemini, а не привычный Google Assistant.

Источник изображения: Google

«В мобильном сегменте Gemini является эволюцией Google Assistant. Пользователи по-прежнему могут использовать классический Google Assistant, но Gemini — новый Assistant», — сказала в интервью Engadget вице-президент и генеральный менеджер Gemini Experiences компании Google Сисси Сяо (Sissie Hsiao).

По словам Сяо, Gemini способен выполнять все задачи, которые может делать классический Google Assistant, и даже больше. Он может выключать свет в доме, оснащённом умными устройствами, включать музыку или отвечать на более сложные вопросы, например, о погоде и её разнице между тем или иным городом.

«Он эффективнее даже в тех вещах, которые люди привыкли выполнять с помощью Assistant. Это действительно значительная эволюция в генеративном ИИ. Он может создавать изображения и текст, но также выполнять простые задачи более эффективным и более естественным образом», — заявила Сяо.

Следует прояснить, что Gemini можно использовать в качестве цифрового помощника на большинстве современных Android-смартфонов, будь то модели Pixel или любые другие модели от других производителей, но в качестве возможной опции, а не в качестве стандартного приложения. Для этого необходимо запустить Google Assistant, а затем согласиться на его замену на Gemini.

Ранее Google воздерживалась от ответа на вопрос, заменит ли новый Gemini старый Google Assistant в будущем. «Суть в том, что Gemini — это опциональная возможность на смартфоне. Я думаю, что со временем Gemini будет развиваться и становиться всё более продвинутым. Сегодня нам нечего анонсировать, но у потребителей есть выбор. Теперь они могут сделать выбор в пользу нового помощника на базе искусственного интеллекта. Они могут попробовать его в работе, и мы видим, что люди это делают. Мы получаем много хороших отзывов», — сказал Самир Самат (Sameer Samat), президент экосистемы Android в Google в интервью Wired в мае.

На презентации Pixel 9 компания Google объявила о запуске нового режима голосового чата для Gemini под названием «Gemini Live». Эта функция во многом напоминает функцию голосового чата ChatGPT, предлагая на выбор несколько вариантов голосов и возможность вести разговор в естественной манере, включая прерывание ответов ИИ в любое время.

Источник изображения: Google

Как поясняет TheVerge, общение с Gemini Live может происходить в свободной форме, позволяя прерывать ответы на полуслове, приостанавливать разговор не нажимая никаких кнопок и возобновлять его позднее. Функция также работает в фоновом режиме и при заблокированном экране смартфона. Интересно, что о планах запуска Gemini Live компания Google впервые объявила на своей конференции разработчиков I/O ранее в этом году, где также было сказано, что «Live» сможет интерпретировать видео в режиме реального времени.

В дополнение к этому, Google представила 10 новых голосов для Gemini, которые пользователи смогут выбрать по своему усмотрению. Функция начала развёртываться сегодня на устройствах Android, пока только на английском языке, но нам обещают, что в ближайшие недели Gemini Live станет доступен на iOS и получит поддержку дополнительных языков.

Источник изображения: Google

Помимо Gemini Live, анонсированы и другие функции для ИИ-ассистента, в частности возможность анализировать контекст экрана пользователя, что напоминает функцию ИИ, анонсированную недавно Apple на мероприятии WWDC. После того как пользователь выберет опцию «Ask about this screen» (Спросить о том, что изображено на экране) или «Ask about this video» (Спросить, что показано на видео), Gemini сможет предоставить информацию, включая извлечение деталей, например, пунктов назначения из туристических видео, для добавления в Google Maps.

Отметим, что Gemini Live будет доступен пока только для подписчиков Gemini Advanced.

Китайский электронный гигант Xiaomi работает с Google над интеграции большой языковой модели Gemini в новый флагманский телефон производителя, предназначенный для международного рынка.

Источник изображения: x.com/leijun

«Рад работать совместно с Google над будущими флагманскими устройствами Xiaomi для международных рынков. <..> Используя Google Cloud и Gemini, мы собираемся предложить более умные и интуитивно понятные функции», — написал в соцсети X глава Xiaomi Лэй Цзюнь (Lei Jun) после объявления, сделанного на двухдневном мероприятии Google I/O Connect China в Пекине, которое завершилось в минувший четверг.

Смартфоны Xiaomi 15, как ожидается, будут представлены в этом году. О намерении интегрировать какие-либо большие языковые модели в китайскую версию устройств сообщений пока не было, но известно, что Xiaomi разработала собственную модель MiLM — ещё в мае соответствующие документы появились у регуляторов. Система Google Gemini, как и многие другие зарубежные службы ИИ, недоступна в материковом Китае, где местные власти проводят их проверку перед выпуском в общий доступ.

Источник изображения: blog.google

Совместный проект с Google может придать Xiaomi определённый импульс на международном рынке — компания, по версии аналитиков IDC, во II квартале стала третьим поставщиком смартфонов в мире с долей 14,8 % рынка. Первой и второй стали Samsung и Apple с долями 18,8 % и 15,8 % соответственно. Мировые поставки смартфонов во II квартале выросли на 6,5 % год к году и достигли 285,4 млн единиц, добавили в IDC.

Apple в этом году намеревается интегрировать в свои iPhone собственную систему Apple Intelligence, но в Китае компания, как ожидается, воспользуется услугами местного поставщика ИИ-решений. Пакет функций Galaxy AI, который появился на флагманских Samsung Galaxy S24 в этом году, основан на технологиях Google Gemini, а в Китае их заменит большая языковая модель Baidu Ernie.

Технологии Google Gemini интегрирует в международную версию своего флагмана и китайская Oppo — она вместе с Vivo заняла на мировом рынке смартфонов четвёртое место с долей 9 % рынка. На прошедшем мероприятии Oppo уже продемонстрировала функции на базе Gemini: перевод в реальном времени, составление сводок статей и генерацию мультимодального контента. Функции Gemini уже доступны в международной версии Oppo Reno12, и в этом году их работа будет улучшена.

Сервис YouTube тестирует новую функцию под названием Brainstorm with Gemini, с помощью которой блогеры смогут находить новые идеи для своих видео, придумывать интересные заголовки, создавать миниатюры. Упомянутый инструмент был презентован в видеоролике, который появился на канале Creator Insider.

Источник изображения: yousafbhutta/Pixabay

Появление новой функции может дать видеохостингу определённые преимущества перед конкурентами, поскольку пользователям будет предложено то, чего пока больше нигде нет. Кроме того, Google имеет смысл интегрировать ИИ-бота с YouTube, чтобы побудить блогеров больше использовать ИИ-инструменты компании и меньше взаимодействовать с нейросетями конкурентов, такими как ChatGPT от OpenAI.

Источник отмечает, что YouTube с мая этого года уже тестирует подобный ИИ-инструмент, который, как ожидается, должен дать авторам контента необходимое вдохновение для создания новых роликов. Brainstorm with Gemini предоставляет похожие возможности и разработчики, в том числе, хотят оценить, насколько ИИ-функция будет популярной.

Взаимодействовать с представленной функцией можно через YouTube Studio. На данном этапе Brainstorm with Gemini доступна ограниченному числу пользователей YouTube. Разработчики намерены собрать отзывы участников тестирования, прежде чем принять решение о более масштабном распространении интеграции сервиса с ИИ-ботом.

В Google Home скоро появятся новые функции, такие как автоматизация задач путём текстовых и голосовых команд, озвучивание событий, которые засняла камера видеонаблюдения Nest, а также появится обновлённый Google Assistant с совершенно новым голосом и улучшенной способностью понимать контекст сообщений.

Источник изображения: Google

В преддверии осенней презентации новых устройств Google анонсировала три новые функции для своей платформы умного дома, основанные на возможностях искусственного интеллекта Gemini. Эти нововведения, запланированные к запуску в конце этого года, обещают сделать управление Google Home проще и эффективнее.

Первая функция представляет из себя интеллектуальный анализ видео с камер видеонаблюдения Nest. Теперь Nest сможет не только распознавать людей и объекты, но и генерировать подробные описания происходящего. Вместо простого уведомления о движении объектов, пользователь получит текстовое описание, например: «Молодой человек в повседневной одежде стоит рядом с припаркованным чёрным внедорожником. Он несёт пакеты с продуктами. Машина частично находится в гараже, и обстановка кажется довольно спокойной». Алгоритм позволит быстрее понять суть события, не просматривая полностью видеозапись.

Источник изображения: Google

Вторая функция «Помогите мне создать» (Help me create) позволит создавать автоматизированные сценарии (рутины) с помощью голосовых или текстовых команд. Например, можно будет сказать: «Закрой двери и выключи свет перед сном», и Google Home создаст соответствующий сценарий.

Источник изображения: Google

Третье нововведение касается улучшения базовых функций Google Assistant на умных колонках и дисплеях Nest. Ассистент получит новый голос с различными стилями и акцентом, а также сможет поддерживать более естественный диалог, понимая паузы и междометия. Ещё будут улучшены базовые возможности приложения, такие как воспроизведение музыки и установка таймеров на всех текущих умных колонках и дисплеях Nest.

Источник изображения: Google

Анис Каттукаран (Anish Kattukaran), руководитель отдела продуктов Google Home, сказал, что «это только начало внедрения искусственного интеллекта Gemini в платформу умного дома, которое прокладывает путь к следующей эре Google Home». Ещё он отметил, что компания намеренно не торопится и будет постепенно улучшать опции Google Home, чтобы избежать даже самых малых ошибок.