«Яндекс» выпустил отдельное мобильное приложение «Алиса» для Android и iOS — оно предназначается для общения с виртуальным помощником, работы с текстом и создания изображений. Генерация картинок производится с помощью модели YandexART 2.0. В перспективе ассистент сможет работать с камерой мобильного телефона, распознавая и анализируя объекты; а также обретёт долгосрочную память.

Источник изображения: «Яндекс»

Приложение «Алиса» работает с голосовыми обращениями пользователя и обрабатывает текстовые запросы, как и в веб-версии. История диалогов синхронизируется между платформами. В веб-версии и приложении доступна генерация картинок с использованием нейросети YandexART 2.0 — поддерживается создание новых изображений и редактирование существующих при помощи дополнительных запросов. Пользователи бесплатной версии голосового ассистента могут создавать до пяти картинок в день, а подписчики «Алисы Про» имеют возможность создавать изображения в любых количествах.

«Яндекс» в шесть раз сократил число случаев, когда виртуальный помощник не может дать ответ; сами же ответы стали более полными, достоверными и структурированными. Это значит, что «Алиса» поддерживает более широкий набор тем для беседы, она стала информативнее. Интеграция YandexART 2.0 позволяет в едином интерфейсе работать с текстами и изображениями: к примеру, можно сразу запросить иллюстрацию к созданному искусственным интеллектом тексту. Последние версии нейросетей YandexGPT и YandexART доступны подписчикам «Алисы Про».

Сегодня, 10 октября, голосовому помощнику «Алиса» исполняется семь лет. Его будущие версии получат зрение: система сможет в реальном времени обрабатывать изображение с камеры и вести беседу, используя визуальный анализ объектов.

В перспективе «Алиса» также получит долгосрочную память — она сможет запоминать контекст беседы, а также давать пользователю более точные и персонализированные ответы. Наконец, голосового помощника можно будет в любой момент перебить, чтобы сменить тему разговора — дослушивать его ответ до конца больше не понадобится, как и обращаться к нему повторно.

Пользователям с особенностями речи, например, с заиканием, ДЦП, последствиями инсульта или травмы, теперь будет проще общаться с голосовым помощником «Алиса», поскольку после дообучения нейросети он стал лучше распознавать их запросы, пишет «Яндекс».

Источник изображения: «Яндекс»

В процессе дообучения использовались более 900 часов аудиоматериалов, содержащих свыше 855 тысяч скороговорок и голосовых фрагментов, которые записали люди с особенностями речи. В проекте приняли участие некоммерческие организации «Центр лечебной педагогики», «Живи сейчас», «Жизненный путь», «Весна», «Перспектива», «Лучшие друзья» и другие, а также специалисты-дефектологи из МГПУ, которые помогли классифицировать контент по типам нарушений. Всего в проекте участвовали более 300 человек.

Благодаря этому разрыв в точности распознавания «Алисой» обычной речи и с искажениями сократился в среднем на 20 %. Качество распознавания оценивали по метрике Word Error Rate (WER), которая позволяет определить долю неправильно понятых слов.

Компания сообщила, что это далеко не первый проект по адаптации виртуального ассистента для людей с особенностями здоровья. Недавно она представила в Москве инклюзивные навыки «Алисы», разработанные студентами. А мобильное приложение «Дом с Алисой» теперь поддерживает воспроизведение вслух текста с экрана, упрощая взаимодействие с интерфейсом пользователям с нарушениями зрения. Для таких пользователей адаптировано 15 сервисов и продуктов «Яндекса», включая «Поиск», «Браузер», «Яндекс Музыка», «Букмейт» и т.д. Также в приложении Go имеются специальные возможности для людей с особенностями здоровья, включая такие функции, как «Общаюсь только текстом», «Не говорю, но слышу», «Перевозка собаки-проводника», «Буду на инвалидном кресле» или «Помогите найти машину».

Разрабатываемый «Яндексом» голосовой помощник «Алиса» научился понимать и говорить на казахском языке, сообщают «Ведомости» со ссылкой на пресс-службу компании. Новая версия ассистента была представлена на мероприятии Yandex Qazaqstan Day.

Источник изображения: yandex.ru

«Она освоила второй язык, помимо русского, и теперь сама переключается с одного на другой во время беседы. Это первая в мире двуязычная „Алиса“ в умных устройствах», — рассказали в «Яндексе». Голосовой помощник с поддержкой двух языков доступен и в новых умных колонках и в тех, что были куплены ранее — он может общаться на двух языках сразу и понимает на них команды. «Алису» обучили на большом объёме данных: это несколько тысяч диалогов, сотни часов аудиозаписей и около тысячи часов записанных носителями языка фрагментов речи.

«Алиса» говорила по-казахски и раньше, но её возможности были ограничены. Казахский язык поддерживался только в мобильных приложениях «Яндекс» и «Яндекс Браузер», а самостоятельного переключения между языками не было — пользователю приходилось делать это в настройках вручную.

В сентябре 2023 года о намерении компании добавить голосовому помощнику поддержку казахского языка сообщил руководитель бизнес-группы поиска и рекламных технологий «Яндекса» Дмитрий Масюк. Речь шла о версии «Алисы» для ПК, смартфонов и мобильного приложения. На тот момент аудитория «Яндекса» в Казахстане составляла 10 млн пользователей.

Компания «Яндекс» и Третьяковская галерея объявили о запуске проекта «Музей у вас дома», в рамках которого полотна из постоянной экспозиции Третьяковки можно установить в качестве заставки на умных телевизорах «ТВ Станция», «ТВ Станция Про» и «Станция Дуо Макс» со встроенным виртуальным помощником «Алиса». При этом «Алиса» в качестве экскурсовода расскажет пользователям подробности о каждой из картин.

Как сообщается, в проекте участвуют 11 картин из коллекции Третьяковской галереи: «Заморские гости» и «Канченджанга» Николая Рериха, «Радуга» Ивана Айвазовского, «Похищение Европы» Валентина Серова, «Иван-царевич на Сером волке» Виктора Васнецова, «Золотая осень» и «Цветущие яблони» Исаака Левитана, «Рожь» Ивана Шишкина, «Парижское кафе» Константина Коровина, «Композиция VII» Василия Кандинского, «Осень в провинции» Бориса Кустодиева.

Благодаря высокому разрешению экранов умных телевизоров и качественной оцифровке картин, полотна можно будет разглядеть на заставке во всех деталях — вплоть до трещин на холсте.

Пользователю достаточно спросить: «“Алиса”, что это за картина?» — и виртуальный помощник расскажет о ней, истории её создания и о художнике, авторе произведения. Помощник понимает, какая из картин отображена на экране, поэтому нет никакой необходимости уточнять её название. Рассказ «Алисы» опирается на информацию, предоставленную специалистами Третьяковской галереи. Вместе с рассказом на экране откроется QR-код и любой желающий получит доступ к подборке произведений на платформе «Моя Третьяковка», где собрана интересная информация о картинах из проекта.

Чтобы добавить картины для заставки, нужно выбрать в настройках тему «Моя Третьяковка» и полотна будут сменять друг друга на экране. Как отметили в пресс-службе «Яндекса», на модели телевизора «ТВ Станция Про» они будут выглядеть как настоящие картины, поскольку устройство имеет ультратонкий корпус и крепится вплотную к стене. А на «Станции Дуо Макс» с поворотным экраном, изображения будут доступны в горизонтальной и вертикальной ориентации.

«Яндекс» представил обновлённую версию голосового помощника «Алиса» — теперь к нему постоянно подключена большая языковая модель YandexGPT. «Алиса» научилась самостоятельно объяснять сложные понятия, предлагать идеи и ориентироваться в контексте диалога с пользователем. Запущена и более мощная её версия — «Алиса Про», которая доступна по подписке.

Источник изображений: «Яндекс»

Ранее «Алиса» самостоятельно отвечала лишь на 60 % вопросов, по остальным направляя пользователя в веб-поиск. С подключением YandexGPT ей стали доступны 95 % пользовательских запросов, и теперь она может дать ссылку на источник информации, если какие-то сведения были обнаружены на определённом сайте. Генерация текста стала доступной без подключения навыка «Давай придумаем» — можно просто спросить, что подарить коллеге или приготовить на завтрак.

Чтобы общение с «Алисой» было комфортным, чат с голосовым помощником перенесли на отдельную страницу a.ya.ru. Чат синхронизируется на разных устройствах, но можно запустить несколько чатов параллельно и, к примеру, в одном общаться с «Алисой» голосом, а в другом — в текстовом формате. Голосовой помощник удерживает контекст беседы. Так, если завести разговор о собаке и спросить «сколько времени ей нужно уделять», «Алиса» поймёт, что имеется в виду. А если не поймёт, задаст уточняющий вопрос, как это делает человек.

Доступна и более мощная версия виртуального ассистента «Алиса Про», к которому подключена самая мощная из имеющихся в распоряжении «Яндекса» больших языковых моделей — YandexGPT 3 Pro. Передовая нейросеть помогает «Алисе» давать развёрнутые ответы, обрабатывать разные стили и следовать инструкциям с несколькими условиями. «Алиса Про» окажется полезной не только в работе, но и дома — голосовой ассистент может работать в качестве виртуальной няни. Она может разбудить ребёнка, проведёт зарядку, напомнит почистить зубы или предложит развивающую игру. Продвинутая версия голосового помощника «Алиса Про» доступна для подписчиков «Яндекс Плюс» в качестве дополнительной опции по цене 100 рублей в месяц — первые полгода действует бесплатный пробный период.

В работе некоторых сервисов «Яндекса» произошёл масштабный сбой. Пользователи жалуются на то, что приложение «Умный дом» перестало нормально функционировать и выдаёт сообщение об ошибке. А умные устройства, включая смарт-колонки с «Алисой» не откликаются на команды.

Пользователи из России, в основном из Москвы, сегодня вечером стали жаловаться на перебои и проблемы в работе умных лампочек, розеток и других гаджетов, подключённых к «Умному дому» от «Яндекса».

Также проблемы наблюдаются у умных колонок «Яндекс Станция» с голосовым помощником «Алиса». Более того, фирменное приложение «Умный дом» пишет, что «случилось что-то непонятное» и рекомендует немного подождать и попробовать загрузиться ещё раз.

В «Яндексе» прокомментировали ситуацию порталу РБК следующим образом: «У некоторых пользователей возникают кратковременные трудности в управлении устройствами умного дома по Wi-Fi. Наши специалисты уже работают над устранением сложностей».

Обновлено:

Компания «Яндекс» представила следующий комментарий по вчерашнему инциденту: «У некоторых пользователей возникали кратковременные трудности с управлением устройствами умного дома по Wi-Fi. На текущий момент все устройства работают в штатном режиме».

Нейросеть YandexGPT обучили форматированию текста и ускорили её работу — теперь она генерирует тексты почти в режиме реального времени. Кроме того, работающий на основе нейросети голосовой помощник «Алиса» появился на страницах поисковой выдачи «Яндекса».

Источник изображения: Яндекс

«Нейросеть YandexGPT (YaLM 2.0) научилась быстрее давать ответы на запросы. Раньше для создания объёмных текстов — эссе, докладов, длинных списков — нужно было ждать до 10 секунд. Теперь пользователь увидит начало ответа уже через одну–две секунды», — сообщили в «Яндексе».

Создание текста в реальном времени поможет пользователям оценить, насколько результат соответствует ожиданиям, пояснили в компании, и процесс можно остановить в любой момент, чтобы уточнить запрос. Сгенерированный нейросетью YandexGPT текст при помощи голосового ассистента «Алиса» теперь можно отформатировать: выделить заголовки, цитаты или программный код.

Наконец, добавили в «Яндексе», возможность запустить «Алису» появилась прямо в выдаче поисковой службы — здесь есть все её функции, включая генерацию текстов при помощи YandexGPT. Поддержка нейросети YandexGPT появилась в голосовом помощнике 17 мая — навык генерации текста запускается по команде: «Алиса, давай придумаем!».

Команда разработчиков «Яндекса» сообщила о расширении функциональных возможностей языковой ИИ-модели нового поколения YandexGPT (YaLM 2.0) — теперь нейросеть может общаться с пользователем и писать ответы с учётом истории предыдущих сообщений.

Источник изображения: «Яндекс» (company.yandex.ru)

YandexGPT встроена в виртуального помощника — в «Алису» и активируется по запросу «Алиса, давай придумаем». ИИ-модель запоминает реплики и отвечает на уточняющие вопросы. Это позволяет общаться с ней, как с человеком, который следит за нитью разговора.

По словам разработчиков, включение в YandexGPT поддержки контекста потребовало решения ряда технически сложных задач. «Нужно было научить нейросеть понимать, когда следует учитывать предыдущие реплики, а когда нет. Для этого её дообучили на эталонных примерах обезличенных диалогов. Менее чем за три недели пользователи задали «Алисе» десятки тысяч вопросов, требующих контекстного ответа, а AI-тренеры научили модель давать на такие запросы максимально релевантный ответ. Также были использованы диалоги из Open Source датасета Open Assistant», — поясняют специалисты компании.

YandexGPT была представлена широкой публике 17 мая 2023 года. Языковая ИИ-модель нового поколения доступна в «Яндекс.Браузере», мобильном приложении «Яндекса», в линейке умных колонок и телевизоров компании, а также на главной странице «Яндекса» (ya.ru). В планах разработчика — обучение нейросети новым знаниям и её внедрение в другие сервисы и продукты компании, прежде всего в поиск.

Команда разработчиков «Яндекса» сообщила о доступности нейросети нового поколения YandexGPT (YaLM 2.0) на главной странице поискового сервиса ya.ru — в виртуальном помощнике «Алиса».

Как сообщают в пресс-службе компании, в веб-версии YandexGPT удобно составлять бизнес-планы, коммерческие предложения или тезисы для предстоящего выступления на совещании. Для доступа к сервису необходимо кликнуть по значку «Алисы» и выбрать «Давай придумаем».

Обучение ИИ-модели производилось на суперкомпьютерах «Яндекса». Дообучение нейросети проходило на «сотнях тысяч примеров содержательных и хорошо написанных ответов», для подготовки которых использовались технологии краудсорсинга и команда специальных ИИ-тренеров. Тем мне менее, в компании подчёркивают, что пока бот может ошибаться в некоторых фактах, но ведётся работа над устранением ошибок.

О том, что «Яндекс» ведёт разработку генеративной сети на базе языковой модели YaLM (Yet another Language Model), сообщалось ещё в январе. В итоге проект получил имя YandexGPT.

По некоторым данным, в марте и апреле в «Яндексе» были открыты вакансии для специалистов-гуманитариев, включая журналистов, педагогов, филологов, а также редакторов-профессионалов и представителей других профессий, для помощи в обучении нейросети. Известно, что в начале прошлого месяца компанией также была представлена нейросеть «Шедеврум» для генерации изображений по текстовым описаниям.

«Яндекс» начал работу по дополнительному обучению новым языкам своего голосового помощника «Алиса». Ранее проект пришлось приостановить из-за пандемии, однако теперь компания начала набирать специалистов для обучения «Алисы» новым языкам, передаёт «Коммерсант».

Источник изображения: yandex.ru/alice

На странице вакансий «Яндекса» появилась позиция «Разработчик в команду международного движка "Алисы"». Речь идёт о добавлении голосовому помощнику поддержки новых языков с учётом культурной специфики. Сейчас «Алиса» говорит только по-русски, но уже ведётся работа над тем, чтобы ассистент заговорил и на других языках, подтвердили в «Яндексе», но отметили, что все подробности будут оглашены позже.

Поддержка других языков в «Алисе» пока ограничена функциями перевода и поиска, хотя ещё в 2018 году, до дебюта умных колонок серии «Станция», компания планировала добавить полноценную поддержку украинского, белорусского и казахского языков. К сожалению, тогда их реализации помешала пандемия. Помимо России, умные колонки «Яндекса» продаются в Беларуси, Израиле, Казахстане и Узбекистане — в апреле 2023 года к ним добавились смарт-телевизоры с «Алисой». За всё время существования проекта было продано 6 млн устройств, и только в I квартале 2023 года доход от сегмента составил 6,1 млрд руб. с ростом на 172 %. Разрабатывающие собственных голосовых помощников VK, SberDevices и МТС о планах добавить поддержку отличных от русского языков пока не сообщали.

Устройства от «Яндекса» могли бы стать популярнее с поддержкой национальных языков в странах продаж, поэтому её отсутствие является сдерживающим фактором, а поддержка, например, испанского помогла бы компании выйти на рынки Южной Америки, где у компании уже есть некоторое присутствие, считают опрошенные «Коммерсантом» эксперты. Кроме того, в дополнительном обучении голосового помощника должны принимать участие носители соответствующих языков, знакомые с зарубежными культурами, и, возможно, придётся внести некоторые коррективы в игривый характер «Алисы» — в некоторых странах он может показаться неуместным.

Компания «Яндекс» представила первые результаты расследования утечки почти 45 Гбайт исходных кодов её проектов, которая произошла на прошлой неделе. Компания извинилась за случившееся, снова подтвердила подлинность утекших данных и рассказала, какие проблемы благодаря инциденту удалось выявить: начиная от тайных функций «Алисы» и заканчивая использованием «костылей» и расистских слов в коде.

«Яндекс» отметил, что опубликованные исходные коды действительно взяты из внутреннего репозитория компании, но соответствуют решениям из устаревшей версии репозитория. Другими словами, данные исходные коды отличаются от тех, которые используются сервисами «Яндекса» сейчас.

Наиболее пугающе выглядит признание «Яндекса», что в утекшем коде нашёлся фрагмент, который скрытно включает микрофон устройства с голосовым ассистентом «Алиса». Компания заверяет, что это тестовая версия алгоритма, и публичной она не была. Однако существует как минимум возможность включения такой функции на любом, в том числе пользовательском устройстве.

В заявлении компании сказано: «Опубликованные фрагменты кода содержат в том числе и тестовые алгоритмы, которые использовались только внутри "Яндекса" для проверки корректности работы сервисов. Например, для улучшения качества активации ассистента и уменьшения количества ложных срабатываний в бета-версии для сотрудников применяется настройка, которая включает микрофон устройства на несколько секунд в случайный момент без упоминания Алисы».

Ещё «Яндекс» сообщила, что благодаря инциденту выявила ряд нарушений её политик. Например, в коде нашлись контактные данные некоторых партнёров, в том числе водителей: контакты и номера водительских удостоверений передавались из одного таксопарка в другой. В сервисе «Яндекс Лавка» обнаружилась возможность ручной настройки рекомендаций любых товаров без добавления пометки о том, что данные рекомендации являются рекламными. А в сервисах Такси и Еда у отдельных групп пользователей оказалась приоритетная поддержка.

Ещё выяснилось, что разработчики «Яндекса» грешили использованием «костылей» — временных неоптимальных решений — для изменения логики работы сервисов вместо алгоритмов. Через такие временные решения исправляли отдельные проблемы в системе, отвечающей за дополнительные элементы поисковой выдачи, и регулировали настройки поиска по картинкам и видео.

Наконец, компания призналась, что «некоторые части кода содержали слова, которые никак не влияли на работу сервисов, но были сами по себе оскорбительны для людей разных рас и национальностей». Речь идёт об использовании расистских слов в коде.

Компания отметила, что теперь изменит подход к разработке своих продуктов таким образом, чтобы сократить использование «костылей». Ещё компания пообещала сформировать новые стандарты и принципы технологической этики, и исправит фрагменты кода, которые будут им противоречить. Ещё было отмечено, что внутренняя среда разработки останется открытой и сохранится единый репозиторий. Также часть данных, которые не имеют отношения к алгоритмам и настройкам сервисов, получат дополнительную защиту.