Google Assistant

2022: Добавление функции Google Duplex

В версии Google Chrome на Android появилась функция, которая позволяет системе автоматически менять взломанные пароли от аккаунтов. Об этом стало известно 5 мая 2022 года.

Функция Google Duplex стала дополнением для голосового помощника Google Assistant. Она проверяет пароли в браузере, сверяя их с данными утечек. В случае обнаружения совпадений, система предлагает пользователям сменить пароль для восстановления безопасности.

Поскольку смена пароля проводится автоматически, пользователю необходимо только подтвердить процесс замены. Алгоритм генерирует собственную безопасную комбинацию. Владелец учетной записи может внести правки в предложенный пароль или ввести собственную комбинацию^[1].

2021

Запись разговоров без ведома пользователей

1 июля 2021 года стало известно о том, что Google Ассистент записывает разговоры без ведома пользователей.

Представители Google признались правительственной комиссии в Индии, что сотрудники компании прослушивают записи разговоров между пользователями и голосовым помощником Google Ассистент. Более того, искусственный интеллект иногда может записывать голоса пользователей без их ведома.

Мы принимаем ряд мер предосторожности для защиты данных во время процесса проверки записей человеком. Звуковые фрагменты никогда не связаны с какими-либо учетными записями пользователей, а эксперты по языкам слушают только небольшой набор записей (около 0,2% всех пользовательских фрагментов аудио), — пояснили в компании.

Как оказалось, для начала записи разговора виртуальному помощнику не всегда требуется специальная команда «Окей, Гугл!» или похожая фраза. Политика конфиденциальности Google также гласит, что «иногда Ассистент активируется без вмешательства пользователя из-за неправильного понимания голосовой команды (например, по звуку, который звучит как «Привет, Google»).TAdviser Security 100: Крупнейшие ИБ-компании в России 59.6 т

В своем показании перед парламентской комиссией команда Google заявила, что в аудиозаписях конфиденциальная информация не прослушивается. По словам представителей, записываются и прослушиваются только общие разговоры. Остается неизвестным, каким образом сотрудники техногиганта разделяют конфиденциальную и несекретную информацию^[2].

Появление клона для ОС Windows, Linux и macOS

Виртуальный помощник Google Assistant (в России известен как «Google ассистент») заработал на операционных системах Windows, Linux и даже macOS. Об этом стало известно 12 февраля 2021 года. Это неофициальный порт сервиса – сама Google за все время существования у нее фирменного голосового ассистента (с мая 2016 г.) так и не реализовала в нем поддержку этих платформ.

Всю работу за специалистов Google, пишет портал Android Police, выполнил сторонний разработчик Мелвин Абрахам (Melvin L. Abraham) – он выложил все необходимую информацию для запуска «Ассистента» под Windows, macOS и Linux в своем профиле на GitHub. По словам Абрахама, созданное им приложение построено на фреймворке Electron. О

Свое творение Абрахам распространяет на полностью бесплатной основе, и оценить приложение в действии может потенциально каждый владелец ПК или ноутбука под управлением указанных ОС. На деле все не так просто, потому что клиент неофициальный, и для его запуска придется выполнить немало дополнительных действий – для этого Абрахам даже подготовил инструкцию, состоящую из 30 пунктов.

Помимо прочего, от пользователя потребуется зарегистрироваться в облачном сервисе Google Cloud, который сам по себе платный, хотя и имеет бесплатный базовый тариф. Он вполне подойдет для реализации задуманного. Как пишет Android Police, запуск голосового помощника Google на ПК по методу Мелвина Абрахама – процесс довольно непростой, однако программистом для этого быть не обязательно – хватит багажа знаний обычного ПК-пользователя.

Мелвину Абрахаму удалось создать полнофункциональную копию Google Assistant, способную выполнять те же задачи, что и версия помощника под Android. В число ее возможностей входит возможность выбора языка, который будет воспринимать ассистент – оригинальный помощник с 2018 г. понимает русский.

Настройки Windows-версии помощника Google

Приложение поддерживает светлую и темную темы интерфейса и может запускать помощника по комбинации клавиш, которую выберет пользователь. Версия программы под Windows 10 способна загружаться вместе с операционной системой, размещаться поверх остальных окон или, наоборот, сразу сворачиваться в пиктограмму в области уведомлений (в правый нижний угол, где часы). Перечень настроек приложения под Windows, macOS и Linux может отличаться в зависимости от платформы.

Помощнику можно задавать любые вопросы, как и его мобильной версии. Он может рассчитать расстояние от пункта А до пункта Б, уточнить погоду в нужном населенном пункте, рассказать о курсе акций или же найти необходимую информацию в интернете через поисковый сервис. Аналогичные функции программа также будет выполнять под Linux и macOS.

Запускать помощника можно по нажатию кнопки с пиктограммой микрофона справа внизу. Также можно использовать комбинации клавиш, кодовую фразу или же писать свои запросы текстом в соответствующем поле. Пользователю будет доступна история всех его запросов.

Google Assistant под macOS

Специалисты Android Police заметили, что не все команды, доступные в мобильном «Ассистенте», работали на его настольном неофициальном клоне. В частности, они не обнаружили режим постоянного прослушивания, что не позволяет ассистенту реагировать на команду «Ок, Google», а непрерывный разговор с помощником оказался более непоследователен, чем на других устройствах, хотя меню настроек подразумевает, что эта функция поддерживается^[3].

2019

McDonald's принимает заявления о приеме на работу через голосовые помощники Amazon и Google

В конце сентября 2019 года McDonald's объявил о новой инициативе, в рамках которой владельцы устройств Amazon Alexa или Google Assistant могут отправлять заявления о приеме на работу через голосовые помощники. Компания рассматривает эту программу, получившую название Apply Thru, как еще один способ привлечь молодежь на работу. Подробнее здесь.

Google платит людям за прослушивание разговоров пользователей с Google Assistant

Google платит подрядчикам за прослушивание и расшифровку того, что пользователи говорят голосовому помощнику Google Assistant. Первой об этом сообщила в июле 2019 года бельгийская телерадиокомпания VRT, а затем новость подхватили СМИ по всему миру^[4].

Журналисту VRT Тиму Верхейдену (Tim Verheyden) удалось заполучить от неназванного подрядчика Google более тысячи аудиофайлов с разговорами пользователей, записанных через смарт-колонки, телефоны и камеры видеонаблюдения. Большая часть из них представляет собой вопросы, заданные голосовому помощнику (о прогнозе погоды, фильмах и пр.). Тем не менее, порядка 150 записей были сделаны, когда Google Assistant активировался случайно, например, во время телефонного разговора или личной беседы. Среди таких файлов оказались записи обсуждений любовных отношений, семейных вопросов и т.п.

Как поясняет Google, некоторые отрывки записей голосовых запросов транскрибируются в целях улучшения функции распознавания речи. Тем не менее, тот факт, что Google Assistant записывает частные разговоры, да еще и случайно, вызывает большие опасения как у пользователей, так и у экспертов по безопасности.

Подрядчик также показал Верхейдену специальное приложение Google под названием Crowdsource, через которое он получает доступ к аудиозаписям для расшифровки. В некоторых случаях подрядчикам попадаются аудиозаписи явного насилия, однако у них нет никаких инструкций, что делать в таких случаях.

В ответ на репортаж VRT представители Google сообщили о начале расследования в отношении подрядчика за нарушение условий соглашения о конфиденциальности. По их словам, «эксперты по языку со всего мира» занимаются расшифровкой аудиозаписей, сделанных голосовым помощником, но им для анализа предоставляется не более 0,2% от всех аудиофайлов, которые не являются связанными с учетными записями пользователей.

2018

Функция предсказания задержки авиарейсов с 85-процентной точностью

В декабре 2018 года в Google Assistant появилась функция, позволяющая предсказывать изменения времени вылета самолетов. Разработчики утверждают, что новая технология работает с 85-процентной точностью.

Для прогнозирования вероятных задержек авиарейсов голосовой помощник Google использует технологию машинного обучения и данные, полученные от запрашиваемой авиакомпании и из других источников. Сервис также сообщает о причинах отложенного полета. Кроме того, утверждается, что уведомления об отложенных перелетах будут приходить пользователям раньше официальных заявлений авиаперевозчиков.

Google Assistant научился предсказывать задержку авиарейсов с 85-процентной точностью

Для получения информация о том, состоится ли вылет вовремя или нет, пользователю необходимо сделать голосовой запрос, подобный этим: «Эй, Гугл. Мой рейс пройдет по расписанию?» или «Эй, Гугл. Каков статус рейса American Airlines из Филадельфии в Денвер?».

Как отмечает издание Fortune, информация о возможных задержках авиарейсов особенно полезна перед праздниками, когда много людей улетают в другие города к родственникам, друзьям или для туристического отдыха. Уведомления о статусе рейсов помогают путешественникам легче ориентироваться в многолюдных аэропортах. Сведения об отложенных вылетах пользователи могут искать и самостоятельно на специализированных сайтах, вроде FlightAware, но сервис Google может делать это удобнее, а иногда и эффективнее, поскольку использует информацию с многочисленных источников и умные алгоритмы.

Оповещения о рейсах не по расписанию отправляют немало сервисов и компаний. Например, Apple делает этой посредством Push-уведомлений при наличии электронного посадочного талона, а большинство авиаперевозчиков оповещают своих клиентов через собственные приложения, по электронной почте или по телефону.^[5]

Команда «Окей, Google» теперь работает в iPhone

В ноябре 2018 года вышла новая версия голосового помощника Google Assistant для iOS, которая получила функцию запуска сервиса командой «ОК, Google». Это стало возможным благодаря «Командам Siri» (Siri Shortcuts).

Однако команда «ОК, Google» работает в iPhone не так, как в Android, где нужно просто сказать эту фразу и затем сделать какой-либо запрос. В iOS сначала придется запустить Siri нажатием на кнопку «Домой» или командой «Привет, Siri» и только потом можно говорить «ОК, Google» — тогда приложение Google Assistant запустится и будет готово выслушать команду (поиск информации в интернете, вывод погодных сводок и т. п.). Конечно, такую интеграцию нельзя назвать «бесшовной», но это лучше, чем было раньше.

Google обновила приложение Google Assistant для iOS, добавив ему поддержку «Команд Siri»

Кроме того, «Команды Siri» позволяют использовать Siri для управления поддерживаемыми устройствами умного дома через Google Assistant. К примеру, можно записать команду «Google, я спать» и назначить ее на выключение света и музыки через Google Assistant.

Apple выпустила приложение «Команды» для всех пользователей в сентябре 2018 года. Программа позволяет автоматизировать последовательности действий в других приложениях. На одно касание или голосовую команду можно «запрограммировать» сложную последовательность действий. Например, команде «еду домой» можно присвоить такую комбинацию: узнать маршрут домой, сообщить близким время приезда и включить новости на радио. 

К ноябрю 2018 года приложение содержит более 300 встроенных действий и поддерживает многие программы, включая «Контакты», «Календарь», «Карты», «Музыку», «Фото», «Камеру», «Напоминания», Safari, «Здоровье», а также все программы сторонних разработчиков, поддерживающие функцию «Быстрые команды Siri», в том числе упомянутый выше Google Assistant.^[6]

2016

Google Assistant - личный программный ассистент и технология сбора персональных данных пользователей в корпоративные системы машинного обучения.

18 мая 2016 года компания Google представила эту технологию.

Продукт позиционируется как продолжение технологии Google Now. Google Assistant может участвовать в двухсторонних переговорах. Он также входит в Google Allo — приложение мгновенного обмена сообщениями.

Скриншот окна ПО, (2016)

В 2016 году компания-разработчик объявила о включении Google Assistant в пакет ПО на смартфонах Google Pixel и устройствах под управлением Android Marshmallow и Nougat.

Google Assistant подключается к Google Now и может:

• извлекать информацию, оформляя её её в более привлекательный вид для пользователя,
• проверять погоду,
• принять участие в диалоге посредством алгоритма обработки естественного языка Google.

В составе Google Allo Assistant прослушивает, сохраняет (навечно) и систематизирует диалоги пользователя. Ища при этом ключевые слова и понятия. Продукт способен автоматически предлагать различные варианты получения товаров или услуг, наблюдает за стилем речи пользователя для накопления базы данных ответов.

2010

На сегодняшний день автоматические сервисы в том или ином виде присутствуют в каждом call-центре. Однако показатель доли обслуживаемых ими вызовов в нашей стране значительно уступает среднему по Европе – 10-15% против 60-70%. Русскоязычный голосовой поиск «Google» инициирует новый виток развития таких сервисов в корпоративном сегменте. «Опираясь на мировой опыт и тенденции российского рынка call-центов, можно прогнозировать, что в течение 2-х лет уровень автоматизации обработки клиентских обращений вырастет в 2 раза и достигнет 20-30%», - считает директор по продажам компании «Открытые Коммуникации» Дмитрий Столяр, более 7 лет занимающийся внедрением голосовых сервисов в call-центрах.

Немногие руководители российских call-центров имеют исчерпывающее представление обо всех функциональных возможностях и сферах применения голосовых приложений. Уровень компетентности западных компаний в данном вопросе значительно выше. Кроме того, европейцы, в целом, более лояльно относятся к системам самообслуживания и чаще обращаются к их помощи. Это обусловлено тем, что автоматические и голосовые сервисы много лет назад получили в Европе широкое распространение, и люди привыкли пользоваться ими в повседневной жизни – голосовая GPS-навигация, голосовая навигация по интернет-сайтам, голосовое управление компьютером, различными бытовыми устройствами и бортовой электроникой в автомобиле, голосовой набор телефонного номера или sms и многое другое.

Недавно компания «Google» объявила о запуске русскоязычной версии Google Mobile Application. Голосовой русскоязычный поиск «Google» - революционный для российского рынка сервис. И не только с технологической точки зрения (хотя и здесь он находится на одном уровне с разработками компаний, много лет специализирующихся на «голосе»), но и с идеологической. Аналитики ранее заявляли, что российский рынок еще не созрел для массового распространения голосовых сервисов, однако приход такого крупного игрока, как «Google», опровергает эти тезисы. Уже в краткосрочной перспективе голосовые сервисы могут стать понятными и привычными российскому потребителю, что, безусловно, сделает их более востребованными и в корпоративном сегменте.

Новый сервис «Google» не единственный пример высокотехнологичного и одновременно удобного для пользователей голосового приложения. Есть и другие инновационные разработки, которые определят будущее развитие рынка call-центров. «Прежде всего, это применение в распознавании речи открытой грамматики и система верификации голоса – западные решения, которые мы уже сейчас внедряем в наших проектах», - прокомментировал Щеглов Алексей, генеральный директор компании «Открытые коммуникации».

Использование открытой грамматики дает пользователю возможность запросить нужную информацию в произвольной, естественной форме – так, как если бы он общался с оператором. Система в автоматическом режиме определяет ключевые слова и обрабатывает запрос. Технология позволяет создать более дружелюбные сервисы и расширить варианты их применения.

Верификация голоса, по мнению многих экспертов, в ближайшем будущем станет одним из наиболее востребованных голосовых сервисов, особенно в финансовом секторе. Для доступа к индивидуальной информации клиенту больше не требуется запоминать и диктовать сложный пароль – достаточно произнести произвольную фразу, которую система сравнит с заранее записанным голосовым слепком. Технология голосовой верификации очень надежна, и ее применение сокращает случаи мошенничества и уменьшает операционные издержки компаний.

Голосовые приложения – удобный способ взаимодействия пользователя с мобильным телефоном, компьютером и call-центром. Он упрощает и ускоряет решение возникающих вопросов, не требуя при этом от компаний вложений в оборудование или увеличение штата операторов.

Как показало бенчмаркинговое исследование компании «Knowlagent», 42% call-центров США планируют в 2010 г. инвестировать в IVR. Наблюдающийся на российском рынке всплеск интереса к голосовым технологиям дает основания прогнозировать, что в ближайшее время многие отечественные call-центры пойдут по пути западных коллег.

Смотрите также Голосовые помощники (бормотографы)