Система голосового управления в автомобиле
Современные автомобили «умнеют» с каждым годом, оснащаясь новыми системами и решениями, призванными сделать вождение максимально безопасным и комфортным. Обилие кнопок и переключателей для управления огромным количеством функций и параметров, делает водительское место похожим на пилотскую кабину. Система голосового управления, установленная в автомобиле, позволяет водителю не отвлекаться от дорожной ситуации на манипуляции с кнопками.
Как было раньше
Первая система, осуществляющая голосовое управление, была настолько далека от совершенства, что удобство ее использования вызывало сомнения. Распознавать слова она еще не могла, требуя проговаривать команду по буквам, вдобавок невысокое качество микрофона и несовершенство алгоритмов шумоочистки не всегда гарантировали правильное определение произносимого, голосовое управление оставляло желать лучшего.
Отсутствие бортового компьютера, интерфейса взаимодействия у многих систем автомобиля, не позволяло управлять ими голосом. Единственный способ что-то им «сообщить» – протянуть руку и нажать/повернуть.
Возможности современных систем голосового управления
Современная система значительно расширила свой потенциал. Разработчики стремятся максимально приблизить формат взаимодействия к естественному диалогу. Разговорный язык, диалекты, посторонние шумы, быстрота произношения, особенности дикции человека и даже нестандартные формулировки команд все меньше становятся препятствием для качественного функционирования.
Перечень функций, «подвластных голосу», постоянно растет. Сегодня таким способом можно управлять:
Этот список можно долго продолжать.
Стремление к естественности диалогового общения прослеживается на каждом уровне. Помимо прочего, это:
Сюда же можно добавить, что постепенно увеличивается и количество понимаемых языков и диалектов.
Принцип работы и где встречается
Главный модуль голосового управления распознает речевые команды, преобразует их в соответствующие сигналы, которые передаются системам автомобиля, выполняющим требуемое действие. Как правило, микрофон встроен в салонное зеркало заднего вида.
Однако конкретная реализация зависит от установки: штатная это система или доустановленная, ведь речевое управление встречается во многих опционах. Ярким примером здесь выступает охранная система Pandora DXL5000. Ее функции по охране дополнены взаимодействием водителя и автомобиля на любом расстоянии с помощью мобильного телефона. В память сохраняются образцы всех речевых команд. При поступлении устного сообщения (звонок с телефона) ищется 100% совпадение. Если оно не найдено, срабатывает охранная блокировка.
Также можно приобрести модуль голосового управления, не предусмотренный изготовителем вашего автомобиля. В этом случае перечень устройств невелик, как правило, это стеклоподъемники, дворники, салонное освещение и наружная оптика, люк, центральный замок и тому подобное. Подключение таких систем не всегда требует в автомобиле наличия CAN или другой какой-либо шины, подсоединяясь к управляемому механизму напрямую.
Для айфоноводов
Владельцы айфонов не остались без внимания. Компания Apple предоставляет им такую возможность благодаря продукту Siri Eyes Free. Теперь можно голосовыми командами пользоваться популярными приложениями iPhone: звонки, сообщения, навигация, медиа, а также информация о погодных условиях, спортивных событиях, курсе валют и прочее. Как уже было сказано, надо лишь подключить смартфон по USB и перед произнесением команды или вопроса нажать специальную кнопку в автомобиле.
Использование Siri Eyes Free в своих авто одобрили BMW, Audi, Toyota, Land Rover, Jaguar, Honda, Mercedes-Benz и другие. В выпускниках конвейеров Ford, Hyundai и Kia голосовые возможности предоставляет компания Microsoft.
У каждого свое
Не все производители используют разработку голосового управления сторонних компаний. У многих есть собственные достижения в этой области. Среди последних упомянутых, наиболее развитыми можно назвать Ford Sync, CUE для Cadillac (мультимедийная система собственной разработки с голосовыми возможностями), SDS для Audi, Linguatronic для Mercedes-Benz.
Все они имеют свои преимущества и недостатки. Так, система Ford Sync «владеет» 19-ю языками, включая разновидности французского и английского. CUE распознает произвольные фразы, а не только заранее предусмотренные. Название города или улицы, произнесенное для некоторых версий SDS, должно быть озвучено по буквам.
Многие минусы, выявленные водителями, не столь значительны, чтобы система, понимающая устные команды, оставалась без участия. Безусловно, это удобно, а на этапе знакомства кому-то даже интересно. Привыкнув со временем разговаривать со своим автомобилем, некоторые сразу и не скажут, где находится, например, блок управления климатом…
» alt=»»>
Голосовое управление авто
Привет, давно хотел поделиться доработкой своего авто, но второй год лень. Коротко опишу, как я добавил своему авто голосовое управление, а в конце видос.
Я работаю инженером-разработчиком систем «Умный дом» и в качестве хобби-работы разрабатываю различные устройства управления всем и вся!
Не обошел вниманием любимый авто, и похакав CAN шину добавил функцию голосового управления с помощью Siri.
Далее я пошагово покажу, что конкретно я сделал без влезания в технические дебри программирования.
Вводная
При нажатии на кнопку передается определенная команда по CAN шине на исполнитель и/или Блок управления. Для голосового управления авто нужно узнать эти команды и собрать устройство, которое эти команды будет отправлять.
1) Я спаял шилд с CAN чипом для Raspberry Pi. Шилд нужен, чтобы получать/отправлять команды по CAN шине с компьютера Raspberry Pi.
2) Теперь нужно подключиться проводами к CAN шине машины. У нас в машине используется 2 CAN шины (силового агрегата и комфорт), соединенные через gateway, меня интересует только шина Комфорт, которая позволяет открыть/закрыть стекла, управлять центральным замком, музыкой, кондеем и др. Лучше всего к ней подключить в двери, резать провода не нужно, просто в дверную колодку запихиваем еще 2 провода.
3) Для управления с телефона нужен еще WiFi роутер, нашел маленький TP-Link, связал их с Raspberry Pi и запихнул в нишу под рулем, благо у меня там места много.
4) Питание взял от блока предохранителей, он совсем рядом
5) Закрываем все, подключаемся с компьютера по WiFi к CAN шине и сканируем шину. Я написал программу, которая перехватывает все команды от всех устройств в машине. Чтобы узнать какую именно команду передает кнопка стеклоподъемника, я нажимаю и смотрю в какой ячейке изменились значения. Таким способом я вычислил все интересующие меня устройства (стекла, замок, фары, и чего то еще).
7) После того, как я узнал какие команды нужно отправлять, я написал программу-сервер принимающую команды с телефона и отправляющую их в CAN шину машины и написал простую программу для телефона, чтобы управлять авто. Ну а когда Apple пару лет назад представила технологию управления умными дома HomeKit с помощью голосового помощника Siri, то я добавил функцию преобразования голосовых команд в команды управления авто.
Skoda Octavia 2011, двигатель бензиновый 1.8 л., 152 л. с., передний привод, механическая коробка передач — тюнинг
Машины в продаже
Комментарии 16
Можно в CAN отыскать параметр температуры коробки? Через ОБД в моей машине посмотреть не возможно.А VCDS такую информацию выдает.
Vcds берет ее как раз по can, нужно посниффать запросы от vcds
отличный пост, тоже начну изучать коды кан шины очень скоро
На скриншоте подписи к командам предположительные, во время тестов подписывал, многие не подтвердились.
Голосовые помощники помогут водителям не отвлекаться за рулем: на самом деле — не всегда и не всем
Инфотейнмент-системы в автомобиле могут отвлекать водителей похуже запрещенных веществ и препаратов. Но есть мнение, что ситуацию способны исправить голосовые ассистенты, однако и с этой технологией связаны определённые проблемы. Разберемся, что к чему.
Еще удобнее
Мультимедийные системы — один из центральных элементов автомобиля. Они отвечают за управление множеством функций, что с одной стороны, достаточно удобно, а с другой — создает проблемы с безопасностью на дороге. Согласно исследованию, проведенному некоммерческой организацией IAM Roadsmart, работая с тачскрином, водитель теряет концентрацию в среднем на 16 секунд, хуже держит дистанцию и виляет в полосе.
Автопроизводители признают проблему и предлагают варианты её устранения — внедряют альтернативные способны управления инфотейнмент-системами и возвращают кнопки для часто используемых функций на приборную панель и рулевое колесо. Также одним из перспективных направлений считают голосовых ассистентов. Многие концерны разрабатывают собственных помощников. Ford предлагает Sync, General Motors — OnStar, проприетарная технология есть даже у Mini Cooper. Большая часть производителей добавляет интеграции со сторонними решениями вроде Alexa и Google Assistant. Например, помощник от Amazon появится в новом Volkswagen Golf, а Volvo запустит линейку электрокаров с мультимедийной системой на Android.
Эксперты говорят, что к 2022 году автомобильными голосовыми ассистентами будут пользоваться 73% водителей. Для сравнения, на конец 2019 года эта цифра не превышала 50%.
Или нет
Несмотря на то что голосовой тип управления позволяет водителю не отрывать взгляда от дороги, общение с ним требует сосредоточенности и концентрации. По словам нейрофизиологов, безопасное вождение в принципе несовместимо с какими-либо посторонними действиями. За управление механизмами, а также принятие решений отвечает один отдел мозга — многозадачность перегружает когнитивные возможности.
Еще в 2014 году некоммерческая организация AAA Foundation for Traffic Safety, занимающаяся вопросами безопасности дорожного движения, и Университет штата Юта определили, что голосовое управление отвлекает водителей сильнее, чем простой разговор по телефону. Эти данные подтверждает свежее исследование британской корпорации Transport Research Laboratory. При этом в компании утверждают, что общение с голосовым ассистентом ведет к рискам, сравнимым с вождением в пьяном виде.
Фото Damir Kopezhanov / Unsplash
Кроме того, как пишет The New York Times, голосовые помощники в автомобилях создают проблему с информационной безопасностью и открывают новые векторы атак для злоумышленников. Устройства вроде Alexa умеют удаленно заводить автомобиль, при этом ассистент может иметь доступ к подключенным устройствам в доме — даже электронным замкам. Хакеры могут использовать эту особенность, чтобы проникнуть в жилище или украсть персональные данные — например, о местоположении. Инженерам из ИБ-компании Armis уже удалось обнаружить серию уязвимостей, позволяющую реализовать подобные атаки, — её назвали BlueBorn.
Некоторые компании делают ставку на особый уровень защищенности голосовых помощников для авто. Французский стартап Snips проектирует SDK для локальной системы, которая не отправляет данные в облако и может работать при полном отсутствии интернета. В прошлом году стартап купили Sonos. Сейчас аудиокомпания готовится к выходу на автомобильный рынок. Можно предположить, что она будет продвигать и технологию Snips, если ей удастся заключить сделку с каким-либо концерном, а подобные решения начнут выпускать и другие ИТ-фирмы.
Материалы по теме из нашего «Мира Hi-Fi»:
«Стервозная Бетти» и аудиоинтерфейсы: почему они говорят женским голосом?
Первый в мире «гендерно-нейтральный» голосовой помощник
Аудиоинтерфейсы: звук как источник информации на дороге, в офисе и в небе
Как научить разговаривать машину
Скоро в CarWebGuru будет усовершенствована система событий и синтез речи. Можно будет научить ваш авто разговаривать. Говорить будет по определенным событиям, например, при превышении скорости, остановке, старте, при подъезде к дому или работе. А самое интересное что авто будет говорить не одну фразу, а случайную, заданную по определенному шаблону.
Таким образом авто будет здороваться, разговаривать у дома или называть мост и реку по которому проезжаем. В итоге получается прикольно и креативно. Особенно удивляются пассажиры, которые слышат такое.
Данным постом хочу собрать прикольные и полезные фразы и идеи для разговоров. Пишите ваши варианты (в комментах) того что может сказать ваше авто и где. Я буду собирать наиболее интересные и дополнять список. С помощью переменных можно произносить дату, время, песню, исполнителя, название автомобиля и др.
Доступные переменные:
%time — сегодняшняя дата
%date — время
%car-title — название авто из настроек(например, ласточка, бегемот…)
%mus-artist — исполнитель который играет в данный момент
%mus-title — название песни которая играет в данный момент
Приветствия при старте:
Данные фразы могут говориться при включении зажигания и загрузке магнитолы.
* Куда едем шеф
* Куда едем начальник
* Удачной поездки
* Желаю удачной поездки
* Я рад служить тебе хозяин
* Здравствуй хозяин
* Здравствуйте товарищи пасажиры
* %car-title готов к поезке
* %car-title ждет дальнейших указаний
* Привет, сегодня %date %time
* Здравия желаю командир
* Экипаж к бою готов. Поехали.
* Пристегните ремень
* Не забудьте пристегнуться
При подъезду к дому:
Данные фразы могут говориться при подезде к дому (задается координатами и радиусом срабатывания).
* Добро пожаловать домой
* Ура мы приехали
* Дом, милый дом!
* Дом рядом
* Вижу дом
* Сейчас %time
* Ищу парковку
* WELCOM HOME
* Домой с пустыми руками нельзя, дома живет Чё купил
* С возвращением, мы скучали
* С приездом, братишка
* Вы на финише
* Ваше путешествие окончено
* Вы добрались до базы проживания
* С приездом — Солнце!
* С успешным возвращением из путешествия!
* С приездом — вам здесь рады
* Промежуточная база взята
* Мы прибыли командир
* База захвачена
При Отъезда от дома:
Данные фразы могут говориться при выезде от дома (задается координатами и радиусом срабатывания).
* Желаю удачной поездки
* Счастливого пути!
* Доброго пути!
* Дорогу покажешь?
* Счастливо добраться!
* Ни гвоздя, ни жезла!
* Комфортной езды!
* Без приключений!
* Ровной дороги. Гладкой дороги.
* Скорейшего возвращения!
* В добрый путь!
* Будь внимательней на дороге!
* Удачи на дорогах.
* Интересных попутчиков.
* Присядь на дорожку.
* Пусть удовольствие от дороги будет сильнее усталости.
* Красивых видов за окном.
* Приятного путешествия.
* Поменьше крутых поворотов.
* Поменьше крутых спусков и крутых подъёмов.
* Тебе добраться и багажу не потеряться!
* Пусть не будет на пути ни заторов, ни пробок, ни аварий!
* Хороших радиоволн в дороге!
* Без штрафов и бешеных бабулек!
* Хорошей погоды в пути.
* Желаю, чтобы не укачивало.
* Желаю не опоздать.
* Дороги — без ям, без выбоин и без ухабов!
* Солнца на спицах, синевы над головой.
* Попутного ветра!
* Желаю не заблудиться в пути.
* Всегда зелёного света!
* Не гоняй и дураку дорогу дай.
* Желаю, чтобы запаска не пригодилась.
* Чем быстрее едешь, тем медленнее повезут…
* Лучше гипс и кроватка, чем гранит и оградка…
* Лучше быть в шесть дома, чем в пол шестого в морге.
* Пускай дорога будет лёгкой и чистой. И вы доберётесь до места назначения очень быстро и легко.
* Тихой дороги, веселой компании.
* Пусть будет лёгкою дорога,
* Пусть приведёт по назначению,
* И обойдёт тебя тревога,
* Доедешь ты без приключений.
* «Имя» — помни, тебя ждут дома!
При подъезду к работе:
Данные фразы могут говориться при подезде к работе (задается координатами и радиусом срабатывания).
* Ищу парковку
* Сейчас %time
* Добро пожаловать на работу
* Человек рожден для труда.
* Без труда не вытащишь и рыбку из пруда.
* Воля и труд дивные всходы дают.
* Кто хорошо трудится, тому есть чем хвалиться.
* Труд человека кормит, а лень портит.
* Труд кормит и одевает.
* Что посеешь- то и пожнешь!
* Кто труда не боится, того и лень сторонится.
* Землю солнце красит, а человека — труд.
* Для кого труд — радость, для того жизнь — счастье.
* За труд не бьют, а награды дают.
* В труде рождаются герои.
* Всякий труд достоин награды.
* Труд, сделал из обезьяны- человека!
* Трудиться, трудиться и ещё раз трудиться
При подъезду к ТЦ (магазин, АШАН и т.д.)
Данные фразы могут говориться при подезде к ТЦ (задается координатами и радиусом срабатывания).
* Магазин АШАН ждет нас
* Я вижу АШАН
* Мы подъехали к АШАНУ
* Готовим деньги, приехали в АШАН
* Готовим сумки и пакеты
* Желаю вам хорошо закупиться
* Желаю удачных покупок
При отъезде от ТЦ (АШАН, магазин и т.д)
Данные фразы могут говориться при выезде из зоны ТЦ.
* Ура! Мы закупились и едем домой!
* Неплохо затарились, пора домой
* Надеюсь купили много полезного
* Через неделю все съедим
* Хорошо что не на автобусе едем
* Меня не забудте покормить
* Я вас уже заждался
При превышении скорости 65 км\ч
* Превышен городской режим скорости
* Тише едешь дальше будешь
* Не спешим, мы еще в городе
* На дорогах бывают камеры
* Бывают штрафы за превышение скорости
* Не нужно торопиться
* Не гони, мы в городе
* Не торопись, успеем
* Эээээ, не, торопиться не надо!
При проезде по мосту
Задается географической точкой
* Какой красивый вид с моста
* С моста не видно рыбаков
* Проезжаем по Ивановскому мосту
* Москва река и Ивановский мост
Рядом с географическими объектами (привязка по точке):
Задается географической точкой
* Проезжаем театр оперы и балета…
* Посмотрите налево, посмотрите направо, красота, даже матом ругаться не хочется
* Осторожно, здесь любят устраивать засады
* Осторожно, возможна засада
* Мы покидаем город
* Мы въезжаем в город
При стоянке 1 минута
Данное событие срабатывает при остановке, например на светофоре и стоянке 1 минута.
* Стоим одну минуту
* Уважаемые пассажиры просьба не беспокоится скоро поедем
* Хорошо поёт %mus-artist
* Хорошая песня %mus-title
* Песня %mus-title а исполнитель %mus-artist
* Слушаем %mus-title
* Давай споём
* Время %time
* Хорошо стоим
* Улыбнись, ты едешь в крутой тачке
* Погнали чего ждем
* Тише едешь дальше будешь
* Скоро поедем нужно приготовиться
При проезде около заправки
Данное событие срабатывает при проезде около заправки, задается географической точкой.
* Я знаю где можно заправиться
* Покормите меня
Фразы с юмором — можно ставить как доп варианты на любые события
* Я рад служить тебе хозяин
* Дорогу покажешь
* Кто-то раньше на автобусе ездил
* Улыбнись, ты едешь в крутой тачке
* Улыбнись, ты за рулем крутого джипа
* Ох уж эти пешеходы
* Давай споём
————————————————-
Если у вас есть прикольные варианты фраз или каких-либо событий или точек — пишите ваши варианты в комментах. Давайте соберем большую коллекцию, которая будет всем нам полезна в будущем.
ГОЛОСОВОЕ УПРАВЛЕНИЕ STARLINE С ПОМОЩЬЮ АЛИСЫ
Всем привет. Т.к. я являюсь обладателем Яндекс станции и сигнализации starline захотелось их связать. Первые попытки это сделать были успешными, но работали через костыли. Не так давно наткнулся, что теперь это все можно сделать легким путем и работает корректно. Проблем у меня пока не возникает. Наткнулся случайно, т.к. не какой рекламы и прочего не видел. Скорее всего это не рекламируют, поэтому многие даже не знаю, что уже можно сделать связку.
Для первоначальной настройки навыка, активируйте его сказав Алисе: «Алиса, запусти навык СтарЛайн» или найдите его через поиск в каталоге навыков (ищем старлайн или starline). После чего следуем инструкциям от помощника. Пароль надо диктовать быстро.
Для приложения StarLine 2 Android надо войти в меню «Аккаунт и приложение» (в правом верхнем углу главного экрана) — «Одноразовый пароль».
Для приложения StarLine 2 iOS необходимо войти в меню (в левом верхнем углу главного экрана), перейти в личный кабинет, и выбрать там пункт «Одноразовый пароль».
ЧТО УМЕЕТ ПОМОЩНИК/НАВЫК?
Он может рассказать информацию по статусам: статус автомобиля, баланс SIM-карты, заряд АКБ, местоположение автомобиля, температура двигателя и салона, пробег, уровень топлива (при условии поддержки данных возможностей оборудованием).
Выполнять команды управления: поставить на охрану, снять с охраны, запустить и остановить двигатель, управление сервисным режимом, запуск предпускового подогревателя, открыть багажник, посигналить, доп. канал.
КАК ИСПОЛЬЗОВАТЬ ПОМОЩНИК/НАВЫК?
Есть несколько вариантов. Запустить навык, после чего уже просить выполнить команды для получения статусов или выполнения команд управления.
Или самый простой вариант, сразу говорить Алисе: «Алиса, спроси у СтарЛайн статус автомобиля», «Алиса, скажи СтарЛайн завести двигатель» и т.д.
Держать в голове такие длинные фразы и тем более постоянно их произносить как не очень хотелось, да и забудешь. Поэтому я настроил сценарии для самых нужных мне команд.
Такие фразы я настроил:
Cкажи СтарЛайн запустить двигатель, Cкажи СтарЛайн остановить двигатель, Cкажи СтарЛайн закрыть машину, Cкажи СтарЛайн открыть машину, Cкажи СтарЛайн открыть багажник, Спроси у СтарЛайн статус автомобиля.