The OpenNET Project / Index page

[ новости /+++ | форум | теги | ]

Представлен открытый голосовой AI-ассистент Home Assistant Voice

21.12.2024 20:38

Проект Home Assistant, развивающий открытую платформу домашней автоматизации, объявил о разработке аппаратного устройства Home Assistant Voice с реализацией голосового ассистента. Устройство может применяться для управлений умным домом, выполнения задач и формирования ответов на вопросы пользователя при взаимодействии на естественном языке. Схемы, распайки платы, макеты для печати корпуса на 3D-принтере распространяются под открытыми лицензиями. Код прошивки доступен под лицензией MIT. Готовое устройство выставлено в продажу за $59.

Home Assistant Voice оптимизирован для использования совместно с умными домом на базе открытой платформы Home Assistant. Для задействования ассистента достаточно просто включить устройство и Home Assistant автоматически предложит интегрировать его в домашнюю сеть. По сравнению с имеющимися на рынке коммерческими системами, такими как Google Mini, Apple HomePod, Amazon Echo и Яндекс Станция, проект Home Assistant даёт возможность создать полностью автономное решение, не зависящее от внешних сервисов и подключения к интернету. Распознавание и синтез речи, а также формирование ответов производится на отдельном сервере c использованием AI-технологий и большой языковой модели.

Пользователь может запустить собственный сервер в своей домашней сети или воспользоваться внешним облачным сервисом. Для локальной обработки голосовых команд необходима система как минимум с процессором Intel N100. Программное окружение базируется на компоненте Assist, использующем для распознавания речи модель Whisper или систему Rhasspy Speech. Для формирования ответов на вопросы, заданные на естественном языке, задействована большая языковая модель LLaMA. При нежелании создавать свой сервер, пользователь может подключить голосовой ассистент к облачному сервису Home Assistant Cloud. Кроме того, возможна интеграция с AI-сервисами Open AI, Google AI и Anthropic.

Взаимодействующее с пользователем устройство имеет размер 9.4 x 9.4 x 3 см и весит 120 гр. Устройство оснащено SoC ESP32-S3 на базе двухядерного микроконтроллера XTensa LX7 240 MHz с 16 MB Flash и 8 MB ОЗУ. Для обработки звука задействован чип XMOS XU316, выполняющих такие функции, как подавление эха, устранение шумов и автоматическая настройка уровня входного сигнала. Подключение к домашней сети и другим устройствам осуществляется через Wi-Fi и Bluetooth 5.0. Для подсоединения дополнительных датчиков и аксессуаров предусмотрен порт Grove.

На текущем этапе разработки в продажу выпущена предварительная модель Home Assistant Voice PE (Preview Edition). Предварительный статус объясняется желанием учесть мнение сообщества и сформировать полноценный продукт, готовый для использования в любом доме в любой стране. Благодаря разработке в соответствии с моделью Open Hardware, Home Assistant Voice PE также может рассматриваться как эталонный прототип, выступающий основой для создания модификаций и производных продуктов. В текущем виде не вся запланированная функциональность готова и не все языки поддерживаются. Например, русский язык уже заявлен как поддерживаемый на локальном сервере и в облаке, но украинский язык пока может использоваться только при подключении к внешнему облаку.

При помощи ассистента пользователь может использовать голосовые команды для включения/выключения света, активации бытовых устройств, добавления заметок в список покупок, управления кондиционером, получения информации о температуре и времени, запуска таймера, открытия ворот, воспроизведения музыки, запуска робота-пылесоса и выполнения сценариев, заранее определённых в Home Assistant. Корпус снабжён подсветкой для визуальной индикации приёма команд. Имеется аппаратный выключатель микрофонов, гарантирующий сохранение конфиденциальности, когда это необходимо пользователю. Через звуковой порт 3.5mm можно подключить внешние колонки для воспроизведения музыки.



  1. Главная ссылка к новости (https://www.home-assistant.io/...)
  2. OpenNews: Удалённо эксплуатируемая уязвимость в платформе Home Assistant
  3. OpenNews: Проект Valetudo развивает модификации прошивок для локального управления роботами-пылесосами
  4. OpenNews: Выпуск WebThings Gateway 1.1, шлюз для умного дома и IoT-устройств
  5. OpenNews: Представлен Sirius, открытый персональный ассистент, напоминающий Apple Siri и Google Now
  6. OpenNews: Выпуск Dragonfire 1.0, виртуального голосового помощника для Linux
Лицензия: CC BY 3.0
Короткая ссылка: https://opennet.ru/62450-voice
Ключевые слова: voice, homeassistant
При перепечатке указание ссылки на opennet.ru обязательно


Обсуждение (62) Ajax | 1 уровень | Линейный | +/- | Раскрыть всё | RSS
  • 1.1, Аноним (1), 21:03, 21/12/2024 [ответить] [﹢﹢﹢] [ · · · ]  
  • +6 +/
    Молодцы они.
     
     
  • 2.71, Дммитрий Макаров (-), 11:46, 22/12/2024 [^] [^^] [^^^] [ответить]  
  • +1 +/
    А как быть с устройствами, которые изначально не имеют умных функций? Например, увлажнитель воздуха. Дешевые модели не имеют функций таймера и т.п. Можно было бы использовать умную розетку... Но производитель увлажнителя пишет в инструкции, что устройство нельзя включать/выключать путем прямой подачи тока, а только через кнопку выключателя. А в чем разница? Я слышал, это справедливо для многих устройств - типа через кнопку можно, а через включение/отключение кабеля/розетки - нельзя. В чем разница? И как тогда превратить такие устройства в "умные"?
     
     
  • 3.79, нейм (?), 12:22, 22/12/2024 [^] [^^] [^^^] [ответить]  
  • +/
    Производитель просто себя так ограждает от судебных исков, обозначая такой способ выключения некорректным.
    И бонусом подталкивает тебя к покупке более дорогого увлажнителя. Капытализьмъ
     
     
  • 4.89, Аноним (89), 13:26, 22/12/2024 Скрыто ботом-модератором     [к модератору]
  • +/
     

  • 1.2, Устин (ok), 21:07, 21/12/2024 [ответить] [﹢﹢﹢] [ · · · ]  
  • +1 +/
    Очень хорошо, прям годно. С удовольствием свалю на это дело с Яндекса, когда допилят, если ещё погоду на сегодня научится озвучивать)
     
     
  • 2.5, alexandr_0503 (ok), 21:16, 21/12/2024 [^] [^^] [^^^] [ответить]  
  • –2 +/
    Просто перейти мало, надо это ещё и поддерживать, а в основном все производители устройств умного дома вливают как раз-таки в коммерческие решения
     
     
  • 3.67, Аноним (-), 11:27, 22/12/2024 [^] [^^] [^^^] [ответить]  
  • +/
    > производители устройств умного дома

    Я бы не сказал что это относится к умному дому. Это скорее социальное устройство - скрасить одиночество, ну да, на крайний случай пульт управления по голосу. А по дому оно никаких задач не решает.

     
  • 2.20, Аноним (20), 21:51, 21/12/2024 [^] [^^] [^^^] [ответить]  
  • +4 +/
    Ни разу не видел живого человека кто бы пользовался этими голосовыми ассистентами. Всех кого знаю их в своих телефонах отключают первым делом.
     
     
  • 3.23, Аноним (23), 21:57, 21/12/2024 [^] [^^] [^^^] [ответить]  
  • +16 +/
    Но почему?
    Это же так прикольно, приходишь домой с сумками и, вместо того, чтобы коленкой щёлкнуть влючатель, говоришь:
    - Алиса!
    - ... тишина...
    - АЛИСА!
    - Чем я могу вам помочь?
    - ВКЛЮЧИ СВЕТ В ПРИХОЖЕЙ!
    - Ха-ха-ха, какая смешная шутка!
     
     
  • 4.41, Аноним (41), 00:12, 22/12/2024 Скрыто ботом-модератором     [к модератору]
  • +1 +/
     
  • 4.51, Аноним (51), 06:50, 22/12/2024 [^] [^^] [^^^] [ответить]  
  • +/
    Aleven!
     
  • 3.45, Rezzet (??), 02:07, 22/12/2024 [^] [^^] [^^^] [ответить]  
  • +/
    В телефоне голосовой помощник не имеет смысла, вы пользуетесь телефоном когда держите его в руках, а вот в доме голосовое управление(голосовой помощник) это очень удобно, на столько к этому привыкаешь, приезжаю на дачу и долго туплю почему я прошу включить свет и ничего не происходит.
     
     
  • 4.57, Аноним (57), 10:17, 22/12/2024 [^] [^^] [^^^] [ответить]  
  • +/
    Имеет смысл. Например можно очень быстро можно создавать напоминания без ползания по интерфейсам
     
  • 4.58, Аноним (58), 10:17, 22/12/2024 [^] [^^] [^^^] [ответить]  
  • –1 +/
    Двери разве что, как нецифрвой раб - не распахивает при входе
    но, в релизной версии таки могут и это прикрутить же.

    Гойский цифровой раб - по бросовой цене... - мечта всех в прошлом по сути беглых революциями рабов, чтобы не они прислуживали - а, им! Не так ли?...

     
  • 4.64, Аноним (64), 10:54, 22/12/2024 Скрыто ботом-модератором     [к модератору]
  • +/
     
  • 2.76, Аноним (-), 12:09, 22/12/2024 Скрыто ботом-модератором     [к модератору]
  • +/
     
  • 2.77, Аноним (-), 12:13, 22/12/2024 Скрыто ботом-модератором     [к модератору]
  • +/
     
  • 2.90, Аноним (89), 13:28, 22/12/2024 Скрыто ботом-модератором     [к модератору]
  • +/
     

     ....ответы скрыты (13)

  • 1.7, Аноним (-), 21:34, 21/12/2024 [ответить] [﹢﹢﹢] [ · · · ]  
  • –2 +/
    Ох уж эти голосовые ассистенты, сколько их уже было, а воз и ныне там... Вот и Home Assistant туда же, выпустили своего "умного" помощника. За $59, между прочим! Хотя постойте, а зачем он мне? Я уже давно перешёл на GNOME, и знаете, ни капельки не жалею!

     
     
  • 2.40, анон (?), 00:02, 22/12/2024 [^] [^^] [^^^] [ответить]  
  • –1 +/
    А на расте пишешь? На расте то?
     
  • 2.42, Аноним (42), 00:35, 22/12/2024 [^] [^^] [^^^] [ответить]  
  • +2 +/
    Вот там голосовой помошник вам точно необходим. А то одной кнопкой с управлением не справиьтся.
     
  • 2.74, КО (?), 12:02, 22/12/2024 [^] [^^] [^^^] [ответить]  
  • +/
    Ох уж эти GNOME, сколько их уже было, а воз и ныне там... Вот и Ubuntu туда же, выпустили свой DE. За $25, между прочим! Хотя постойте, а зачем он мне? Я уже давно перешёл на клей, и знаете, ни капельки не жалею!
     

  • 1.10, Параноик (?), 21:38, 21/12/2024 [ответить] [﹢﹢﹢] [ · · · ]  
  • +/
    Беспроводные интерфейсы в умном автономном доме не нужны. Иначе он не автономный ни разу. ;)
    Поэтому, либо сразу отключать WiFi функционал в ESP32-S3, либо лучше пилить своё решение на ESP32-P4 — когда они его таки допилят. Джва года уже жду. :(
     
     
  • 2.14, Хихи (?), 21:43, 21/12/2024 [^] [^^] [^^^] [ответить]  
  • +1 +/
    Через микрофон в принципе можно также взломать. Особенно если специально добавить соответствующую закладку.
     
  • 2.24, Аноним (23), 22:00, 21/12/2024 [^] [^^] [^^^] [ответить]  
  • +/
    > Иначе он не автономный ни разу.

    Как беспроводной интерфейс коррелирует с автономностью?

     
     
  • 3.29, Параноик (?), 22:30, 21/12/2024 [^] [^^] [^^^] [ответить]  
  • +1 +/
    Откройте любой changelog того же Android, к примеру. Там постоянно всплывают исправление уязвимостей в беспроводных драйверах имеющих критический уровень. Думаете, при исправлении уязвимости в SDK к MCU с беспроводным интерфейсом все производители вот прям возьмут и побегут их исправлять во всяких лампочках и прочих релюшках?! Что-то я сомневаюсь. Особенно, если с момента выпуска пройдёт несколько лет.
     
     
  • 4.31, Пноним (?), 22:31, 21/12/2024 [^] [^^] [^^^] [ответить]  
  • +/
    Вывод не покупать или какой?
     
     
  • 5.32, Параноик (?), 22:37, 21/12/2024 [^] [^^] [^^^] [ответить]  
  • +/
    Я бы не купил. И к HA лично у меня доверия нет. Но это сугубо моя личная паранойя. :)
     
     
  • 6.68, Igor (??), 11:32, 22/12/2024 [^] [^^] [^^^] [ответить]  
  • +/
    Странная у тебя паранойя! Против Алиса-станций она у тебя молчит (хотя Алиса является подслушивающим устройством, передающим все услышанное в облако). А тут предлагают автономное устройство вместо Алиса-станций, а у тебя вдруг паранойя разыгралась! Что звук нельзя через беспроводной интерфейс передавать? Срочно выкинуть всем блютусные колонки?
     
     
  • 7.92, Аноним (92), 13:55, 22/12/2024 Скрыто ботом-модератором     [к модератору]
  • +/
     
  • 5.34, Аноним (34), 22:47, 21/12/2024 [^] [^^] [^^^] [ответить]  
  • +/
    вывод: не использовать ничего несертифицированного!
     
     
  • 6.56, Аноним (56), 09:28, 22/12/2024 [^] [^^] [^^^] [ответить]  
  • +2 +/
    ФСТЭКом?
     
     
  • 7.87, Аноним (34), 13:12, 22/12/2024 [^] [^^] [^^^] [ответить]  
  • +/
    Этим, тем более, хорошо подмечено!
     
  • 7.88, Аноним (34), 13:17, 22/12/2024 [^] [^^] [^^^] [ответить]  
  • +/
    на вопрос, "а кем же тогда?", отвечу - самим собой, именно, взять спеку, если она есть на продукт, верифицировать, валидировать, и результат сей операции есть - сертификат, вот вам и сертифицированный продукт.
     
  • 4.80, Аноним (80), 12:34, 22/12/2024 [^] [^^] [^^^] [ответить]  
  • +/
    Тут тогда надо определиться с "базой".
    Тема разговора - Хоум Ассистант. По сути - DIY решение.
    Тема треда - микроконтроллеры ESP.
    Ну, как бэ, я грешным делом подумал, что мы уходим от готовых решений в сторону ESPHome или вообще самописных. Тогда с обновлениями SDK нет проблем. В первом случае - ESPHome, вроде бы, активно развивается. Во-втором - всё зависит от тебя.
     
  • 2.43, Аноним (43), 00:51, 22/12/2024 [^] [^^] [^^^] [ответить]  
  • –1 +/
    С таким же успехом можно убедать в лес и жить в палатке. Ибо сколько устройств в мире не обновляются и с дырами торчат в интернет
     

  • 1.12, Аноним (20), 21:41, 21/12/2024 [ответить] [﹢﹢﹢] [ · · · ]  
  • +5 +/
    Все эти голосовые ассистенты не более чем игрушки и нафиг не нужны. Начиная от siri и заканчивая всеми этими "вумными" на основе "ИИ". Это моё личное мнение.
     
     
  • 2.60, Аноним (58), 10:33, 22/12/2024 [^] [^^] [^^^] [ответить]  
  • +1 +/
    А, кто спрашивать будет?
    Потребует скажем твой работодатель, как это уже модно в иностранных компаниях, всё делать через online помошников (непойми кем контроллируемым но, если себе не врать - то вполне пойми...) ибо и ему плюс: тебя легче контроллировать чтобы меньше бездельничал и т.б.шлялся где попало в рабочее время
    -  быстренько засунешь своё мнение куда подальше.........

    так что пользуйся последними глотками свободы расписывая тут крутизну своего мнения...
    вместо реального сопротивления на фронте.

     
  • 2.70, Igor (??), 11:34, 22/12/2024 Скрыто ботом-модератором     [к модератору]
  • +/
     

  • 1.15, Аноним (20), 21:45, 21/12/2024 [ответить] [﹢﹢﹢] [ · · · ]  
  • –1 +/
    > 16 MB Flash и 8 MB ОЗУ

    Это в 2024 году то?

     
     
  • 2.17, Аноним (17), 21:47, 21/12/2024 [^] [^^] [^^^] [ответить]  
  • +/
    Это MCU. Для MCU это нормально.
     
     
  • 3.18, Аноним (20), 21:49, 21/12/2024 [^] [^^] [^^^] [ответить]  
  • –5 +/
    Учитывая сколько стоит память сегодня - крайне не нормально. Нормально это было бы лет 20 назад. А тут очевидная жадность китайцев, где себестоимость этих mcu менее 1 доллара.
     
     
  • 4.27, Пноним (?), 22:28, 21/12/2024 [^] [^^] [^^^] [ответить]  
  • –1 +/
    Собери свой комп на базе Интел нюк какие проблемы?
     

  • 1.36, Аноним (36), 23:08, 21/12/2024 [ответить] [﹢﹢﹢] [ · · · ]  
  • +/
    > Пользователь может запустить собственный сервер в своей домашней сети или воспользоваться внешним облачным сервисом. Для локальной обработки голосовых команд рекомендуется использование системы как минимум с процессором Intel N100.
    > Взаимодействующее с пользователем устройство имеет размер 9.4 x 9.4 x 3 см и весит 120 гр. Устройство оснащено SoC ESP32-S3

    костыль на костыле костылём управляет. ovos поинтересней выглядит

    https://www.openvoiceos.org

     
     
  • 2.72, Igor (??), 11:50, 22/12/2024 [^] [^^] [^^^] [ответить]  
  • +/
    > костыль на костыле костылём управляет. ovos поинтересней выглядит

    Можно подумать что ovos не костыль! Или костыль RaspberryPi для вас лучше костыля ESP32? А без аппаратной обработки звука (как в предлагаемом ассистенте) ovos сосет с причмокиванием!

     
     
  • 3.84, Аноним (36), 12:53, 22/12/2024 [^] [^^] [^^^] [ответить]  
  • +/
    > Можно подумать что ovos не костыль! Или костыль RaspberryPi для вас лучше костыля ESP32?

    конечно лучше - чтобы собрать ovos для любого процессора работы там на одну выкуренную трубку

    https://github.com/OpenVoiceOS/ovos-buildroot

     
  • 3.85, Аноним (36), 12:59, 22/12/2024 [^] [^^] [^^^] [ответить]  
  • +/
    > А без аппаратной обработки звука (как в предлагаемом ассистенте) ovos сосет с причмокиванием!

    что за аппаратная обработка, на проприетарном софте xtensa чтоли ? нафик она нужна если точно так же можно обработать на CPU опенсорсным софтом главное чтобы производительности хватало, там ведь не надо батарейку

     

  • 1.39, Ананоним (?), 23:56, 21/12/2024 [ответить] [﹢﹢﹢] [ · · · ]  
  • +1 +/
    Какой-нибудь дурачёк подключит управление нагревательными приборами к этому голосовому ассистенту, ну а кто-нибудь с громкоговорителем через окно или дверь поглумится. "Алиса, спали хату!", "Слушаюсь, хозяин!"
     
     
  • 2.44, Аноним (44), 00:53, 22/12/2024 [^] [^^] [^^^] [ответить]  
  • +1 +/
    Это не так работает, если только с чайниками. Но скорее там тен хлопнет, защита только один раз сработала, сам свидетель, но к сожалению чайник был мой
     
  • 2.62, Аноним (58), 10:44, 22/12/2024 [^] [^^] [^^^] [ответить]  
  • +/
    > "Алиса, спали хату!", "Слушаюсь, хозяин!"

    А, не хочешь в ответ: "Уже набираю 103..."
    - "Алло диспетчер, пришлите бригаду, хозяин моего дома - то ли совсем обкурился, то ли просто спятил!
    Представляет высшую угрозу для безопасности!"
    - "Сейчас экстренно посылаю ближайший полицейский коптер с электрошокером... Ждите, чуть мы позже подъедем"

     
     
  • 3.65, Аноним (65), 10:57, 22/12/2024 [^] [^^] [^^^] [ответить]  
  • +/
    Поглумится кто-нибудь, а заберут хозяина. Годно!
     
  • 2.78, Аноним (-), 12:16, 22/12/2024 [^] [^^] [^^^] [ответить]  
  • +/
    Я видел разработку удаленного управления конвектором и бойлером. Были поставлены аппаратные ограничения на случай взлома. Умные люди, которые знают такие варианты развития событий не позволят вам такое сделать ещё на этапе проектирования.
     
     
  • 3.82, Абывыгда (ok), 12:48, 22/12/2024 [^] [^^] [^^^] [ответить]  
  • +/
    > Умные люди

    Слишком дорого и долго. ..уяк-..уяк и в продакшн.


     

  • 1.46, Аноним (46), 02:43, 22/12/2024 [ответить] [﹢﹢﹢] [ · · · ]  
  • +/
    Недавно читал что есть реализация голосового управления на TinyML, как раз на есп, один наш чел даже продает готовые платы с моделью под великий и могучий
    А про новость, это здорово, что есть такие открытые решения
    Лично я всегда был противником готовых решений, и уж если строить умный дом, то самому и на основе открытых технологий
    Ибо здесь использовать готовое, это как приглашать к себе всех подряд
     
     
  • 2.53, Аноним (53), 07:10, 22/12/2024 [^] [^^] [^^^] [ответить]  
  • +/
    Замки на дверь и ключи тоже делаете вручную, а не покупаете готовые в магазине и не приглашаете слесаря для установки?
     
     
  • 3.86, Аноним (80), 13:04, 22/12/2024 [^] [^^] [^^^] [ответить]  
  • +/
    > и не приглашаете слесаря для установки

    Надо было врезать замок в межкомнатную деревянную дверь. Слесаря не звал. В чём проблема? Минимум инструмента и час интересной работы.

     

  • 1.49, Аноним (51), 06:45, 22/12/2024 [ответить] [﹢﹢﹢] [ · · · ]  
  • +/
    Очередное почти бесполезное устройство Всё ядро вынесено во вмешние сервера, пр... большой текст свёрнут, показать
     
     
  • 2.54, Аноним (53), 07:14, 22/12/2024 [^] [^^] [^^^] [ответить]  
  • +/
    > P.S. Амазон сворачивает Алексу. Не взлетели эти "колонки".

    Это проблема амазона, а не колонок.

     
  • 2.66, Аноним (58), 11:17, 22/12/2024 Скрыто ботом-модератором     [к модератору]
  • +/
     
  • 2.73, Igor (??), 11:58, 22/12/2024 [^] [^^] [^^^] [ответить]  
  • +/
    > Очередное почти бесполезное устройство. Всё ядро вынесено во вмешние сервера, при этом предлагается использовать облака.

    Вы новость хотя бы прочитайте, прежде чем глупости писать в коментарии - "По сравнению с имеющимися на рынке коммерческими системами, такими как Google Mini, Apple HomePod, Amazon Echo и Яндекс Станция, проект Home Assistant даёт возможность создать полностью автономное решение, не зависящее от внешних сервисов и подключения к интернету."

    Где здесь - "все вынесено во внешние сервера"? Тараканы в голове нашептали?

     

  • 1.69, Аноним (-), 11:34, 22/12/2024 Скрыто ботом-модератором [﹢﹢﹢] [ · · · ]     [к модератору]
  • +/
     
  • 1.91, Валерий (??), 13:31, 22/12/2024 [ответить] [﹢﹢﹢] [ · · · ]  
  • +/
    Умный дом по идее может и yбить своего владельца. Поэтому умный дом не должен быть слишком умным. Уже много фильмов снято на эту тему. Нельзя, чтобы дом был слишком умным. А лучше все делать самому.
     

     Добавить комментарий
    Имя:
    E-Mail:
    Текст:



    Партнёры:
    PostgresPro
    Inferno Solutions
    Hosting by Hoster.ru
    Хостинг:

    Закладки на сайте
    Проследить за страницей
    Created 1996-2024 by Maxim Chirkov
    Добавить, Поддержать, Вебмастеру