Управление голосом сервером умного дома Home Assitant с помощью Voice Assistant и USB микрофона

  Рет қаралды 13,062

У Павла!

У Павла!

Күн бұрын

Пікірлер
@upavla
@upavla 10 ай бұрын
Подписывайтесь на мой телеграмм канал: t.me/ypavla
@arthurgabdullin3779
@arthurgabdullin3779 10 ай бұрын
стоит добавить не просто "мощность компьютера", а словарь языковой модели или как он там называется - чем он больше по объему, тем больше ресурсов требуется, но и сильно лучше результат распознавания. Плюс своего помощника в том, что сказанное остается в пределах сервера и в никакой условный Яндекс не утекает.
@akireyenko1984
@akireyenko1984 10 ай бұрын
Вшиспер:))))) Это пять!!!
@dan-3268
@dan-3268 5 ай бұрын
Сам в шоке был. Ясно же что произносить надо "вХиспер" 😅
@mr.wayfarer6082
@mr.wayfarer6082 6 күн бұрын
давно из Лондона в Балашиху переехали? Чего шеймите человека, если он не знает языка?
@Mbyte-rx8lj
@Mbyte-rx8lj 10 ай бұрын
Видел на просторах интернета опенсурс помошника irine от janvarev. Очень интересно как его прикрутить к HA, т.к. возможностей у него намного больше, и варианты голоса есть получше.
@kristoferrobin4695
@kristoferrobin4695 10 ай бұрын
Спасибо за информацию😊
@kdv9824
@kdv9824 10 ай бұрын
в общем и целом пока до алексы будешь докрикивать пока она тебя распознает уже сам зайдёшь в. виджет и активируешь сцену😅, но в целом видео как всегда полезное спасибо за труды!!!
@coolflex2
@coolflex2 8 ай бұрын
Круто когда обьясняют такое, прям респект за работу, конечно есть и лучше решения, в видео он сказал про Алису, но все же!!!
@vechtomas
@vechtomas 10 ай бұрын
А если подключить не юсб а аналоговый через джек?
@upavla
@upavla 10 ай бұрын
Хз, тут я чето не подумал. Не уверен, что звуовая карта raspberry pi определилась
@vmabramenko
@vmabramenko 10 ай бұрын
​@@upavlaтоже подумал про аналоговый микрофон. Сто процентов что у вас настроена ALSA, а может еще и PulseAudio. Если работать со звуком на вход (микрофон) через АЦП, а на выход (усилитель/колонки) черз ЦАП, то ресурсы основного процессора сильно освобождаются. У меня, например, все это делает внешняя звуковая карта, у вас на малинке АЦП/ЦАП скорее всего на борту (наверное на вариантах попроще тоже внешняя карта нужна). Пока коммент писал, глянул по-быстрому, аддоны для PukseAudio точно есть. И видел что TTS пускают через MPD, соответственно ALSA, как минимум, через прокладку мпд доступна. P.S. это все для "подумать" и про то как получить микрофон высокого качества/чувствительности с гораздо меньшими вложениями
@upavla
@upavla 10 ай бұрын
@vmabramenko alsa это ппц конечно. Но у меня там стоял hasos. Хз что там у него. Может и alsa
@Walteg74
@Walteg74 10 ай бұрын
Все дополнения что ставятся через магазин, вроде разворачиваются в отдельных докер контейнерах. Можете скинуть названия образов? а то там только на один Whisper вариантов больше 10 страниц :)
@hotmonitor
@hotmonitor 8 ай бұрын
Можно ли установить 2 USB-микрофона?
@nrz_tv
@nrz_tv 4 ай бұрын
До 127 устройств
@goiiia3774
@goiiia3774 10 ай бұрын
А есть управление жестами через веб камеру ?
@upavla
@upavla 10 ай бұрын
О таком не слышал. Xiaomi лампа только знаю умеет воспринимать пару жестов.
@dartwejders
@dartwejders 10 ай бұрын
спасибо за проделанную работу да, сыровато, но это уже хорошее начало.
@ИлайСмитт
@ИлайСмитт 7 ай бұрын
Да ещё бы правда видео по работе микрофона через джек и по использованию микрофона блютуз колонки такие тесты глянуть
@user-gw5yj2209
@user-gw5yj2209 10 ай бұрын
Здравствуйте. Так можете подсказать, как решить проблему "Ваше подключение к Home Assistant не защищено с помощью HTTPS. Это приводит к тому, что браузеры блокируют доступ Home Assistant к микрофону.? Андроид 14.
@upavla
@upavla 10 ай бұрын
Такое на айфонах вроде
@laxerspk
@laxerspk 10 ай бұрын
Вероятно, настроить https на НА и , может, выпустить и добавить в НА сертификат Lets Encrypt.
@ДмитрийСолдатов-э9ф
@ДмитрийСолдатов-э9ф 10 ай бұрын
Попробуйте в качестве TTS использовать RHVoice, по мне лучше проговаривает
@DimaAndr
@DimaAndr 10 ай бұрын
Насколько я понял, озвучиваешь необходимий сценарий и он срабатывает?
@polbin
@polbin 10 ай бұрын
Спасибо за видео. Попробовал с хорошим микрофоном. Результат так же не очень. Проблема с распознавателем речи, например слово (включи) он упорно распознаёт как (в ключи) и естественно не включает -)) из 10 попыток примерно 1 срабатывает. Может распознаватель можно как то дообучить ? (будем изучать мануал) Задержка ответа или действия при инициализации голосового помощника через подключенный к серверу микрофон, похоже прописана где то в конфигурации, ресурсы процессора на скорость ответа не влияют.
@upavla
@upavla 10 ай бұрын
Есть вариант локальную базу whisper скачать. Есть интеграция от alexit. Но там предупреждение, что она много ресурсов кушает и весит
@polbin
@polbin 10 ай бұрын
Продолжаю наблюдение. Поставил базу Medium-int8 стало значительно лучше. (сервер PROXMOX core i3 12100f, 8Gb, сейчас выделены все 4 ядра под HA, голосовой запрос нагружает до 25%) Заметил, что когда близко говорить в микрофон, распознаёт быстрее (2- 3 сек). Когда отдаляешься от микрофона, тоже распознаёт но значительно медленнее (6 - 8 сек) Для быстрой работы Whisper рекомендует использовать видеокарту. Не знаю насколько это целесообразно для умного дома, с учётом немалого потребления видеокартой электричества 24/7, удовольствие кричать в доме - окей Набу включи розетку -, будет довольно финансово затратно -) Но всё равно любопытно. @@upavla
@A_R_X_A_N_G_E_L-TV
@A_R_X_A_N_G_E_L-TV Ай бұрын
СДЕЛАЛ ВСЕ КАК НА ВИДЕО НО СИСТЕММА НЕ РАСПОЗНАЕТ НИ КАКИЕ КОМАНДЫ
@SuperVitcom
@SuperVitcom 7 ай бұрын
медленно жуть ..... на распознавание команды 5-15 сек и при том качестве распознавания это ещё раза 3-4 надо повторить и не факт что правильно распознает. может какие настройки можно покрутить ..
@akaDemBirsk
@akaDemBirsk 8 ай бұрын
Попробовал, реакция моментальная, проц e3-165l v2, даже не грузит почти, но качество распознавания отвратительное, можно как-то улучшить его?
@akaDemBirsk
@akaDemBirsk 8 ай бұрын
Разобрался, просто стояла минимальная модель...
@Правопорядок-с6ш
@Правопорядок-с6ш 10 ай бұрын
Добрый день Как решить проблему "Ваше подключение к Home Assistant не защищено с помощью HTTPS. Это приводит к тому, что браузеры блокируют доступ Home Assistant к микрофону."
@upavla
@upavla 10 ай бұрын
Выкинуть iPhone и купить Android :)) я так понял эта проблема на iPhone и как ее решить, я не знаю. Так как у меня андроид
@Правопорядок-с6ш
@Правопорядок-с6ш 10 ай бұрын
Спасибо.@@upavla
@olegdovidoff5863
@olegdovidoff5863 10 ай бұрын
А у меня пишет Ваше подключение к Home Assistant не защищено с помощью HTTPS. Это приводит к тому, что браузеры блокируют доступ Home Assistant к микрофону.
@upavla
@upavla 10 ай бұрын
Уже так случилось у одного. У Вас Apple?
@romanenot
@romanenot 10 ай бұрын
Так он делает это из приложения для телефона (не из браузера).
@olegdovidoff5863
@olegdovidoff5863 10 ай бұрын
@@romanenot и в браузере тоже самое
@kvark_
@kvark_ 10 ай бұрын
Добрый день. Можно ожидать видио про микрофон на esp, микрофон в каждую комнату? А можно сделать видео про подключение колонок по воздуху, в каждой комнате со своей музыкой?
@upavla
@upavla 10 ай бұрын
Да, микрофон на esp. Буду делать
@DmitryKey
@DmitryKey 10 ай бұрын
@@upavla очень нестабильная штука, нон стопом спамит сервер аудиоданными, да и только ленивый не повторил. Если есть свободный одноплатник, собирай сразу wyoming-satellite (первый линк в гугле) с локальным wakeword. Если ещё и на оранже сделаешь, то вообще уникальный контент будет.
@dracosh6618
@dracosh6618 10 ай бұрын
Забавно конечно, но всё же проще поставить Алису в каждый угол и через неё управлять всем.
@asustek78
@asustek78 10 ай бұрын
В Алисе проблема когда нет интернета, она не выполняет команды
@ЕвгенийДмитренко-о3м
@ЕвгенийДмитренко-о3м 10 ай бұрын
Тоже пользуюсь колонкой с Алисой и интеграцией Yandex Smart Home. Всё прекрасно работает. Умный дом ест все объекты, которые указываю в интеграции, датчики, камеры, кондиционер, реле/розетки и пр, причем с привязкой по локациям (комнатам). Если делать передачу именно команды из колонки в HA, то тут возникает проблема точности команд. А так понимание и распознавание команды перекладывается на яндекс)))))
@МихалИваныч
@МихалИваныч 10 ай бұрын
Тогда дядя Майор будет знать сколько раз на дню пердит каждый из проживающих в твоём доме.
@upavla
@upavla 10 ай бұрын
@user-db1zg5jd4m вот мне нечего скрывать :) а Вам? :)
@logotrend
@logotrend 10 ай бұрын
Яндекс - фашисты.
@EvgenMo1111
@EvgenMo1111 7 ай бұрын
tts какое то дно, есть чтото приличное, или с робо голосом как в киношках?
@АлександрИванов-с3ы6ш
@АлександрИванов-с3ы6ш 10 ай бұрын
Ну тут уже мы "слишком много кушать" уж больно быстро привыкли к алисам/марусям/алексам и теперь воспринимаем ГА от НА как некую диковину ))) Я, например, буду ждать "допила" тут как то сервера яндекса захворали и Алиса кирдыкнулась, вот жеж боль была...как выяснилось семья то прям привыкла к ней ))) Годик и будет норм локально работать, надо как то гугловский корал под это дело прикручивать )) будет мини пк обвешаный их TPUшками стоять )))
@MrDrPfGenci
@MrDrPfGenci 10 ай бұрын
брат у тебя всё хорошо я увидел твои вкладки ты обогнал моего руководителя на 4 вкладки !
@sever9633
@sever9633 10 ай бұрын
Так это без тырнета будет работать?
@upavla
@upavla 10 ай бұрын
Да, это работает без интернета
@fatmannewman3591
@fatmannewman3591 9 ай бұрын
Лет 7 назад, когда купил Orange Pi Plus 2E, не помню по какому мануалу подключил Google Assistant (настраивалось из консоли в Armbian). Затем написал на питоне скрипт к нему для управления интернет радио. Пользовался встроеным микрофоном. Все работало как часы, голосовые команды хорошо распознавались во время проигрования музыки, что тогда меня удивило, но зависило конечно же от громкости звучащей музыки из динамиков. Не было никаких задержек в исполнении команд, редко когда нужно было повторять команду второй раз. Скорее всего, в вашем случае, такая нагрузка на проц. возникает из-за алгоритмов работы самого home assistant и всех, этих голосовых дополнений, ресурсов, тем более вашего оборудования с головой должно хватать для распознания голоса.
@БорисБ-ж9ы
@БорисБ-ж9ы 10 ай бұрын
те у кого нет алисы , самое то!!! И да есть еще огромный плюс, оно работает без инета!!!
@druzzer111
@druzzer111 10 ай бұрын
Установил на HA Supervisor. Платформа Intel NUC. распознает крайне уныло. с дикцией все в порядке, максимально медленно и членораздельно проговариваю, и все равно раз на третий понимает. что касается Assist Microphone тут отдельная хохма: он после отнократного срабатывания уходит в себя и не отвечает более на внешние раздражители. в лог ничего не пишет. после перезагрузки модуля все по-новой. Распознал\не распознал- до свидания. На официальном форуме нашел еще пару бедолаг с подобной проблемой. Предложили откатить ядро до январской версии, мол там все работало. Откатил, расстроился что похерилось половина моих интеграций, вернул все обратно. Придумал вилы: автоматизация перезагружает модуль Assist Microphone через 10 секунд после получения wake world. ) Ждем обновлений :)
@druzzer111
@druzzer111 10 ай бұрын
А, еще пытался менять модели whisper, так вот не вышло в модели medium-int8 whisper уходит в циклический ребут. что бы это значило...?
@Kentavr_
@Kentavr_ 10 ай бұрын
такая же проблема с новой версией ядра, если появится решение, напишите пожалуйста, слежу за форумом зарубежным, пока тихо(
@Kentavr_
@Kentavr_ 10 ай бұрын
Вышло новое обновление аддонов все заработало, ура!
@druzzer111
@druzzer111 10 ай бұрын
@@Kentavr_ итак да, победа: после обновы assist microphone больше не вешается после однократного срабатывания, но увы распознавание всё ещё грустное. Мне удалось запустить mrdium-модель whisper. Распознает гораздо лучше, но при этом нагружает ЦП сервера на максимум и время обработки занимает около 10 секунд )
@Kentavr_
@Kentavr_ 10 ай бұрын
@@druzzer111это точно, я пока тестирую на base, тут чуть лучше по процессору, но распознание через раз, попробую поиграть с настройками громкости и подавления шума
@mrMicroSur
@mrMicroSur 10 ай бұрын
А у кого HASS стоит на виртуалке Питона - идут лесом )
@u17l305194817
@u17l305194817 10 ай бұрын
виртуалка питона - это что такое?
@mrMicroSur
@mrMicroSur 10 ай бұрын
@@u17l305194817 Home Assistant Core: Manual installation using Python virtual environment.
@Параульский
@Параульский 10 ай бұрын
Пожалуй продолжу пользоваться с алисой
@israfilibrahim9761
@israfilibrahim9761 10 ай бұрын
Коллега, а как заставить алису управлять HA?
@Параульский
@Параульский 10 ай бұрын
@@israfilibrahim9761 там же есть интеграции
@serg3659
@serg3659 10 ай бұрын
@@israfilibrahim9761 Поставить интеграцию Yandex Smart Home из HACS
@upavla
@upavla 10 ай бұрын
@israfilibrahim9761 легко и просто. Все уже есть на канале. Ищите видео.
@elblog7735
@elblog7735 10 ай бұрын
Этот синтезатор голоса, это конечно ужас! Этим лучше не пользоваться.
@logotrend
@logotrend 10 ай бұрын
ШТА??? «ШИСПЕР»???
@upavla
@upavla 10 ай бұрын
Ага
@ELFMEDIA
@ELFMEDIA 10 ай бұрын
@@upavlaВиспер он.
@wisemars
@wisemars 10 ай бұрын
Вшиспер ахахахх, пожалуйста проверяйте произношение английских слов хотябы в переводчике. Режет слух😢
@upavla
@upavla 10 ай бұрын
Не буду. Мне пофиг на этот язык :)
@AlexanderSmirnovXYZ
@AlexanderSmirnovXYZ 10 ай бұрын
@@upavla тогда уж, если пофиг, сразу говорите "шептатель" :) А то какой-то "вшиспер-блохастер" получается.
@АлексейМиллер-щ7ч
@АлексейМиллер-щ7ч 10 ай бұрын
Шептун и трубач
@upavla
@upavla 10 ай бұрын
@AlexanderSmirnovXYZ ну эт я из вредности конечно. :)
@upavla
@upavla 10 ай бұрын
@user-rw6qd7fz4m главное не пустить этого самого Шептуна
@user-ruzzia-v
@user-ruzzia-v 7 ай бұрын
Микрофон похоже так и не дошел)))
@Volvo_car
@Volvo_car 10 ай бұрын
Спасибо. Алиса рулит
@СергейНСК-р1ь
@СергейНСК-р1ь 10 ай бұрын
ЖДЕМ С ЕСПушкой
@DS-vq4ce
@DS-vq4ce 10 ай бұрын
Первый!😊
When you have a very capricious child 😂😘👍
00:16
Like Asiya
Рет қаралды 18 МЛН
Tuna 🍣 ​⁠@patrickzeinali ​⁠@ChefRush
00:48
albert_cancook
Рет қаралды 148 МЛН
Mom Hack for Cooking Solo with a Little One! 🍳👶
00:15
5-Minute Crafts HOUSE
Рет қаралды 23 МЛН
小丑教训坏蛋 #小丑 #天使 #shorts
00:49
好人小丑
Рет қаралды 54 МЛН
When you have a very capricious child 😂😘👍
00:16
Like Asiya
Рет қаралды 18 МЛН