Готовая умная колонка для Home Assistant через ESP32 и ESPHome на примере M5Stack ATOM Echo

[@upavla]

Подписывайтесь на телеграмм канал: t.me/ypavla

[@ВасилийБогданов-б2и]

Доброго дня! А колонку sberboom нельзя использовать в Home Assistant для управления?

[@Tvsafari2]

Я использовал войс модуль с распознаванием голосовых меток. Работает, как часы, мгновенно. Но голосовые метки - это куча ограничений. В итоге, перешел а Алису.

[@pa3gonShaboLdov]

Что за модуль?

[@Vilz19]

Виспер же! Ш - это «sh». Wh - это мягкая «в»

[@Bad_idea965]

Бесит, правда, вроде грамотный человек, а произношения вообще нет, наверное немецкий в школе изучал ...

[@MrDronix27]

Шиндоус 😊

[@MrBarannikGeorge]

What - вшат?

[@Dzen_Dzenovich]

Затестил сервер стоит на 2680v4 задержка в пол секунды но это через микрофон к асистанту как с m5stack я не знаю

[@afanasiy-s3s]

Виспер у меня вообще не заводится. Пользуюсь vosk от rhasspy, задержка минимальная, распознавания не плохое.

[@DelEbaUrmONIf]

Спасибо за наводку!

[@MrDFR-qr7ib]

Спасибо за инфу !

[@AnomalyHome]

Дорого богато. Если сервер сделать на Nvidia Latepanda мини ПК - будет намного быстрее. И забегая вперёд - на raspberry pi (opange pi one и новее) можно сделать PiCorePlayer с LMS, и это подключается к Home Assistant, в отличие от Volumio. Правда от дисплея на oramge pi придется отказвться, поскольку javelite нет для dietpi. И ещё PiCorePlayer ставится сразу на малину, а squeeze+LMS ставится из dietpi поставленной поверх armbian debian buckworm. Но в итоге управлять музыкой можно в хомассит. За видео дякую. С уважением Лейла.

[@DelEbaUrmONIf]

Спасибо! Будем думать в сторону покупки Raspberry ))

[@AnomalyHome]

@DelEbaUrmONIf удачного проекта))))

[@vadimchernov2509]

как вариант повозится штука интересная но полноценную колонку сделать всеж сложновато будет)

[@battleflint]

спасибо за обзор, понял что пока алису менять не будем

[@DelEbaUrmONIf]

Надо не Xeon, надо Raspberry наверное? (Энергоэффективность). У Pi5 есть поддержка модуля NPU.

[@flibustieros]

Хорошее начало команды: "неипу..."

[@dartwejders]

Вот скажите, кто в курсе. Как же тогда колонки яндекс и гугл умудряются распознавать голос без интернета? Да, они не выполнят все команды, но распознать могут. Та же миди позволяет управлять зигби устройствами офлайн. Там ведь нет мощного процессора, но распознает она сразу.

[@romanenot]

А что такое миди?

[@TRUMPRUM]

Так есть же видос про разработку миди, посмотри, там как раз это объясняется.

[@ИльдарИбрагимов-в2ъ]

Потому что все решает софт,на железе далеко не уедешь

[@dartwejders]

станция яндекс миди@@romanenot

[@dartwejders]

не видел, посмотрю. спасиб@@TRUMPRUM

[@АлексейМиллер-щ7ч]

Кстати wakeword можно свой сделать, чтоб набу не звать. Избушка избушка было бы прикольно

[@serg3659]

Назвать ее Галей, чтобы по команде "Галя, отмена!" выключать будильник.

[@AnomalyHome]

​@@serg3659охрана отмена

[@vasyafortochkin3114]

А есть возможность подключить esp32 к home assistant не по wi-fi, а по кабелю? С той задумкой, чтобы иметь один сервер HA, а ESP32 с датчиками далеко от него и связь была бы по кабелю?

[@silentage6310]

у есп32 (основная, не C/S серий) есть подержка ethernet так что в теории можно

[@НикитаГрачев-ж9с]

Спасибо за интересное освещение прогресса! Подскажите, Вы пробовали в настройках "распознавание речи" выбирать не whisper, а home assistant cloud? Судя по ролику kzbin.info/www/bejne/hnunYnWYhdyCgq8si=23HO7ksB89J2AA1P там скорость распознавания должна быть намного выше. Да, данные передаются в облако, но как этап развития, почему бы и нет. Буду рад увидеть этот эксперимент на Вашем канале.

[@upavla]

Эта функция вроде платная

[@morphiai]

Месяц бесплатно, работает так же плохо на русском

[@Размер_Шаров]

Так Алиса же вырубится при отвале интернета, а свой север будет работать. Так?

[@DelEbaUrmONIf]

Даже не это главное. Не смущает, что поисковик 24/7 записывает всё, что ты говоришь?

[@morphiai]

Пробовал на Echo прошивку assist мой голос не распознает из 10 один раз хоть nabu alexa custom, на прошивке медиаплеера не работают play pause stop если нажать зависает и дергаешь питание, сейчас прошил их под шлюз BT для чайника redmond хоть что то полезное делают, под медиаплееры взял платы Esp32-Audio-Kit прошивка Squeezebox. Дичь полная эти echo или хозяин попугай по десять раз повторять.

[@bender_ostap1897]

Полезно , пока Алиса лучше.

[@AnomalyHome]

Спорный вопрос. Алиса без подписки, интернета бесполезна. Ну и ещё Яндекс передает всю информацию о вас, все о чем вы говорите в ФСБ. Это так навякий случай.

[@u17l305194817]

Спасибо Павел, очень полезная инфа. А кто в итоге переводит команду в текст - M5Stack или сервер с хомеасистом?

[@silentage6310]

сервер. whisper - voice to text piper - text to voice openwakeword - слушает весь звуковой поток постоянно и ждет активационного слова

[@u17l305194817]

@@silentage6310 т.е. M5Stack выступает в качестве микрофона с динамиком получается?

[@upavla]

@u17l305194817 ну да

[@rykov_dc]

Павел, не Вшиспер, а Виспер)

[@АндрейПанов-й1д]

Купил недавно этот M5 atom, хрень полная в сравнении с яндекс колонкой, atom слышит не дальше одного метра

[@DelEbaUrmONIf]

Вот эта особенность Яндекса тоже должна бы напрягать - поисковик хорошо Вас слышит и передаёт 24/7.

[@grey2126]

Смысл к.м..к. есть, ведь Алиса там в интернете, а это тут свой. Только Джарвис как то поинтереснее имхо чем какой-то Набу...

[@DmitryKey]

Голос на ЦПУ обрабатывать - такая себе идея. На nvidia будут летать любые модели. Но из-за энергопотребления это так себе вариант. Надежда на новые apu от интел и поддержку их графики виспером, какие-то поползновения уже есть на гите. А может блоки npu выстрелят и на них можно будет задачу отдать, увидим. Атом для голоса - бесполезная штука, постоянный спам сервера аудиоданными, лучше б собирал на оранже.

[@qMILSTORM]

Яндекс колонка прекрасно с этим справляется на древних Amlogic.. Надежда на интел уже как года 3-4 нет ни каких , а вот АМД другое дело.

[@silentage6310]

в идеале бы на esp выделять моменты когда есть голос и только в эти моменты отправлять его. а совсем в идеале чтобы wakeword обрабатывался на esp, как в алисе. я думаю это вполне реально, но надо делать...

[@DmitryKey]

@@silentage6310 Так парни из набукасы уже сделали, на ESP32-S3 с psarm запускается. Проект называется microwakeword. А за месяц до этого Wyoming satellite для малин выкатили. ww - не основная проблема. Необходимо энергоэффективная аппаратная часть для работы whisper (или что нас там ждет впереди). По хорошему ещё и обработчик на основе llm надо интегрировать, чтоб была свободна формулировки команд, а не по одной согласно шаблона озвучивать. Сейчас народ с помощью chatgpt подобное делает, но это облачно и за прайс. Задел большой

[@dNix]

@@qMILSTORM эти "древние" amlogic как раз имеют NPU.

[@DelEbaUrmONIf]

​@@qMILSTORMс чем "прекрасно справляется" Яндекс колонка? Она шлёт Ваше аудио на сервер, отработка происходит там.

[@Ipeacocks]

4 ядерного процессора не достаточно? ух!

[@silentage6310]

там дело даже не в ядрах. для нейросетей важно чтобы были AVX и FMA инструкции в процессоре. на N5095/5105 их нет. надо хотя бы N95/N100... а лучше бы чтото с видеокартой.

[@СтаниславЖеребцов-р6с]

А я в каждый угол Алис набросал) они очень качественно отрабатывают)

[@silentage6310]

главное важного ничего не говорить. а то надо понимать что алиса это товарищ майонр в каждом доме

[@DelEbaUrmONIf]

Не обсуждай дома Путина, политику, армию, депутатов, РПЦ, ЖКХ... Потому что сейчас людей садят за дискредитацию из-за сохранёнок в ВК 6-10 лет назад. Также и с Алисами - кто знает когда им понадобится компромат на тебя.

[@СтаниславЖеребцов-р6с]

@@DelEbaUrmONIf Яндекс это сборище либерастов, ничего они не передадут в НКВД 🤭

[@АлексейМиллер-щ7ч]

Тест , реп, пепси

[@MARK2580]

научись использовать закладки в браузере

[@МаксимПриходченко-р6ь]

Научись не душнить

[@grey2126]

Закладки не интересно 😄 у меня в браузере около 450 вкладок открыто🤣

[@-Darkweider]

Мертворожденная хрень за цену простой станции с барахолки.

[@grey2126]

что может станция без интернета? У меня вот только полудохлый 4G доступен и тот постоянно отпадает...