AI Sprachassistent DIY - Home Assistant & OpenAI

[@rutka086]

Jetzt noch ein Gehäuse in der auch die LED integriert ist und es ist perfekt : ) Vielen Dank für die Arbeit und deine Bemühungen. ich werde den DIY Assistenten auf jeden Fall nachbauen.

[@westwoodherby1894]

Ich würde mich da riesig über eine Serie freuen, in der das Model weiter wächst und verfeinert wird. Also ein eigenes Wake Word bessere Lautsprecher ( mit kleinen Verstärkern ) usw. Ich beschäftige mich gerade auch damit also kam das Video zum perfekten Moment. Vielen Dank 🤩

[@CTechMedia]

Alles klar, dann werde ich mich damit beschäftigen

[@thorstenburger1875]

Sehr cooler Ansatz. Werd ich auf jeden Fall nachbauen

[@CTechMedia]

Viel Erfolg wünsche ich

[@chrannen]

tolles video. ich bin nicht der bastler und demnach eher an fertiglösungen interessiert. dass die was kosten, ganz klar! aber das ganze smart home über KI zu verwalten und darüber zu agieren ist schon echt toll. bin gespannt, was noch so geht. im home assistant release 2024.6 ist ja wieder was in der richtung dabei, habe ich gesehen

[@CTechMedia]

Ich bin sehr gespannt auf den neuen Release 👌 Fertig Lösungen wird es hoffentlich bald auch geben, aktuell ist es schon noch sehr aufwendig

[@jakobholzner]

vielen Dank für das Video wird eindeutig demnächst nachgebaut :)

[@CTechMedia]

Ich wünsche viel Erfolg 👌

[@reverendantun]

geht die ausgabe auch in stereo? also ist es möglich das teil dann auch als ausgabe für den mediayplayer zu verwenden?

[@thostegm7099]

Tolles Video

[@TheSpiralnotizblock]

Wie sieht es denn aus, wenn ich mehrere dieser Sprachassistenten in meinem Haus habe? Werden die dann alle automatisch aktiviert durch das wake word?

[@thomashusing9434]

Ein schönes Projekt. Ich bleibe dran. Eine Bitte, kannst Du den Schaltplan verlinken?

[@CTechMedia]

Ist verlinkt! LG

[@nilsklose339]

Kannst du auch noch ein paar Leitungen rein packen du benutzt hast ?

[@CTechMedia]

Ich habe den Code zum nachbauen in der Beschreibung verlinkt

[@benjaminzapf8573]

Ist die Pinbelegung beim N16R8 die gleiche? Ich bekomme den Lautsprecher nicht ans laufen, obwohl ich bis auf den ESP32 S3 das gleiche Setup habe.

[@Pascal_1995]

Interessant wäre deine Lösung, wenn man diese einfach auf vorhandene Echo Dots aufspielen könnte.

[@CTechMedia]

Das scheint tatsächlich möglich zu sein, sollte ich vielleicht auch einmal ausprobieren

[@Pascal_1995]

@@CTechMedia das wäre super, dann wäre man endlich nicht mehr von deren System abhängig.

[@Da_Reiti]

@@CTechMedia das würde mich auch interessieren 🧐 Was mich noch interessieren würde, wie man ein eigenes wake-word trainiert?

[@CP-wj7sc]

@@CTechMedia kann man das auch auf homepods aufspielen bzw. diese nutzen?

[@westwoodherby1894]

Das würde mich auch sehr interessieren.

[@CP-wj7sc]

Ich habe HomePod Minis in meiner Wohnung. Kann ich diese für die Sprachsteuerung nutzen?

[@CTechMedia]

Soweit ich weiß leider nicht

[@thomashusing9434]

Ich habe Dein Projekt mal nachgebaut. Die Spracherkennung funktioniert. Allerdings immer nur 1x. Nach einem Neustart geht es dann wieder genau 1x. Die LED leuchtet oder blinkt dann Grün. Im log bleibt er auch an der Stelle stehen wo die LED auf grün gesetzt wird. Ich vermute es hat etwas damit zu tun das die Soundausgabe nicht funktioniert und evtl der Speicher des kleinen ESP voll läuft!?. Verkabelt habe ich das ganze nach Deinem Code. Der Speaker macht absolut kein Geräusch. Hat jemand eine Idee? Das Projekt ist eine gute alternative zum ESP32s3BOX. Das Teil kostet bei Ali aktuell über 150€.

[@westwoodherby1894]

Bekomme mit dem aktuellen Code leider eine Fehlermeldung "E (12172) AUDIO_PIPELINE: audio_pipeline.c:255 (audio_pipeline_init): Memory exhausted" Board ist ein N8R2 haben sie ein N16R8 ?

[@thomashusing9434]

@@westwoodherby1894 Ja ich habe ein N16R8. Habe im Code "octal" gewählt.

[@thomashusing9434]

@@westwoodherby1894 Ja ich habe einen N16R8.

[@CTechMedia]

Die Fehlermeldung bedeutet eigentlich immer, das der Code nicht ausgetauscht wurde. Bitte unbedingt darauf achten, was für ein Model des ESPs gekauft wurde

[@reverendantun]

@@CTechMedia muss es ein esp32-s3 sein?

[@finki007]

mega! Wenn man das jetzt noch in den Deckenlautsprecher packen könnte wäre es perfekt

[@CTechMedia]

Theoretisch ist das machbar, gute idee

[@aktendully]

FutureProofHome hat das gestern in einem Video gezeigt mit seinem Satellite 1 Dev Kit

[@finki007]

Hab's auch schon gesehen. Leider bis jetzt nur in den USA verfügbar​@@aktendully

[@predictioNcs]

Mega !!sowas suche ich schon lange könntest du die Verkabelung besser erläutern?

[@CTechMedia]

Ich habe ein Diagram in der Beschreibung verlinkt

[@hendriksawade5334]

@CTechMedia, eine Verkabelungsskizze wäre noch sehr hilfreich. Gibt es die noch Irgendwo? Danke.

[@CTechMedia]

Habe ich jetzt verlinkt ;)

[@thomashusing9434]

Ich bin ein Stück weiter. Es lag an der Stromversorgung. Sound läuft, Erkennung läuft. Leider nur 1x. Beim 2 Befehlt blinkt die LED nur noch grün und das Log bleibt bei "effect: fast pulse" hängen.

[@CTechMedia]

Probier mal den Code hier zu ersetzen: external_components: - source: type: git url: github.com/gnumpi/esphome_audio ref: dev-next components: [ adf_pipeline, i2s_audio ] refresh: 0s

[@thomashusing9434]

@@CTechMedia Hi und Danke für Deine Rückmeldung. Nun funktioniert die Erkennung ohne Reset. Nur die Sprachausgabe wird sehr langsam wiedergegeben. Als wenn eine Schallplatte zu langsam abspielt. Ich habe den Begehl: sample_rate: 16000 rausgenommen. Nun funktioniert die Sprachausgabe wieder unnormaler Geschwindigkeit.

[@haaaptschi]

Hi Charly, habe mir den Code bei dir geholt und habe nun versucht ihn auf den ESP aufzuspielen, jedoch ohne Erfolg. Er hängt sich jedesmal bei der Installation (compiling) auf. Wäre cool wenn du mir weiterhelfen könntest. Gruß Paul

[@CTechMedia]

Schick doch gerne mal deine Fehlermeldung, dann schaue ich mal ob ich etwas finden kann

[@haaaptschi]

@@CTechMedia ich bekomme keine Fehlermeldung, er hängt er sich einfach ständig bei compiling auf: meistens an dieser Stelle: Compiling .pioenvs/test-media-assistant-v2/components/esp-tflite-micro/tensorflow/lite/micro/kernels/elu.o

[@HeySchula]

Leider hier auch ein Fehler beim Compilieren: Reading CMake configuration... -- git rev-parse returned 'fatal: not a git repository (or any parent up to mount point /) Stopping at filesystem boundary (GIT_DISCOVERY_ACROSS_FILESYSTEM not set).' -- Building ESP-IDF components for target esp32s3 Processing 1 dependencies: [1/1] idf (5.1.5) -- Configuring incomplete, errors occurred! See also "/data/build/esp-smartspeaker/.pioenvs/esp-smartspeaker/CMakeFiles/CMakeOutput.log". fatal: not a git repository (or any parent up to mount point /) Stopping at filesystem boundary (GIT_DISCOVERY_ACROSS_FILESYSTEM not set). CMake Error at /data/cache/platformio/packages/framework-espidf/tools/cmake/build.cmake:266 (message): Failed to resolve component 'esp_adc_cal'. Call Stack (most recent call first): /data/cache/platformio/packages/framework-espidf/tools/cmake/build.cmake:302 (__build_resolve_and_add_req) /data/cache/platformio/packages/framework-espidf/tools/cmake/build.cmake:309 (__build_expand_requirements) /data/cache/platformio/packages/framework-espidf/tools/cmake/build.cmake:603 (__build_expand_requirements) /data/cache/platformio/packages/framework-espidf/tools/cmake/project.cmake:604 (idf_build_process) CMakeLists.txt:3 (project)

[@CTechMedia]

Am besten mal den Build Cache leeren. :)

[@HeySchula]

@@CTechMedia vielen Dank für die Antwort. Habe aber schon die Lösung gefunden. Hatte ich unten gestern bei der selben Problemstellung kommentiert: Das Framework auf eine ältere 4.x Version in der YAML setzen: framework: type: esp-idf version: 4.4.8 platform_version: 5.4.0 Danach konnte ich durchkompilieren... (ESPHome 2024.12 verwendet idf-version 5.1.5 was die ADF Pipeline nicht kann. Allerdings funktioniert es bisher noch nicht wirklich. Das Wakeword erkennt er wohl einmal (LED Farbe), aber ab da passiert nichts weiter. Ich suche...

[@InfinityDIY]

Coole Umsetzung, ich habe nun alle Sachen dafür hier, wäre cool wenn du den Code sharen könntest!

[@CTechMedia]

Code ist in der Beschreibung, viel Erfolg beim nachbauen 👌👌

[@InfinityDIY]

@@CTechMedia Habe das ganze nun am laufen mit meinem ESP32-S3 als N16R8, hast du bei dir auch das Phänomen das nach der ersten Spracheingabe die super funktioniert die 2. sich aufhängt und die LED auf dem ESP nur noch grün blinkt, leider gibt mir das ESPHome Log keine weiteren Infos

[@hendriksawade5334]

@@InfinityDIY Das Problem hatte ich auch. Das hängt wohl damit zusammen, dass die aktuelle Version von esp-idf Fehlerhaft ist. Ich hab hierzu die Version auf 4.4.6 gesetzt. framework: type: ${framework_type} version: 4.4.6 Außerdem bei der external_components ref: auf dev-next zwischen

[@-.Gaba-.]

Ai geht mir so auf die Nüsse.

[@CTechMedia]

In Verbindung mit Home Assistant finde ich das ganze schon extrem Praktisch. Aber ist auf jeden fall auch Geschmackssache

[@wilhardw]

Habe heute Deinen yaml-code im Shop erworben. Leider lässt er sich nicht kompilieren. CMake Error at /data/cache/platformio/packages/framework-espidf/tools/cmake/build.cmake:266 (message):

[@HeySchula]

Hatte das Problem ebenfalls, du kannst probieren, das Framework auf eine ältere 4.x Version in der YAML zu setzen: framework: type: esp-idf version: 4.4.8 platform_version: 5.4.0 Danach konnte ich durchkompilieren... (ESPHome 2024.12 verwendet idf-version 5.1.5 was die ADF Pipeline nicht kann.

[@wilhardw]

@@HeySchula Vielen Dank, habe es inzwischen auch so gemacht und es klappt.