Сделал Ассистента 2.0 на python. GPT - Скажи Привет!

Голосовой ассистент на python с ИИ и машинным обучением, а также с поддержкой голосового общения с chatgpt. А также сохраняет код от GPT;)
Распознавание речи Vosk:
alphacephei.com/vosk/models
Синтез речи Silero:
github.com/snakers4/silero-mo...
OpenAI:
platform.openai.com/
Первое видео по ассистенту с подробным объяснением:
• Крендель - Голосовой а...
Код ассистента на GitHub:
github.com/PythonHubStudio/vo...
-------------------------------------------------------------------------------------
Кто хочет, может купить автору кофе, чтоб делать новое видео было веселей:
Доступны функции Спонсорство и Суперспасибо.
При этом весь контент на канале, как был, так и останется в открытом доступе ДЛЯ ВСЕХ!
А спонсосрство и суперспасибо - это способ выразить особую благодарность автору и
мотивировать на создание нового полезного контента!
Кнопки Суперспасибо и Спонсировать под видео(отображаются не во всех странах)
--------------------------------------------------------------------------------------
Подписывайтесь на канал!

[@user-ui9dw9ku7u]

Благодарствую, было бы интересно видеть еще больше подобных роликов с подобными технологиями в вашем исполнении. Хотелось бы увидеть третью версию вашего проекта, приятно что вы довольно хорошо и понятно объясняете так, а не по другому и с возникшеми трудностями и их решениями. Удачи в ваших начинаниях.

[@DjJageyedolon]

Благодарю! Пишу своего ассистента (Джессика), очень помогают некоторый фишки из твоих проектов!

[@Vladimir_F609]

Как всегда - крутяк!!! 👍

[@user-sm7xb9xt8l]

Шикардос, спасибо!

[@user-uj5oq2vv4f]

Как всегда Круто 😎

[@stepanstepanov8106]

Как Всегда ахрененно

[@user-rw5xw2qf9k]

Классный проект.

[@PRO-PLANE]

Про окна и рассвет анекдот отличный 😂

[@dragonplay5186]

Вот это я понимаю хороший программист

[@dazermusic1]

Отлично

[@gidramarry3395]

Круто)

[@user-rw5xw2qf9k]

Можно для натуральности научить ассистента распознавать слова вопросительных предложений чтобы отвечать на вопрос не команда не распознана, а более человечно. Например " Я не знаю что ответить", или "Не знаю"...

[@parvizisroilov9294]

Подскажите пожалуйста вы изучили пайтон с помощью курсов или сами ?

[@TomiKGame-ks2ec]

немогу код на озвучку в програме без ошибки но кодга пишу чтобы проверить пишу слово привет и запускаю код тишина и все, что делать

[@user-dc9dw7un6s]

👍🔥

[@TomiKGame-ks2ec]

я не понимаю как установить силеро модель? подскажите что находиться в папке силеро модель?

[@vitodoncorleone9581]

Axaxa Бойцовский Клуб, а ИИ хороша прям с козырей зашла😅

[@PythonHubStudio]

👍🤣 жгёт)

[@romankibisov2397]

Не могу понять, настроил все топ. Все запускается гуи работает, микро работает, модули работают, библиотеки установлены...,но когда говоришь что угодно, ничего не происходит...

[@natik_pl]

запустил програму вроде все норм но она молчит ничего не происходит

[@skypravda]

Она как под хмурым 😂😂😂

[@user-je6nj4bg3l]

Привет. Увидел твои наработки только сейчас, а своего голосового помощника написал чуть раньше. В целом почти всё, что тобой озвучено я уже проходил, но есть вопрос, у меня используется библиотека pyaudio, в твоем случае sounddevice, не пробовал ли ты собирать готовый проект в .exe? Дело в том, что с упаковкой pyaudio у меня возникла проблема, она упорно не хочет в него залазить, хотя такая проблема не только у меня, есть одно или два упоминания в интернете, как её запихать в сборку. Соответственно, на тех ПК, где установлен Python, упакованный пакет .exe работает, на тех ПК, где нет Python'а получаю ошибку. Не возникнет ли подобная проблема с библиотекой SounndDevice? Не хочется все перелопачивать впустую.

[@Kazilsky]

virtualenv в помощь

[@user-je6nj4bg3l]

@@Kazilsky так я собирал пакет в venv, соответственно и библиотека там установлена. Первый раз, когда собрал всё получилось ~83Мб, второй раз ~115Мб, значит библиотека упаковалась, но на других ПК не работает и показывает ту же ошибку, что проблемы pyaudio

[@TomiKGame-ks2ec]

а как поделючить чат к старому асистенту крендель?

[@Mundolor]

почему у меня при попытке запустить код голос запускается через 15 сек

[@SooWeeUii]

Реализация интересная. Пытаюсь сделать что то похожее. Сейчас в поисках того как обучить голосовую модель на своих данных, что бы использовать ее в последствии. Если кто то знает такие проекты, подскажите пожалуйста

[@PythonHubStudio]

Модель команд из этого ассистента поддерживает набор из 10 000 вариаций команд, если на каждую команду записать по 5 вариантов формулировок, то получится 2000 уникальных действий. Если вы про это

[@SooWeeUii]

@@PythonHubStudio Не совсем. Я не знаю как реализовать озвучку тем голосом который мне нужен. Ну как пример голосом винни пуха) Но только в режиме реального времени. ИИ генерирует ответ и должен его озвучить нужным мне голосом

[@Meowta]

​@@SooWeeUiiнашел как это сделать?

[@loshara-em9jc]

будут ли какие то обновления или ваш проект заброшен?

[@stepanstepanov8106]

Возможно ли заказать у вас подобную программу с "небольшими " дополнениями

[@PythonHubStudio]

Нет, но интересные идеи возможно появятся на канале

[@tugertuger5915]

​@@PythonHubStudioу меня идея. Я чуть выше написал.посмотрите пожалуйста

[@Shayth-]

Привет! А что если присоединить к ассистенту возможность управления умным домом? Какие вообще для этого существуют библиотеки?

[@Nosferatu_rrr]

смотря какие протоколы используются в "железе".

[@tugertuger5915]

Реально ли замутить приложение на телефон где жжп говорит и понимает на нескольких языках .в общем типа алисы но мозги жжп и спец для изучения языков. И говорит и понимает одновременно пару языков на выбор. Чтобы типа включить функцию .авто. и больше ничего не нажимая понеслась. Здаров.здаров.давай поговорим по английски.давай.ток давай попроще .ок.hi.hi.how are you? Нипонял.я спросил как дела.а теперь понял i am fine. В общем типо того.чтобы он попрвлял твой английский.говорил примеры и тд. Я уже весь интернет перерыл ненашёл . Вопрос . Это технически уже возможно? Или нужно ещё пару лет подождать?

[@user-fx1uv6eg3j]

А можно такое прикрутить к GIGA CHAT

[@user-ck9cy1wp2l]

привет Учитл изў узбекистан

[@w_i_l_e8163]

Привет, можешь подсказать, как добавить возможность голосовых поисковых запросов

[@PythonHubStudio]

Отделение фразы по дополнительному триггеру (поиск, найди и тд.), если есть , то запуск функции на поиск, удалив слово найди.

[@user-kh5vi4yi5t]

Можно ли эти библиотеки использовать локально. Очень часто надолго падает интернет?

[@PythonHubStudio]

В этом ассистенте распознавание голоса и озвучка через silero работает без интернета. А прочие функции, например chatgpt которые зависят от интернета без него не работают. То есть голос/озвучка без интернета работает, остальные функции зависят от вас

[@he1vann-42]

можешь какую нибудь свою локальную llm использовать, тут вопрос в том насколько сильно ты готов мощностями пк жертвовать

[@user-rl9xt6eq1l]

как дать возможность ассистенту что бы по какой либо голосовой команде открывать браузер или какой либо сайт?

[@PythonHubStudio]

Эта функциональность у этого ассистента есть, его код есть на гитхабе и ссылка в описании. Но, есть на канале первое видео про этого ассистента (он называется "крендель") где пишется с объяснением то о чем вы пишите.

[@VioleTTa..]

Привет, запиши пожалуйста видос, как этому ассистенту внедрить собственную модель голоса

[@PythonHubStudio]

Не разбирался с этим, но судя по документации silero там есть возможность обучить на своем голосе. Но нужно иметь ввиду что нужно будет даже на корявую озвучку десятки часов записи голоса

[@VioleTTa..]

@@PythonHubStudio хотелось бы увидеть твой видос на эту тему)

[@maximreshetov8759]

Добрый день. у меня при запуске требует api ключ. хотя я в конфиге его вставил. не могу понять почему так

[@HsbsHshs-pt1or]

у меня тоже, как это исправить?

[@maximreshetov8759]

оказалось нужен платный ключ но это я позже обнаружил а так плюнул и заказал платный бот у разрабов @@HsbsHshs-pt1or

[@alexzir]

Супер! На мобилке это можно?

[@PythonHubStudio]

Можно

[@AlinPrisacaru]

@@PythonHubStudioподскажите пожалуйста как именно это сделать, и возможно ли подключить их чтобы одновременно работали, и на телефом и на пк

[@user-rw5xw2qf9k]

Можно записать свой голос для библиотеки?

[@PythonHubStudio]

Можно silero можно обучить своему голосу. Примерно 10 часов записи голоса нужно минимум

[@v_404_v]

​@@PythonHubStudioда что-то ты попутал слегка. Я обучил свою модель голоса за 25± часов. Было 150± образцов ПЕНИЯ по 10 секунд каждая. И в итоге модель может и озвучивать аудио, так и петь песни под акапеллу. Но я не уверен как обстоят дела с озвучкой ибо попросту не нашёл способов это поверить.

[@v_404_v]

Я не пойму, зачем pyttsx и gtts. Неужели нельзя подключить нормальную голосовую модель которой плевать на язык? + Ты не указал немало важный факт - это лимиты API Openai. Там вообще понты даются, и если вот так поиграться активно пару дней, то лимит закончиться.

[@PythonHubStudio]

pyttsx3 в этом ассистенте не используется, а silero и gtts

[@v_404_v]

@@PythonHubStudio да я просто сразу два твоих видоса глянул.

[@romkli8291]

Теперь проще есть Aria у этого чата лимитов нет

[@dimbrovgames2621]

привет можешь со мной связаться есть пара вопросов по поводу функционала асистента

[@PythonHubStudio]

Все только в комментах, отдельного канала связи нет. Ваши стремления только для Вас, видео исключительно для обучения.

[@dimbrovgames2621]

@@PythonHubStudio понял вас хотелось спросить как к нему прикрутить распознавание лиц оно же машинное зрение

[@dimbrovgames2621]

@@PythonHubStudio привет у меня беда def silero(): audio = model.apply_tts(text="привет", sample_rate=sample_rate, put_accent=put_accent) sd.play(audio,sample_rate) time.sleep(len(audio)/sample_rate) sd.stop() если убрать def работает а внутри def не работает как это побороть подскажи

[@dimbrovgames2621]

@@PythonHubStudio привет у меня эта функция не работает на коофициенте 0.2 оно на разные команды выдает разные значения и не работает как должно помоги как это исправить сидел 3 дня так и не смог поправить text_vector = vectorizer.transform([data]).toarray() print(data) predicted_propabilities = clf.predict_proba(text_vector) treshold = 0.2 max_propability = max(predicted_propabilities[0]) print(max_propability) if max_propability >= treshold: answer = clf.classes_[predicted_propabilities[0].argmax()]

[@user-rw5xw2qf9k]

Можно чтобы женские имена не использовали ослова с окончагиями в мужском роде? А мужские имена не использовали женкий род?

[@Chel1k7]

в программировании можно всё

[@romanbolgar]

Ничего не понятно, но очень интересно. Сколько бьюсь никак не могу Настроитьуже столько видео пересмотрел. То какие-то ошибки выдаёт то ещё что-то. Когда уже эти технологии доведут до ума. Я понимаю интересно посмотреть, как это всё работает, но, где бы найти Готовое решение. Что-то типа Laitis Но с возможностью работы оффлайн и до обучения. Или Старые добрые exe файлы уже ушли в прошлое И теперь как и раньше необходимо всё прописывать ручками в консоли или терминале. Поразительно с одной стороны я сейчас говорю эти строки А с другой зерокодинг ещё очень далеко.

[@youtasov]

Я НИЧЕГО НЕ ПОНИМАЮ!!! У МЕНЯ НИЧЕГО НЕ РАБОТАЕТ!!!

[@LifterAndy]

Круто! А можно ей как-то увеличить скорость речи, что бы её разговор воспринимался более естественно?

[@user-bx7jd6ie8q]

легко

[@mihaormihmih3802]

Можно использовать ssml текст, где-то в документации на гитхабе находил, очень удобная штука

[@nauseouscustody1440]

Правильно ли я понимаю, что с помощью python и такой методы делают моды, например как на Skyrim (на канале @iamcrysty)? Просто и нуб в питоне, и модинге. Или это невозможно сделать и там просто монтаж?

[@PythonHubStudio]

Возможно, не монтаж, принцип тот же, просто варианты или внедрять код в игру или взаимодействовать поверхностно (кликая модом вместо вас)

[@swaytornado8327]

у меня такая ошибка, с чем это связано AssertionError: `speaker` should be in en_0, en_1, en_2, en_3, en_4, en_5, en_6, en_7, en_8, en_9, en_10, en_11, en_12, en_13, en_14, en_15, en_16, en_17, en_18, en_19, en_20, en_21, en_22, en_23, en_24, en_25, en_26, en_27, en_28, en_29, en_30, en_31, en_32, en_33, en_34, en_35, en_36, en_37, en_38, en_39, en_40, en_41, en_42, en_43, en_44, en_45, en_46, en_47, en_48, en_49, en_50, en_51, en_52, en_53, en_54, en_55, en_56, en_57, en_58, en_59, en_60, en_61, en_62, en_63, en_64, en_65, en_66, en_67, en_68, en_69, en_70, en_71, en_72, en_73, en_74, en_75, en_76, en_77, en_78, en_79, en_80, en_81, en_82, en_83, en_84, en_85, en_86, en_87, en_88, en_89, en_90, en_91, en_92, en_93, en_94, en_95, en_96, en_97, en_98, en_99, en_100, en_101, en_102, en_103, en_104, en_105, en_106, en_107, en_108, en_109, en_110, en_111, en_112, en_113, en_114, en_115, en_116, en_117, random, откуда качать эту модель, по ссылке models.silero.ai/models/tts/en/v3_en.pt или с другого места. спасибо

[@VioleTTa..]

та же ошибка, не могу решение найти

[@duceskoriny]

@@VioleTTa.. мы похоже на какую-то "очевидную" ошибку напоролись и никто из принципа не рассказывает в чем дело🤣

[@VioleTTa..]

@@duceskoriny ну спикер почему то пытается сказать речь на английском языке и не может определиться, какому из 117-ти спикеров удостоится честь. Даже при удалении всего англ.яз не меняется)

[@duceskoriny]

@@VioleTTa.. я сейчас вручную скачал модели русского и английского, вроде теперь на русский отзывается и отвечает так же

[@VioleTTa..]

@@duceskoriny хароош, попробую тоже