Лучший звук с помощью нейросети от Adobe Podcast

Adobe Podcast с функцией Enhance speech - очередной успешный пример использование обученной нейросети в той сфере, куда, казалось бы, искусственный интеллект должен был прийти в последнюю очередь: в сфере творчества.
Нейросеть Enhance speech от Adobe может улучшить запись с диктофона и независимо от того, на какое оборудование вы записывались и сколько было посторонних шумов в комнате, приблизить ее по звучанию к дикторской версии записанной в студии. Вам при этом ничего делать не нужно, нейросеть все сделает за вас
Enhance speech от Adobe Podcast: podcast.adobe....
Все видео о нейросетях: • Нейросети. Искусственн...
#Adobe #AdobePodcast #EnhahceSpeech #Работа_со_звуком #нейросети
Видео Теплицы - это уроки на русском по всем программам, которые могут вам пригодиться.
Теплица социальных технологий: te-st.ru
Теплица социальных технологий в Telegram: t.me/teplitsa
Теплица социальных технологий в facebook: / teplitsast
Теплица социальных технологий в Instagram: teplitsast
Теплица социальных технологий в vk: TeplitsaST
Подписывайтесь на еженедельную рассылку Теплицы и получайте лучшие видеоуроки, полезные статьи и анонсы возможностей для саморазвития и командной работы:
newsletter.te-...
Музыка: Javier Suarez (jahzzar) "Please Listen Carefully" ©

[@fandomTarantinoandCo]

Только что протестила. Снимали на открытой воде человека в электролодке. Шум двигателя + плеск + ветер в микрофон = боль для ушей. ИИ сделала голос тонким и "съела" половину слов. Для "живых" испытаний данный ИИ (пока) не подходит

[@DNevashedelo]

Вместо своей записи я слышу отрывки слов на английском. Пробовал несколько аудио, он тупо заменяет слова на англ яз и все

[@МарияМаринова-ф7з]

Проверьте его на женском голосе. У меня какая-то ерунда получилась( и голос не похож, и слишком свистит 😢

[@tierni8]

Попробовала- изначальная запись была неплохая, но чуть нужно было убрать шум. В результате голос стал на мой мало похож, особенно на шипящих и свистящих

[@Победительпожизни-ы6п]

Как всегда отлично, полезное видео. Спасибо!

[@DickieDudgeon]

Вообще, после тестов с хорошей аппаратурой в неоч условиях (как минимум, конденсаторный микрофон на расстоянии около полуметра в неизолированной комнате) я пришел к тому, что максимально хороший результат получается подмешиванием оригинала к обработанной записи на примерно -10dB (плюс-минус километр по вкусу, зависит от тембра/пола/качества записи/микрофона и т.п.)

[@TestRuteplitsast]

ну, мне кажется с хорошей аппаратурой в неоч условиях можно обойтись ручной работой. Современные шумодавы творят чудеса. Но нужно попробовать, да. "Чем больше грязи, тем лучше связи".. правда это у художников

[@DickieDudgeon]

@@TestRuteplitsast Тут, наверное, стоит сказать два аргумента в пользу нейросетки в вышеописанной ситуации: автоматизация и (как следствие) экономия времени. Да и чьи-нибудь кривые руки будут хуже в таких условиях. В любом случае, сейчас делаем для канала видео - буду делать с применением технологии, интересно же)

[@sd88ausde]

очень полезно, спасибо, владимир!

[@fedorlubensky]

Спасибо

[@ZhigDenis]

Чуда пока не случилось, в некоторых ситуациях качество норм, но чаще совсем не ок. Тоесть если по сути разборчивость то растет и шумы гасит, но качество так себе. На канале по озвучиванию, проверяли более тщательно. Результат не ок, там выше требования к результату. одной разборчивости совершенно не достаточно.

[@TestRuteplitsast]

Да. С ударением на слове "пока". Но даже это выше среднего для бытового уровня

[@Doctor787]

Решение работает следующим образом: На стороне адоби идёт детект текста, анализ интонации и генерация нового, но очень похожего голоса. То есть, это не чистка голоса в прямом его понимании. Алгоритм проявляется на речи с обрывками, там внезапно станете на английском говорить

[@kemp1k]

Только есть нюанс что нейронка училась на инглише. Это можно заметить при очень шакальном качестве начинает добавлять непонятные слова на английском)

[@gimme.antidote]

@@kemp1k 😁

[@МетеорСигнал2013]

То же самое получилось, на заднем фоне были разговоры, она их "перевела" на английский, получилась какая-то белиберда

[@zaczac]

Штука не вполне готова, иногда коверкает голос, почти всегда искажает его или добавляет какие то модуляции, короче надо переслушивать каждую секунду

[@TestRuteplitsast]

Первый шаг, но действие ведут в верном направлении

[@vs1354]

Супер польза! Благодарю.

[@ОлександрНедозимований]

Ужасная штука . Проверил на файле в 40 минут , так то что я получил на выходе просто ужас. Сначала мой голос был на английском , потом я начал шипелявить. Исковеркало до неузнаваемости. Ерунда полная.

[@FilmRestorations]

Коротко и по существу!

[@Sergij_Vari]

Как вы делаете обработку своего голоса вручную, можете записать видео?

[@TestRuteplitsast]

Я все делаю штатными средствами DaVinci. Посмотрим, может сделаю, да. Но вроде на этот счет уже сделано-переделано куча

[@go2daddy33]

Adobe Podcast мой голос хорошо звучит кроме мест где я говорю звуки шипящих (с, ш, щ) и после обработки нейросетью звучит так как будто мне выбили передние зубы

[@go2daddy33]

Я решил эту проблему подмешав оригинальный звук к звуку после обработки ИИ

[@go2daddy33]

В общем, мне результат не понравился, я не смог исправить звуки ц, ш, щ, с, з - они звучат как будто мне выбили зубы, а подмешивание записи звучит как брак. От такого звука устаешь. Легче использовать оригинал.

[@struzhilka]

у меня то же самое

[@realdecor]

Дякую!

[@ОлександрНедозимований]

Автору лайк за старание

[@Aleksandr_Alex]

Благодарю, интересно, попробую.

[@usonc]

с задачей справился, но вывел на поверхность другую боль - очень явно стало слышно шипящие и свистящие, прям как в место встречи изменить нельзя - косьелёк, косьелёк, какой косьелёк?))) в общем сыро еще или натренированно на буржуйской речи, но судя по тому что ролику год, создатели либо забросили проект, либо не продвинулись в тренировке

[@lordjeniafilimonov]

Вау, спасибо, Вова!

[@mexanukstalkers2072]

эдерьмо полное пишет что мп3 подержывае загружаю а оно пише неподержывпет проаианальноя

[@AndreySoyustov]

Спасибо за видео!

[@cristinadubceac5619]

Спасибо!

[@Urt-da]

Тестировал, смотрел. Неплохая вещь если у вас нет оборудования. Но для тех кто это привык делать такую работу вручную в Audition, Cubase или подобных прогах не подойдет. Алгоритм заточен под быстрое шумоподавление, не всегда срабатывает правильно. Что-то вроде RX 8 но в минимальном варианте, для тех кто понимает о чем я. Но если вообще ничего нет под рукой, он конечно может выручить.

[@TestRuteplitsast]

он выручает, когда запись наглухо убитая. Я примерно умею ручки крутить, но уже был момент, когда воспользовался по работе -- совсем убитый звук пришел

[@Urt-da]

@@TestRuteplitsast я только рад если тебе помогло. Мне он запорол войс для видеоролика. Думал как раз испытаю, время съэкономлю. Пришлось ручками переделывать, у меня получилось на целую голову лучше.

[@UralMahiyanov]

Спасибо, интересно.

[@_Atomic_Baby]

любопытно, спасибо)

[@uchurch]

Спасибо за ролик! Интересно было бы сравнить с новым плагинов в Davinci!

[@TestRuteplitsast]

А чего там за плагин? В 18-м? Я все еще в 16 версии сижу

[@uchurch]

@@TestRuteplitsast да, там добавили его прямо в правую панель

[@MeLS381988]

Твой звук проигрывает тем, что на нём много эхо, а adobe сделал его более приятным для восприятия и плотным! Так что тут явно победил ИИ 😉

[@АлександрСмирнов-щ4е]

Класс!

[@Vitalello]

спасибо за видео

[@wladguten5537]

С удовольствием поставил плюсик. Надо будет переделать Кибердеду, а то у него всегда звук бубнящий.

[@ilyak2178]

Вау!

[@Shkur777]

Что сервис опен диэнэс?

[@kolaynez]

Офигеть

[@d_______k]

как всегда, сервис выдает ''failed to enhance the file'', пробуешь еще раз - лимит исчерпан, попробуйте через час. Мда.

[@scc-6]

Да не, в целом, неплохо, на обработку все равно нужно время же, если вручную

[@ОлександрСлюсар999]

Блин вот если бы обработка была в реальном времени для дискорда или других программ если кто знает такие программы напишите буду благодарен

[@Zuuumable]

у меня почему то в голос добавляется акцент, как будто американец разговаривает на русском, может надо как то язык менять?

[@CreativefilmbyAlexeySosnin]

Всё ни чё но он слова коверкает их как будто на английском языке некоторые слова. и ограничения уже по обработке, раз в час

[@xaker01minecrafter33]

КАПЕЦ как круто один друг посоветовал

[@Aleksandr_Alex]

Жуткая лажа, инструмент пока не рабочий только для идеального сферического коня. Плевался не переставая. Со временем может будет нормально , но пока уши болят после экспериментов. Эксперименты дали кучу экскриментов.

[@TestRuteplitsast]

Странно. Я не гонял долго, но на тех примерах, что были, результат очень хороший. Ну то есть убитую запись он вытягивает очень хорошо. Хорошую - да, скорее портит, но хорошая запись есть у 1% пользователей

[@ANZORNABIULLIN]

да нет... не делает

[@walshhaddock7255]

Promo sm 😚

[@RomanAnnenkov]

Увы, увы. Он совершенно не справился с подкастом, где один собеседник в студии, а другой по телефону приглушённо. Студию сделал ещё краше, телефонный разговор - наоборот, убил напрочь. Плюс к этому сказывается, что сетка обучена на английской речи. Любую неразборчивость она переводит в английский. Это очень потешно, но очень не практично ))) Не отрицаю пользы инструмента в определённых границах - просто они Уже, чем хочется.

[@VIPkino]

Они все сломали( Видимо перестали поддерживать русский язык. На выходе дает картавую озвучку

[@Dmitriy_Sentinel]

Было бы не плохо, если бы он нативно это делал, прям как тот же NVIDIA RTX Voice

[@Mika-gp8bo]

Спасибо за видео!

[@LEG_L]

Спасибо