Мы можем восстановить звук по видео? [Veritasium]

Поддержать проект можно по ссылкам:
Если вы в России: boosty.to/vertdider
Если вы не в России: / vertdider
Почему бы не снять «немое» видео, а потом не восстановить звук по колебаниям объектов на записи? Дерек Маллер несколько лет назад узнал, что Эйб Дэвис занялся именно этим, в 2019-м году посмотрел на достигнутые результаты, и вот, прошло всего три года, а мы уже представляем вам перевод о том, чего удалось добиться.
Перевод: Алексей Лоскутов
Редактура: Елена Смотрова
Научная редактура: Леонид Вокин
Озвучка: Дмитрий Чепусов, Алексей Никитин
Монтаж звука: Андрей Фокин
Монтаж видео: Джон Исмаилов
Обложка: Андрей Гавриков
Спасибо за поддержку на / vertdider и boosty.to/vertdider
Озвучки Vert Dider выходят с вашей помощью:
Pavel Dunaev, Mikhail Stolpovskiy, Sergey Zhukov, Ira Kozlovskaya, Amir, opperatius, Куляш, Dmitrii Komarevtsev, Мikhail Samin, Roman Inflianskas, Oleg Zingilevskiy, Alena, Vitaliy Vachynyuk, Ника Калмыкова, Aleksandr P., Anton Bolotov, JIukaviy, Katoto Chan, Eugene Tsaplin, Pavel Parpura, Anatoly Ressin, angel, Artem Amirbekov, Victor Cazacov, Kirill Zaslavskii, Timur Sattarov, Anna Ostrovskaya, Ihar Marozau, Dzmitryi Halyava, POD666, Aleksei Shabalin, Vladyslav Sokolenko, Irina Shakhverdova, Vadim Velicodnii, David Malko, Nastya, Павел Приступа, Stanislav Obrazcoff, Kirill Vedensky, Валентин Матвейчик, Leonid Steinberg, Ilya, Alexander Goida, Katya Ma, Morock_D, Sergey P, Evgeny Vrublevsky, Oleksandr Hrebeniuk, Сергей Платоненко, Валентин Ильин, Владимир Ямщиков, Мария Зверева, Адам Шифф, Rashn, Roman Gelingen, Сергей Клопов, Alexander Lebedev, Lexx, Nikrodol, Rashn, Rincewind, Sonra44, Ranis Zaripov, Alexey Tyurnin, Anton G, Dmitry Perekalin, Vadim, Владимир Авдиев, Artem Sobolenkov, MaximML , Rekvet, Timophey Popov, Timur Rahmatulin, Timur Rahmatulin, Адам Шифф, Арс Ник, Василий , Иван Новиков, Илья Зверев, Никита Омельницкий, Тимур Абдуллин, Точка Зрения.
#VertDider #Veritasium
Сайт студии: vertdider.tv
Мы в социальных сетях:
- studio_vd
- t.me/vertdider
- / vert_dider
- coub.com/vertdider
Разрешение на публикацию: bit.ly/2SFhrHZ
© / veritasium
Источник: • Can You Recover Sound ...

[@VertDiderScience]

Поддержать проект можно по ссылкам: Если вы в России: boosty.to/vertdider Если вы не в России: www.patreon.com/VertDider

[@101picofarad]

пакет чипсов сделан из майлара - материал, используемый для звукоизлучателей )

[@101picofarad]

А кстати - за каким бесом нужно считывать звук быстрой камерой если для того чтобы его хорошо считать нужно поднести камеру близко чтобы хорошо видеть края легкого объекта? Не проще ли использовать микрофон на таком же расстоянии, ну или лазерный микрофон направить на металлическую поверхность округлой формы и задетектировать синхронно - с такого близкого расстояния должно работать даже без точной фокусировки приемника!

[@mawwida]

следующие видео: Мы можем восстановить видео по звуку?

[@cottoncat3700]

Можем, УЗИ называется =)

[@excellex]

это будет в подкасте

[@LastFreeEagle]

kzbin.info/www/bejne/o6PMYpWVot2nnbM

[@user-fm1et9xy1z]

Следующее видео: у нас нет ни звука ни видео. Давайте восстановим!!!

[@cottoncat3700]

@@user-fm1et9xy1z Разрешение пока аховое, но если нет ни электромагнитных колебаний, ни механических, тогда можем, хоть как-то, но полагаться на гравитационные =)

[@rtsrt165]

Piano roll - Лента для пианоллы. Да переводчик гений!

[@TechnoStrannik]

Ага, точно! А я и не понял сразу: при чём тут пианола?

[@xeniyak5636]

... Лицо человека, которого осенило - бесценно))

[@snky_]

Тот случай, когда у человека такая крутая харизма, когда кайфуешь от его обычных действий. Тоже понравилось, как он проявляет эмоции

[@veliarify]

Напомнило как в фильме Eagle Eye ИИ считывал разговор с круговых волн в кружке кофе, преукрасили конечно но в сферическом вакууме даже достоверно)

[@zeroturushu6569]

Не мог вспомнить в каком фильме)

[@stormfox7944]

А.уенный фильм ))))))))))

[@SergeyDavidPsy]

В вакууме как раз звука не было бы) Да и громкость для создания волны в кружке должна быть эпик. А вот пачка снеков запросто могла там оказаться. Так что косякнули)

[@user-br5cr3qy5i]

@@SergeyDavidPsy сферический вакуум - это сленговое обозначение идеальных условий

[@user-ss5xw7wq1r]

На крючке название в нашем дубляже

[@igorkroshkin9354]

Офигеть. Чем выше частота кадра - тем больше информации можно добыть. Гениально

[@Svesh_Victoryan]

представь что будет, если частота кадров будет бесконечной, хотя бы в теории. Вселенной будет мало!

[@MaxPivovarov]

теорема Котельникова ;)

[@valiantsinm]

@@MaxPivovarov Ну так там и сказали, что частота дискретизации должна быть минимум в 2 раза выше чем максимальная частота полезного сигнала. Оно как раз из теоремы и следует )

[@user-bs8is7hm6g]

@@valiantsinm лет 10 назад читал статьи про compressive sensing. Пишут о том, что исследователи преодолели ограничение теоремы Котельникова (или критерий Найквиста-Шеннона) и использовали свой алгоритм для сжатия изображений. Возможно, что со звуком это тоже бы помогло.

[@Alexandrage.]

Еще и от числа пикселей зависит.

[@ComplexTagret]

Лет 20 назад, когда в тех. универе учился, мы изучали лазерные звукосыматели, которые использовались при шпионаже. Суть в том, что лазерный луч направлялся на стекло помещения, где проходила интересующая беседа. И по микродвижениям стекла записывалась сама беседа. Расстояния от датчика до стекла могла составлять более сотни метров. Так что этой технологии дофига лет. НУ, и к слову, метод противодействия - в это комнате можно было ставить генераторы белого или розового шума.

[@wozniak3140]

Теперь я понял как создатели Деревни Дураков создали такой идеальный саундтрек.

[@ilya7zz]

Эх, помню в детстве (в 16 лет) пытался сделать прослушку из лазера и фотодиода, через оконное стекло. Дальность была небольшая, ограниченная качеством самого лазера и фотоэлемента, но идея оказалась рабочей. Прошло 22 года и вот, уже через видео можно получить звук =)

[@ZavaruhinS]

Спецслужбы так кажется и делали

[@user-us6pi2fr9e]

А в чем принцип прослушки, можешь подробнее рассказать, пожалуйста)

[@sidan.0_0]

​@@user-us6pi2fr9e грубо говоря лазер "светит" на стекло и по лазеру передается колебание стекла ( это если прям очень коротко) лучше загуглить "лазерная прослушка своими руками"

[@SplashT]

также, чтобы расширить диапазон восстанавливаемого звука, можно провести временной-интерференционный анализ близлежащих объектов. ведь колебания "внутри" объектов от какого-то воздействия (звука например) не затухают моментально а идут по ниспадающей и тогда "текущие" звуковые колебания накладываются на те затухающие колебания внутри объектов.

[@vladizt5943]

Теперь давай обратно, по звуку воссоздать изображение

[@JohnnieHoliday]

Как у китов и летучих мышей, которые с помощью своего эхолота воссоздают примерную 3D картинку по отраженному звуку, что помогает им обходить препятствия

[@user-cheesee]

Это будет эхолокатор, не знаю насколько возможно по звуку из плохого микро воссоздать комнату в которой писали звук. Но со спец оборудованием я думаю это реально. Цветов не будет но зато можно будет узнать к примеру сколько человек в комнате.

[@BorisCode]

Сложность не качестве микрофона, а в эффектах шумоподавления и том, что единственного микрофона недостаточно. Если к тебе вернётся звук - это ничего не даст тебе в понимании направления. В лучшем случае ты узнаешь примерную дистанцию до предмета, от которого звук отразился.

[@user-mw7dq9oh8q]

@@BorisCode согласен с вами. не зря нам даны два уха, а не одно.

[@creator7053]

Очень легко, в комнату пускается звуковой импульс - короткий щелчек, он распространяется по всей среде, и отталкивается от углов и стен. Так можно вычислить геометрию и плотность комнаты. также, при определённых частотах, можно добиться спектро частотной картинки, тойсть сигналы с разными колебаниями и формой, сливаясь вместе под определенной функцией, могут вывести определенную форму волны, так например раньше делались игровые автоматы, spacewar!, пускались специальные частоты через преобразователь и выводились на экран - примитивный осциллятор с осями x/y!)

[@Redmi-cu1de]

Они так просто пошли и купили камеру на 1000 кадров

[@user-fq5xn4ux8x]

да да , я тоже обратил внимание. Ну это же *загнивающий запад* Все люди в рашке ослеплены

[@Leleka2310]

Тю. 150 тис грн. Або менше 4кілобаксів. Таке. Для відосика - на якому можна зробити тисяч 20 - чом би й ні. А що на расєє так просто купити не можна? 🤣🤣🤣

[@sashock94]

Ну, это ж не твой условный Мухосранск :)

[@aarghm]

@@k0tyn255 у не шрифт баганут, а мозг

[@Leleka2310]

@@k0tyn255 у мене все в нормі. Всі, кому потрібно - розуміють. Мьішєбратья - звісно що ні. Але це ваша особиста проблема.

[@JohnnieHoliday]

Аудио в конце напомнило первые записи 19 века, такое плохое качество, но как в последствии далеко шагнула звукозапись. Возможно, в будущем эта технология будет работать гораздо лучше и выдавать хорошее качество звука, сняв информацию даже с обычной камеры телефона

[@user-kg5if7ok4c]

Спасибо за работу!

[@whitefang2011]

Вау! Это просто вынос мозга. Если в таких условиях удалось, то с крутым оборудованием..

[@unonim1759]

А камера на 1000 ФПС это не крутое оборудование?

[@vitaliikuzminov2888]

@@unonim1759 не предел точно. Уже есть камеры свыше миллиона фпс

[@seriych]

​@@unonim1759 Это "мыльница" sony rx100 m6 или m7. Не самая дешевая мыльница, но тем не менее. И при 1000 кадров там разрешение и качество низкие. Так что да, оборудование совсем даже не крутое.

[@FilFPS228]

@@vitaliikuzminov2888 уже..... Миллион фпс есть очень давно. И 100 миллионов есть

[@vitaliikuzminov2888]

@@FilFPS228 не представляю себе это чудо, но вполне может быть. Так то я не гуглил за камеры, зато вот такой видос видел kzbin.info/www/bejne/qGGXlmdrepKqicU - тут автор разряды на 1.75 миллионов фпс снимает. А народ за тысячу удивляется😃

[@IgorStepochkin]

Когда вижу, что человек для работы использует матлаб - это уже вызывает уважение ;)

[@NONAME-jb9ff]

Матлаб ?? Что это ?

[@user-cf1oe7dt8f]

@@NONAME-jb9ff ну погугли

[@MrOnLyThEBeSt98]

@@user-cf1oe7dt8f нас с ним забанили везде кроме Ютуба, помоги

[@julekiks]

БООООЖЕ Я ИСКАЛА ЭТО ВИДЕЕОООО СТОООО ЛЕЕЕЕЕТТТТ!!! Спасибо ❤

[@NI4IK82]

Мое почтение! Спасибо за Ваш труд!😊👍🤝

[@Malchik_Spalchik]

Ашалеть, взрыв мозга просто! Вот это годный контент

[@ironpin7949]

Спасибо за видео вам

[@zetmixbeatz]

Быть первым легко, а вот последним сложно... Спасибо за перевод!

[@pingvin_oreng1585]

Скорее страшно

[@zetmixbeatz]

@@pingvin_oreng1585 ахаахаха, согласен)

[@gimeron-db]

Это когда два канала занялись переводом одних и тех же видео?

[@user-mr8bg1rz5z]

Крутой видос!! Наука двигатель прогресса. Шпионская штука получилась )

[@Anika-Faystas]

Не лишний комментарий для поднятия рейтинга канала!))

[@Cyber_Krill]

Очень круто 👍

[@Dimonshirson]

Вроде ещё кгб писало звук со стекла, сканируя лазерным лучом. Небыло видеооптики, распознающей такие колебания.

[@din1927]

тсссссс

[@lapkinastol127]

Это и сейчас есть, можно и с розетки по колебаниям тока снять звук, но это же не камера уже, а отдельное спец оборудование

[@nikolasboy81]

Ага, только одно маленькое но, в кино )))))

[@Evgeny_Yurievich]

Я слышал, что это нереализованный проект.

[@ofhju]

​@@nikolasboy81 он правду глаголит. Такое действительно есть. Это устройство называется лазерный микрофон. Я такую штуку в универе делал. Только у меня было дешево и сердито. Брал обычную лазерную указку, динамик, на который разместил с помощью двустороннего скотча, маленькое зеркальце и сам приёмник. Этот приёмник сам спаял. Схемку взял из инета. На динамик выводил речь и на приемнике получал звук примерно такой же, как и в конце видео.

[@dnbkilla]

Офигенно)

[@user-uk6bp5cu1y]

Это видео натолкнуло меня на мысль нового способа слежки Или записи звука на расстоянии

[@Uraken3d]

Лет 40 уже изобрели

[@quintusferrus3177]

Спасибо, интересно. Как тут не вспомнить тов. Термена, который записывал звук по колебанию стекла))

[@chubaka99]

Невероятно!))))

[@waitmar2124]

Читал про технологию спецслужб, позволяющую с большого расстояния лазером считывать колебания оконных стёкол, поэтому в очень важных кабинетах к окнам приклеен динамик от наушников, в котором играет русский рэп.

[@ZahhaRaMahadev]

Вполне возможно. Но гораздо эффективней закрыть спектр белым шумом. И тогда даже после многочисленных рендерингов и отфильтровок исходный сигнал не достать. Он будет перекрыт постоянно, что важно и надежно. У него не будет как таковой динамики, как у музыки, ибо сигнал не затухающий.

[@ZahhaRaMahadev]

Полагаю, может подойти любой, не только белый шум. Главное, что бы он перекрывал по давлению уровень гейна голоса в колебании стекла. А это совсем не много. Учитывая, как правило, большой размер кабинетов и находящийся далеко от стекол источник звука(человека). Хватит динамика размером со спичечную головку, на батарейке, который сможет и будет работать автономно.

[@waitmar2124]

@@ZahhaRaMahadev но ведь белый шум это в равной степени все частоты, разве это не упрощает выделение голоса?

[@ololoololo6631]

а шпион вычисляется по дорожке из блевотины и ушной крови)))

[@Pan_Narrans]

@@waitmar2124 Нет. Информация, смешанная с шумом, неотделима от него.

[@bayniyaz3372]

Теперь я понимаю как в играх получается подслушивать разговоры через оптику или бинокль

[@ololoololo6631]

Нет. Там лазерный микрофон. Его прикол в том, что чисто за счет геометрии ничтожные колебания отражающей поверхности (скажем стекла) вызывают очень заметные колебания отраженного от нее луча.

[@gimeron-db]

@@ololoololo6631 По сути отражающая поверхность производит амплитудную модуляцию луча. Проблема в том, что в реальности отражённый луч редко возвращается обратно. Нужно специально подбирать расположения источника луча и приёмника отражения. Можно конечно попробовать принять рассеянный свет и пропустить через фазовый детектор.

[@ololoololo6631]

@@gimeron-db не амплитудную, а пространственную :) В точке приёма луч колеблется. Амплитудной она становится за счет того, что у фотоприёмника грубо говоря неоднородная чувствительность в разных местах

[@gimeron-db]

@@ololoololo6631 Для фиксированного в пространстве приёмника это всё равно, что амплитудная.

[@ololoololo6631]

@@gimeron-db если принимать фотодатчиком со большой площадью равномерной чувствительности, модуляции не будет вообще, если с маленькой площадью - вместо звука будут щелчки. Тут нужно что-то вроде маленькой солнечной панельки (как у калькуляторов), и нанести на неё градиентное затемнение из центра к краям (то что у фотографов виньеткой зовется).

[@user-sf7qo9ch6w]

- Вау прикольно - "можно даже записать голос через стекло" - Оу.....цифровой ГУЛАГ?

[@kolesglock]

Так явно чувак проект изначально разрабатывал для дяденек из ЦРУ, или ещё откуда

[@user-ih5uj5ce6s]

Это просто охринеть

[@user-bq4fz7hy7l]

Просто красавчики

[@daniilb5346]

Лет 8 назад ещё новость была о подобной технологии, там за основу считывания брали ворсинки на листьях цветов подоконника. Ну и конечно много кадров/сек.

[@0verforce]

Поржал над тем что ноут может сгореть от того что его нагрузят вычислениями))))

[@Uraken3d]

Отмазка для тех, кто плохо в технике разбирается. Когда не хочешь работать. Тоже так говорю

[@0verforce]

@@Uraken3d или когда хочешь новое железко))))

[@SxteenneSxteenne]

В каком-то фильме двое человек переговаривались в звукоизолированной комнате. у них на столе стояла чашка с кофе. Снаружи за ними наблюдал ИИ и через смотровое окно смог по колебаниям поверхности кофе прослушать о чем они говорили

[@alexandr_instr]

Фильм «на крючке» по-моему

[@NikitaKnazev545]

Космическая Одиссея - Стенли Кубрика

[@Mark-nh2vh]

фильм "Мухтар" называется

[@expertkmsdv84]

Круто!

[@agnttgr]

На самом деле этой технологией уже давно пользуются спецслужбы, когда прослушивают, например, разговоры в здании. Вибрации можно ловить на стекле, на чашке чая (вода вибрирует) и на прочих подобных материалах. В теории, если сильно прокачать алгоритмы, разговор можно считать по вибрации чужих бровей - мы не узнаем что там уже разработано у топовых служб/компаний

[@user-zg2pf5rt7q]

Тут уже обсуждалось. Речь идет о совсем иных условиях. Вибрации с поверхностей снимают лазером. Речь идет о довольно специализированном оборудовании. Здесь же рассмотрена возможность анализа минимальных изменений яркости пикселей в условиях съемки камерой. Это скорее ближе к тому как астрономы умудряются извлечь кучу информации из нескольких пикселей далекой тусклой звезды. Здесь ценен не столько результат, который вряд ли дотянет до того который можно получить используя лазерный микрофон, а сам подход.

[@dNix]

Те ребята используют аналоговые схемы. Они проще и эффективнее. Минус только один - не работают по записи. А сложности получения звука по записи хорошо объяснены в этом видео: низкое разрешение, шумы, низкая частота кадров. Теорема Котельникова в видео не названа, но по сути упоминается: для качественной дискретизации звука нужно иметь как минимум удвоенную частоту семплирования. И это приводит к тому, что даже с 1000 кадров в секунду сложно снять звук частотой больше 500 Гц. Но в этот диапазон уже попадает диапазон голоса человека. Только где взять такую частоту кадров? Если шпиён специально подготовился к съёмке, то чего он не взял лазерный или хотя бы направленный микрофон?

[@agnttgr]

@@dNix речь идёт об условиях, когда у прослушиваемого установлено какой-нибудь звукоизолирующее стекло, которое не вибрирует По лазерному микрофону не измерить вибрацию той же чашки чая внутри помещения с модным стеклом, по камере - можно В целом нет проблем с камерами хоть в несколько миллионов кадров в секунду, такие есть и продаются любым заказчикам за 30к долларов+ (канал slowmoguys). Не вижу проблем, чтобы использовать одну из таких камер на частоте 40000 кадров в весьма высоком разрешении

[@k390r5]

Думаю можно учесть скорость звука, чтобы ещё лучше отфильтровать входные данные. Основная идея такова: "Если зафиксировать паттерн колебаний в одной точке и через время t на расстоянии v*t будет тот же паттерн колебаний, то скорее всего это колебания из-за звука". Для реализации этого метода фильтрации входных данных понадобится ещё знать направление движения звука и примерную геометрию объекта

[@hsirew]

Ну в очень многих случаях как по мне невозможно учесть расстояние и направление звука т.к. на записи не будет видно объекта издоющие звук.

[@k390r5]

@@hsirew расстояние до источника знать не надо. Можно сделать алгоритм не зависящий от направления звука, но он будет очень медленным. Картинку надо разбить на сетку, записать все колебания узлов в течение времени t = L/Vзв (L это наибольшая ширина объекта, Vзв скорость звука ), и подбирая скорость Vп (подобранная скорость всегда будет меньше Vзв) искать повторяющиеся паттерны с шагом Vп*dt (dt

[@k390r5]

Геометрию объекта можно узнать по изображению (можно натренировать нейронку).

[@k390r5]

Надо ещё отметить что мы будем считать, что волна колебаний движется как плоскость, и проекцию его скорости на плоскость изображения мы будем подбирать.

[@k390r5]

Паттерны никогда не будут абсолютно идентичными надо искать с погрешностью. А значение погрешности подобрать на практике.

[@monsoda2834]

🤯 у меня нет слов...

[@konstantinhuwa3064]

Чтобы увеличить разрешение по пикселям, можно снимать не сам объект, а его тень, если источник света ближе расстояния отброшенной тени. А по времени, не плохо было бы иметь возможность считывать только несколько пикселей, но быстрее.

[@k390r5]

Думаю можно ещё отфильтровать шум. Основная идея такова: "Если зафиксировать паттерн колебаний в одной точке и через время t на расстоянии v*t (v - скорость звука) будет тот же паттерн колебаний, то скорее всего это колебания из-за звука". Для реализации этого метода фильтрации входных данных понадобится ещё знать направление движения звука и примерную геометрию объекта

[@k390r5]

Быстрое Фурье преобразование - наше всё

[@DER88ful]

Отлично,крутяк...

[@creator7053]

Если присутствует резонанс, если можно добиться колебаний, при желании можно отследить и зарегистрировать вибрации, которые с помощью спектро анализа частот можно будет перевести в звуковой сигнал. Но насколько должна быть качественная и быстрая камера, чтобы проанализировать эти движения, и снять хотя бы одну секунду звука, вот это уже вопрос) А так, все это очень сложный и не практичный способ, но все возможно) Даже чересчур возможно и гениально!

[@user-dg6jg2vy1e]

Камеры, снимающие полёт пули или начало ядерных взрывов, были ещё в середине прошлого века

[@creator7053]

@@user-dg6jg2vy1e это понятно, но чтобы зарегистрировать колебания нужно приблизить картинку в макро частицы, а для этого нужна хорошая аппаратура)

[@MrPalianytsia]

Насколько помню хакерами использовалась синхронизация с строчной развёртки матрицы камеры и восстанавливался звук с обычного видео 60 кадров в секунду. Шумы камеры предварительно снимаются. Так как картинка статическая формируется картина тепловых пикселей, они вычитаются на первом этапе.

[@WeCrazyElectric]

Вспоминаю вибрационные глушилки на окнах и батареях на прошлой работе от лазерных систем акустической разведки

[@kuzmichpyro]

Ого! Где работали?

[@user-uf5xj1sx3v]

Класс 👍🏻👍🏻👍🏻

[@KingDog25]

Действительно очень интересно. По-сути нужен только правильный фильтр, который бы отличал где шум, а где нет ну и частота кадров конечно.

[@ZahhaRaMahadev]

Шум-шуму рознь. Ну не знаю... Очень хочу посмотреть как Вы из аудио файла, в котором будет всего два потока: голос и белый шум, в котором белый шум будет всего на несколько дБ выше голоса, вырежете вокал. И не то, что артикуляцию(разборчивость) сохраните, как Вы вообще что-то получите?

[@KingDog25]

@@ZahhaRaMahadev Я конечно не эксперт по распознаванию голоса на аудиофайлах. Но обычно шум имеет одинаковую частоту скажем так. А голос колеблется в определённом частотно-модульном диапазоне. Соответственно разница между этими двумя параметрами и будет та самая полезная инфа ну это конечно при высокой частоте дискретизации. Уверен, что голосовые поисковики это уже давно умеют.

[@user-ww3hp1sn8e]

Помню читал где то в 80 г такой фантастический роман. Научились расшифровывать, что говорил Леонардо когда писал ДЖАКОНДУ. Суть метода в уплотнении незасохшей краски звуковой волной. Когда она засохла то закрепила и звук. А может и до этого дойдет .

[@ArKoLiChanell]

Был на экскурсии в КФУ (Казань), там нам профессор кафедры (а может путаю) рассказывал о том, как это сделать))) Но он рассказал эффективнее способ.

[@djtot731]

Ну наконецто ктото заговорил о колор и моушон магнификайшон🙄

[@alexeyrzayev]

Спасибо большое! Ваше ФСБ!

[@RadioHAM433]

А еще частота кадров которую не даст обычная камера ГЫ. Тут ничего необычного просто преобразовать колебания в звук xDD я читал о подобных экспериментах лет 10 назад но там конечно юзали камеру с 20k FPS.

[@dNix]

1000 FPS уже годно чтобы голос оцифровать

[@ungamer1]

это пересъёмка видоса? или несколько лет назад я смотрел в оригинале это ? уверен, что уже видел этот сюжет

[@nomad.soe.kz0112]

Сколько преступлении можно раскрыть развивая эту тему 👍👍👍

[@BarsOFF34]

Напомнило фильм "на крючке" ))

[@iskandar007]

да точно!

[@sall6854]

Хахахаха, у Мэри был барашек, хотел бы я увидеть как вы это озвучивали, это точно было не скучно

[@beiser7522]

- Это нейрость? - Нет - Ааа... А я думала нейросеть

[@user-ci7fo5jw3g]

Какой же криповый голос передался через пачку чипсов, как будто дух из 19 века пытается достучаться из прошлого и что-то сказать

[@catchupketchup77]

Все просто: когда дух из 19 века пытается до тебя достучаться он проходит так же кучу препятствий в пространстве времени и поэтому когда ты услышал голос в данном видео эксперименте, то он у тебя вызвал ассоциации с голосом призрака из 19 века. P.S. Когда в следующий раз призрак выйдет с тобой на связь передай ему, что скоро изобретут телеграф😂

[@Foxguyanimation]

Переведено и озвучено студией "фольга на динамике"

[@user-vy5bm1xz1z]

теперь есть рецензии к фильму "На крючке" (Eagle Eye, 2008) но это не дает повода, это один из любимых фильмов...

[@windy_sky]

Камеру надо было брать с канала slow-motion 😁 они иногда там свет рассматривают как он движется.

[@user-zh8hh2sh4p]

2:37 саундтрек фильма «Терминатор»?

[@sashabutru]

Крутяк, спец службы уже нашли этого гения)

[@user-eh7ss8mp8i]

...теперь ещё придумывать применение этому изобретению....

[@danielluko7635]

Ценой чего? - ценой всего!

[@GeniusSapiens]

Я тут нашёл раздельчик на Википедии - звукохимия. Представьте: стоит пробирка со смесью химических веществ, каждое из которых реагирует на определённую частоту звука. Остаётся сделать так, чтобы мы смогли определить в какой момент времени какая реакция произошла. Тогда мы получим информацию не только о спектре звукового сигнала, но и последовательности! Так как есть реакции "химических часов", то достаточно подобрать вещества, результат взаимодействия которых зависит не только от воздействия на них звука, но и от процентного соотношения продуктов реакции "химических часов". И вот он - ХИМИЧЕСКИЙ ДИКТОФОН!

[@Zurg314]

Подозреваю, что "подбирать вещества" придётся до тех пор, пока они не самоорганизуются до нейронной сети.

[@GeniusSapiens]

@@Zurg314 Человек вообще химический анализирующий реактор, в котором химические реакции сами решают какие реакции проводить( приём пищи, например)! Хочешь впрыск адреналина в кровь - соверши бесшабашный поступок!

[@ZahhaRaMahadev]

Супер, а динамику сигнала(волны) из чего брать? Любая, даже рабочая частота спектра(от 20 до 20000), без колебаний будет звучать как тишина, в лучшем случае(грубом) изменяющийся в спектре фон. Фон! Это всё очень условно. Видимо там бендевая поддержка. По типу от 0 до 20, от 20 до 120, от 120 до 200(250), далее до 500-, далее 1000, далее 3-4к, далее 6-8к, далее 12к и до 20к. подобные бенды(разделения) реализовать можно. А как, если говорить очень грубо, цвета, скорее уже оттенки, будут считывать 33 герца и скажем 34, одинаково? Окей. А 180 и 190, а 400 и 500 тоже одинаково?) Страшно представить звуковую волну подобного типа.)

[@ZahhaRaMahadev]

Звук это физика и пока мы совершенствуем наши технологии прорывы не за горами. Я вам как музыкант скажу, то-ли еще будет, каждый 10-ть лет, особенно начиная с 90-тых, прорыв в качестве звука во всех сферах растет феноменально! Я, например, могу назвать дату рождения(релиза) любой композиции + - 5 лет, просто по качеству звука.

[@GeniusSapiens]

@@ZahhaRaMahadev Не поделишься весами своей нейронной сети?😂

[@dkk64]

Есть более интересные модели. Например можно ли восстановить событие произошедшее гдето если нет ни видео ни звука ?! Да, это делают следователи например . Но это делает и любая другая частица или группа, попав в похожие обстоятельства. Ну и разница в поведении частиц нам говорит о внутреннем и внешнем состоянии частицы. Иными словами возможно до некоторой степени вероятности восстановить прошлое как частиц так и что более думаю интересно и необычно будет прочитать многим , лаборатории . То есть самой системы отсчета. И возможно даже синтезировать прошлые события. То есть стакан упавший на пол и разлившееся молоко мы можем рассчитать как обратная съемка. Можем предсказать и где стоял стакан до того, и что его уронило. Звук тоже самое. Звуковой образ также предсказуем . Но мы это внутренне не осознаем . Так вот восточные философские практики [шаолинь, тибет и так далее] имеют цель научить выстраивать и обратные ряды событий, и предрекать следующие. Например охотники . Идущие по следу. Боевые искусства . Предвосхитить удар. Изучить противника ,пустить бой по нужному руслу . Увидеть и услышать прошлое и будущее возможно. И для этого действительно нужен какой либо предмет из этой лаборатории. Улики.

[@stormfox7944]

Прямо как в фильме На крючке 2008 года )))

[@Vlad22051969]

Гении

[@Alexander13Orlov]

Ого, он упомянул теорему Котельникова) Я удивлен)

[@samedy00]

Почему?

[@user-kn1gs3mb2k]

это тоже. что и старинный способ считывания разговора с оконного стекла лазером. которым пользовались спецслужбы.

[@gimeron-db]

Как скоро Onigiri или foo52ru ака ТехноШаман напишет декодер? ) О одном из алгоритмов ещё изображения обрабатывали построчно и учитывали сдвиги объектов за время сканирования кадра.

[@mimimiso_uwu]

Ну всё, ждём через десяток лет брейндансы.

[@pandil1]

Ка всегда топ

[@TSKTD]

круто

[@user-uy9tq3er6d]

Ладно. Было интересно. А теперь пойду пожалуй я музыку посмотрю и картинки послушаю...

[@user-zd5bh2bl1y]

Голос через стекло давно записывают спецслужбы с помощью лазера отраженного от стекла и датчика.

[@ututulechka]

Где-то давно натыкался, рассказывали, что лазером можно считать со стекла, или например, батареи звук. Предположу, что лазером это сделать проще и качественней, чем с видео.

[@gimeron-db]

Преимущество с видео - полная пассивность наблюдателя и свобода размещения. Он ничего не излучает, из за чего его невозможно детектировать, и он может находиться где угодно.

[@ututulechka]

@@gimeron-db если рассматривать практическое применение, то показанное в видео не применимо в жизни, слишком много "если", и качество на выходе - как фотография фоторобота в газете. Имхо.

[@1988xkp]

Теперь дело за ИИ. Озвучивать старое немое кино.

[@FilFPS228]

Это так не работает

[@RusLSystems]

Вообще-то частота выше не нужна. Камера передает данные последовательно и по идее каждый пиксель снимает свой момент времени. Получается все что нужно сделать - считывать картинку в разных токах изображения.

[@user-rc7jd9so1e]

очень странное видео) но если технологию прокачать, то в теории интересно

[@brovkinmikhail6908]

Помнится была новость про то, как ученые сосканировали звук с древних стен, которым было несколько тысяч лет. Дело в том, что когда строители накладывали штукатурку и в этот момент говорили, лопатка, которая распределяли раствор по стене вибрировала и оставила характерные след ,подобно следу на грампластинке. Тоже интересная тема для ролика.

[@user-bs8is7hm6g]

Читал про считывание звука песни с кувшина, когда его на гончарном круге лепили.

[@S.Olexandr]

С такими технологиями можно считать звуки с замёрзшего куска какашки мамонта, когда он его лепил)

[@NVisionTV]

бред какой

[@NONAME-jb9ff]

@@NVisionTV по факту название того видео тоже звучит бредово но работает же , кто знает может его теория тоже верна ??

[@NVisionTV]

@@NONAME-jb9ff строители в те времена наверное орали как стереосистема на стадионе, что б лопатка из-за вибраций по стене сама возила? Сам то понимаешь какой лютый это бред?

[@hamradiochannel]

Вот здесь и нужно Быстрое Преобразование Фурье!

[@user-wb4by6dw7c]

Поскольку колебания затухают не так быстро, то есть шум, который происходит из-за наличия самого звука. По идее это можно отфильтровать, настроив обработку сигнала на получение сверхкритических колебаний из (суб)критических с теми же частотами. Жаль, что вс1 равно эту методику не получится реализовать на камерах из маркетов с 400р и 1Гц записи....

[@WoodyAbrams]

Почему то помню читал книгу про методы шпионажа. Как раз существовала технология когда с помощью лазера и отражения от стекла фиксировали колебания и его уже расшифровывали в звук. Так что здесь тот же принцип только уже используя только видео.

[@Push-Oak]

Вот как раз принципы разные. С лазером это древняя аналоговая технология, там нужен только лазер(обычно ИК, хотя в кино показывали видимый красный, это для наглядности, а по сути палевно) и чувствительный к лазерному ИК излучению фотодиод, ну ещё схемы усиления, само собой.

[@starley1978channel]

Принцип старый. Уже в 80-х его использовали для дистанционной прослушки (через закрытые окна например). Лазерный излучатель, регистрирующий фотодатчик, вычислитель.

[@linsan2988]

В игре Киберпанк была миссия, где по видео нужно было воссоздать звук и получить информацию.

[@aregalik3790]

Теперь понятно почему у стен есть уши

[@SeeSharp10]

Извечная проблема белых досок - найти пишущий маркер 😁

[@KomAS_mzk]

Кажется существуют лаерные пдслушивающие устройства, когда звук записывается/слушается при помощи лазерного луча направленного на стекло. И таким образом можно подслушать разговор. Или это пока ещё выдумка киношников?

[@Zanozus]

Всегда знал, что у картинок есть звук 😆

[@Danylo_Kandybal]

Топ

[@user-sc9xc3op8v]

Надо использовать когерентный свет и изучать интерференционную картину

[@gimeron-db]

Отражённый рассеянный свет пропустить через фазовый детектор

[@user-td5ux3cj6s]

Я думаю что если скормить это нейронки то возможно выжать звук из 30ти кадров, так как в единицу времени разное колебание пикселей

[@DiamondSane]

нейронковерие начинает напрягать

[@user-td5ux3cj6s]

@@user-pl6vs4gp4b Так нам другого и не надо. Нам нужно извлечь мигающие пиксели и промодулировать, что есть долго и муторно делать человеку.

[@WordsCrazy]

@@user-pl6vs4gp4b Отличать собак от котов? А как же ChatGPT, MidJourney ?

[@tedbon5135]

Там же объяснили что при 30 кадров в сек ты буквально не видишь изменений потому что частота слишком маленькая, тут дело не в сложности в обработке, а недостатке данных

[@user-td5ux3cj6s]

@@tedbon5135 Попробую объяснить моё толкование более подробнее: имеем звуковую волну которая распространяется в например фольга. Колебания высоких частот можем регистрировать по кончикам а низкие по фольге в целом. То есть каждый участок предмета будет изменяться под своей звуковой волной

[@romanriutin7310]

Шпионская технология.

[@Sir_Neutral]

Теперь берём нейросеть, и учим её восстанавливать звук по видео

[@user-el4my1or8r]

👍💗

[@bayniyaz3372]

Нужно взять мощные колонки и направить на тонкую фольгу

[@bayaziyev_s]

В «Бригаде» в начале 2000х уже умели так