3D звук в PlayStation 5: трассировка лучей и дружба со Steam (Valve). Технологии новых консолей

[@XYZSchool]

Рассказываем, как технология трёхмерного аудио в PlayStation 5 может повлиять на геймдизайн и производство игр, а также о принципах работы звука с помощью трассировки лучей. Бонусом разобрались, как Sony пришла к разработке Tempest Engine, и подружилась со Steam. Источники: Моделирование HRTF с помощью акустической трассировки лучей: bit.ly/3bJco1e Архитектурная акустика с помощью рейтрейсинга: kzbin.info/www/bejne/jpyQmXimiraNh7s О разбиение звуковых частот по цвету: kzbin.info/www/bejne/jJvXZ6pracmeq5I Разбор спецификаций от Digital Foundry: bit.ly/3eKtP3j Запись HRTF: www.youtube.com/watch?v=ubshi... Послушать звуковую окклюзию: www.youtube.com/watch?v=gBjVG... Церни о том, как как трёхмерное аудио повлияет на ИИ: bit.ly/3bBnwNm Марк Браун про ИИ в стелс-экшнах: kzbin.info/www/bejne/d6qQZpppa9R5nMU Презентация 360 audio от Sony: kzbin.info/www/bejne/mIWrd5qwiN98kMk Сайт audiokinetic: www.audiokinetic.com/ Интервью с разработчиками PS VR: bit.ly/3bDKRxV Трассировка звука от Nvidia: kzbin.info/www/bejne/havLqqquZ76VsK8 Пример звучания Steam Audio: kzbin.info/www/bejne/nZWZZZx7fN6MZtU Об интеграции Wwise от Audiokinetic и Steam Audio: www.audiokinetic.com/products... valvesoftware.github.io/steam...

[@dirtgarry]

Сразу вспоминается CREATIVE с ее EAX, отличная была технология которую нам продают еще раз под видом революции в играх. Пипл хавает.

[@M0e8ius]

@@dirtgarry Точно. Майкрософт зарезала аппаратный 3д звук в Висте сказав, что это ни кому не нужно, а Сони, спустя годы заново изобрела EAX и назвала это революцией... прогресс однако.

[@KenTWOu]

@@dirtgarry Creative EAX 5.0 и их же CMSS 3D (по сути виртуальные динамики с HRTF) давали отличный объемный звук в наушники в стелс играх того времени Thief: Deadly Shadows, Splinter Cell: Chaos Theory, и было это аж 15 лет назад.

[@dirtgarry]

@@KenTWOu Ну не 15, все сталкеры на ЕАХ . CMSS не пробовал, играю в 5.1. Звук был отличный, недавно перепроходил 3 фолыч и 3 дум звук небо и земля. Там была реализована обработка 128 источников звука одновременно, плюс отражение и поглощение звуков согласно среде трехмерного пространства, то бишь "трассировка" звука. В FEAR было слышно звук падающих на асфальт гильз.

[@dirtgarry]

@@M0e8ius Я о том же, открыли Америку.

[@humamucha]

Это просто какой-то "ОтValve башки"

[@fundotamoments9830]

Слушать Луцая одно удовольствие. Прекрасный голос и речь

[@TonyMPS3]

FUN DOTA MOMENTS ты хей

[@swifty8bit]

8:48 - комары когда я сплю

[@aianai8636]

еще на 0.25 скорости :D

[@Neko_is_life]

@@aianai8636 6 утра, а я ржу с коментов в ютубе Ахахаххаахх

[@arevoice]

Сначала Луцай, потом DTF, потом XYZ. Я из-за этого парниши на все каналы подпишусь, походу

[@moviepie5478]

Он с дтф ушел вроде как

[@arevoice]

@@moviepie5478 я об этом же. Свой канал потом дтф, а сейчас на этом закрепился

[@epekaryuk]

Sony, как всегда, о звуковой составляющей не забывают) красавцы!

[@chief6685]

Луцаай, спасибо за твои текста и голос, отлично все !

[@stanislavriff]

"Это всё делают компьютеры, а не люди" - говорит мой дед

[@timut1830]

Дед смотрит в будущее

[@true_xander]

Дед не в курсе, кто делает компьютеры?

[@iichization]

@@true_xander компьютеры делают компьютеры

[@easyfrag3864]

Ого, я ещё помню игры с EAX, последние игры, типа первого биошока, давали столько необычных ощущений. А сейчас на звук забили болт. Ну что ж, всё новое - это хорошо забытое старое.

[@bomzhiha-s-kurskogo-vokzala]

GameDev - это целое искусство, и подобные технологии позволят создать более сочные и атмосферные уровни, а в киберспортивных дисциплинах добавить точности определения местоположения соперника по звуку! Однозначно технология нужная!

[@ilyablinov2474]

пожалуйста сделайте отдельный плейлист "Луцай", чтобы можно было зайти, заочно проставить лайки всем видео с ним, а затем включить все видео и просто слушать. не уверен что есть в мире голос который слушать более приятно, которые методично расставляет все по полочкам и вкладывает мысли в голову слушателя.

[@afriendRU]

Ребята, ваши видосы очень вдохновляют, особенно те, что разбирают искусство на составляющие. Познавательно))) Глубоко разбираете) Спасибо!))

[@StanislavKud]

Хотелось бы видеть побольше подобных видео. Это будет хорошим развитием для зрителей и для самого канала.

[@W_i_n_n_e_r_Man]

Если честно, очень интересно. Благодарность автору за такое интересно и приятное видео. Лайк )

[@Drankoii]

Увидел знакомые кадры - полез в источники - Марк Браун и его новая серия видео про стелс. Моё увожение.

[@chvxs_xf_xcevn8455]

Блин почему у вас так мало просмотров? Замечательный контент. Мне из-за вас хочется уже не просто в игры на плойке играть, а серьезно углубляться в геймдев. Спасибо за вдохновления, так сказать

[@h1l_p0p70]

XYZ: свет и звук распространяются волнами. Фотоны: а вот тут ты не прав, щенок

[@narrolllukkus7463]

Со светом все не так однозначно)

[@jundrik2]

Причем в зависимости от того наблюдают за ней или нет, фотон ведет может себя вести и как частица и как волна.

[@paulkyle]

@@jundrik2 пин код?

[@timut1830]

@@jundrik2 здравствуйте, я физика, 9 класс. Ссылаемся?

[@GoodVrGames]

Корпускулярно-волновой дуализм, слышал?

[@ЛылаПук]

Казалось бы, конкретно мне эта тема не так интересна, но благодаря подаче и волшебному голосу Луцая, смотрела не отрываясь и почерпнула занятной информации. Спасибо вам большое за качественный контент!

[@АртурРыбкин-л6ш]

5:45 Эх, как мне в свое время не хватало дополнительной "визуализации слуха противника" в некоторых стелс-играх. Я думаю, в будущих проектах разработчики сделают "пунктик с галочкой" для тех, кто захочет облегчить своё существование в супер-проработанном "виртуальном мире" ;)

[@dmytronesterenko6479]

Благодарю вас за столь интересную тему и рубрику. Надеюсь, что она будет развиваться и дальше

[@КузнецовВладислав]

Очень круто и познавательно. Делайте еще!

[@тимшиш]

Очень круто, аж до мурашек! Продолжайте, мне нравится

[@adilka8066]

Ролик конечно интересный и информативный, но я пришёл сюда послушать прекрасный голос Алексея)

[@rein_engel]

Мы тут все такие

[@aleksandrivanov3821]

Тот самый случай, когда ничего не понятно, но дико увлекательно. Даже рекламы не заметил, если она была.

[@dr.zombie3223]

Властелин колец: Война на севере. Не знаю почему другим так плохо, но мне понравилось там разговаривать по голосовому чату. Это круче чем общение по дискорду. Там как раз-таки голос игрока зависит от пространства и имеет дальность.

[@Bachiksma]

Технологии многообещающие, но, как и отметил Алексей, на данном этапе развития сильного вау-эффекта не происходит. От размера головы и формы ушной раковины зависит то, насколько похоже будет звучать синтезированное пространство на реальное. Ведь как отражаются звуки от головы и стенок ушного канала каждого конкретного человека зависит его личное ощущение звукового пространства. И от стандартных пресетных настроек ощущения реализма не возникает. Пусть эти пресеты и сделаны с довольно большой базы пользователей, но каждая конфигурация человек-наушники-звуковая обработка всё равно требует индивидуальной настройки. Хорошо, что такие разработки выходят на массовый рынок, это подтолкнёт новый виток развития, а дополнительный интерес к VR-платформам расширит рынок сбыта. Все в плюсе, осталось только подождать)

[@zhanate7773]

Да есть же давно уже пространственный звук. Просто колонки надо в разные стороны комнаты поставить. И не надо придумывать разные ушные раковины. Указал размер комнаты один раз настроил. Придумывают велосипед.

[@АртёмФилимонов-л3ь]

лукас за живое выступление. одобряю.

[@АнтонРешетников-к1т]

Очень интересная тема. Спасибо за профессиональную работу!!!

[@johnjoobooks]

Неожиданно качественно и по взрослому, в особенности на фоне нынешних игровых каналов, упорно подстраивающихся под мифического 17-ти летнего геймера... Подписываюсь просто потому, что хороший продукт надо поддерживать.

[@Lainlink]

Отличное видео. Ждём других видео в этом духе.

[@andreypalamarchuck1291]

Отличная тема для обсуждения,давно было пора ее развивать

[@Fenkreg]

Блин, надо накинуть вам еще 6к Лайков чтоб следующий выпуск состоялся. Пойду регать ботов.

[@ramilsnow2439]

Лайк конечно и хотим больше на такую тему

[@АндрейЧуб-ю3я]

Спасибо,слушать одно удовольствие.

[@alexsirko783]

Очень интересное видео, хочется ещё больше видео о конкретных технологиях

[@mtf_starboy]

Классное видео, жаль так мало просмотров(

[@amirkaripov5999]

Эээ нет это новое видео

[@amirkaripov5999]

И это школа так что здесь почти миллион просмотров

[@МартинВ-ъ9н]

Жду видео про звук в Death Stranding, надеюсь Леша сделает его, он очень хотел))

[@alekseikhatmullin3654]

Спасибо за отличный и прекрасно подготовленный материал. Сейчас так редко кто указывает ссылки на источники.

[@TheDJs3000]

В последнее время звук стал безумно актуален в сетевых шутерах. Там через взук ты просто можешь услышать и понять где находится противник, иначе ты мясо.

[@Пельмень-ы7ъ]

Это да, но сейчас этого звука хватает для таких игр. Эта технология больше для погружения нужна

[@dropdungeon1647]

Спасибо за качественный контент, сейчас мало чего интересного и полезного можно найти геймдевелоперам и просто людям интересующимся индустрией)

[@excells_01]

Было интересно послушать. Спасибо за труды

[@MarauderSquad]

Луцай молодец, люблю видосы с ним.

[@Phant0mSPB]

Это как старый A3D который делал Aureal, но который потом похерил Крейтив купив Aureal. Там как раз была физическая модель материалов помещений... И расчёт шёл в реальном времени, но Крейтиву было как бы не в тему с их реверберациями и хорусами. Но суть в том что Aureal это выходец из крейтива который считал что это не просто спец эффекты. То есть нам по сути втюхивают как новинку то что уже давно существует, но преподносят как что то революционное!

[@ilyakosmos4375]

Очень интересная информация!) большое спасибо)

[@Fomincev]

Ну наконец-то. Когда рейтрейсинг появился, я сразу понял, что лучший вариант его использования, это звук в VR.

[@happy-gq2kw]

Более того есть ещё rtx voice)

[@prana6854]

@@happy-gq2kw а это еще что такое?)

[@nikitasuyazov2060]

И всё это было до лучей. В шутерах было или в RE2: Remake с Титаном.

[@Fomincev]

@@happy-gq2kw это обычная нейросеть натренированная вычитать голос. К RTX она никакого отношения не имеет. Может работать даже на телефоне. Они давно ее показывали. Она может голос вычесть из шума любой сложности, даже из толпы.

[@prana6854]

@@Fomincev Интересно. А по вашему мнению в каких играх самая лучшая работа со звуком?

[@listentomusic621]

Технологии должны развиваться)

[@osmonkulovargen7155]

Отличный ролик, сделаешь выпуск про игровые миры, их проработку и все вытекающее

[@bebracka]

Превосходное и информативное видео

[@victoralexandrov5797]

Спасибо за высокое качество звука и картинки

[@ehiffi8253]

Ну что сказать, а*уенно то, что ты можешь легко понять, что враг находится сзади, слева тебя. Хотя такое можно добиться и с обычными наушниками, но я думаю, что вся механика со звуком может быть приглушена музыкой или чем нибудь второстепенным, то есть, игрок может услышать не шаг врага, а то как упал кирпич, вблизи или вдали, что приглушит звук шага.

[@rein_engel]

Эта технология не потребует использования каких-либо особенных наушников, разница лишь в том, как звук будет просчитываться и проигрываться. Наушники нужны просто хорошие

[@TheButcher931]

Суть не столько в том что технология немного лучше а в том что работать надо меньше.

[@pocemonspivom]

Разница в том,что обычно что в играх,что в фильмах,звук пишут и прикладывают к сцене что-бы дать ощущение сцены и атмосферы.Отсюда "ноги" растут всех форматов окружающего звука . Везде сейчас для реализации отличного окружающего звука,нужна система полная по стандарту того или иного(или всех возможных) форматов звука.Трассировка лучей света и звука теперь по сути меняет подход к передаче сцена и атмосферы.Уже в каждой сцене что мы будем видеть или участвовать ,все световые и звуковые отражения будут работать по схеме точка-луч-отражение-ухо-мозг.Разработчики будут только задавать материалы и расположение физических предметов и окружения.

[@skeleton2909]

Ёмаё только пару дней назад узнал про RTX а тут уже эмуляция звука в реальном времени

[@Petr_3D_Artist]

Как всегда круто с данным ведущим)))) Голос четкий, дикция прставлена.....

[@МухаммадкасымШарафутдинхаджаев]

Как и полагалось сейчас очень сложно удивить кого-то графоном, вот и сони решили сделать что то новое в сфере аудио.

[@dmitriiraush5380]

жду продолжения тематики )

[@ВторойкиборгЧеловек-Сидр]

Крутотень) очень интересно,хочу ещё)

[@ruslankhissamiyev817]

+ выпускайте побольше видео

[@RomanDenisov0703]

Алексей, Sony на презентации Церни как раз же полукольцо показывали. И говорили, что нужно будет уши фотографировать.

[@merecmusic]

Крутой контент! Спасибо.

[@AndriiVasylenko-v6l]

Новинки в топ!)

[@tylermaya]

Круто! Продолжайте

[@mmospanenko]

Давно слежу за темой и жду следующее поколение, долби атмос и наработки сони очень интересны. Кстати что с чипом в иксбоксе, как он в связке с атмосом и в чем отличия от технологий сони?

[@mrprogress7236]

Как раз сейчас работаем над прогой для заказчика которая будет симулировать звук в помещении до и после установки звукопоглащающих панелей юзая dear vr и resonance audio и unity и rt60 custom calculator - сложно это все , ужос , но что не сделаешь для ваших ушей:))

[@intellectualuser2244]

Интересно, а как стать тем, кто разрабатывает все эти завораживающие Технологии, что предпринять куда пойти учиться, например? (если Вы тоже, как и я, хотите знать ответ, можете залайкать этот коммент,возможно, xyz сделает для нас видео об этом)

[@UCvaqGaRp1Vhra2k2UIu_D8Q]

Кулер PS5 когда на нем включили RTX: Запускаю двигатель на всю мощь , включение всех функций охлаждения.Максимальная подача напряжения и тока !

[@idonotwakeup]

Луцай,ты супер!

[@318h7]

очень интересно!

[@rainwatertea]

Отличный кремовый свитер

[@Zonord]

Всякие прикольчики будут поинтереснее

[@Maxpaynemaster2]

Графика важна, но чего-то нового хочется больше)

[@deofan5477]

Вы открыли мне америку с аналогией трассировки лучей. Я в разработке не смыслю, но т.к. чуть чуть понимаю, это довольно интересно, был бы умнее занялся бы изучением и пошел бы в программисты :D

[@deef377]

Пошел гуглить, что такое реверберация. +1 новое слово в моем словарном запасе)))

[@bebracka]

я очень расстроен что к вам нет внимание и Алексей у вас отличная дикция.Прям как на DTF

[@ruslankadievfit]

Очень интересно !

[@anzoo5944]

новые фишки всегда лучше) нинтендо всех вые)

[@ValeGoG]

Было круто :)

[@LittleSSimoon]

Годно, спасибо.

[@not8in494]

Блин мы всё ближе и ближе к облачному гейменгу

[@Youksa-r2e]

Что будет дальше? Трассировка вибрации в джойстике в зависимости от положения стен??

[@marsel_1323]

Спасибо за видео

[@12MrRetro]

Очень интересно это всё слушать в наушниках за 300 рублей.

[@dmasik88]

Я двумя руками за хороший звук в играх, но как мне кажется возможные плюсы этой технологии в ролике притянуты за уши, то есть в игру, чья механика полностью основана на позиционировании звука смогут поиграть только люди с качественной аудиосистемой, а на счет AI хорошо рассказали в Game Maker's Toolkit (AI не должен быть слишком умным, а должен создавать лишь впечатление и быть прежде всего элементом игровой механики). Как бы вся эта звуковая революция не стала пшиком вроде фич ds4 (гироскоп, тачпад, динамик).

[@deadselect]

Сколько лет занимаюсь 3D звуком, первый раз слышу, чтобы кто-то назвал его "Звук на основе трассировки лучшей"...

[@epekaryuk]

Трассировка лучей это принцип формирования 3D звучания. Точная информация о расположении объекта звучания

[@deadselect]

@@epekaryuk трассировка лучей - понятие из оптики. Или у нас звук корпускулярно-волновой дуализм приобрел?) Строить объемный звук методом дробления каждого отдельного звука за каждого отдельного источника в каждый квант на миллионы составляющих - лучей... Ну, это в принципе невозможно, а не просто упор в производительность.

[@ReGaN55]

По мне так ничто не передаст, как реальные звуки, а не созданные и переделанные в куче программ. Вот например игра Тарков, ни в одной игре я не слышал таких звуков. Они реально паражают и пугают. А ведь ещё даже СтимАудио на данный момент не завезли. Я очень надеюсь и верю что у ребят из БСГ получится все довести до конца. Вот это будет реально новый уровень.

[@AnimaStudio88]

Мне кажется такая работа важна в любом случае, т.к. не до каждого сможет донести маркетолог НАХРЕНА нужна данная фишка, учитывая, что к этому будут относиться предвзято (он мне втирает какую-то дичь, лишь бы продать). Тем более интересно узнать это от живых разработчиков. Посмотрим, как пойдет данная технология, учитывая, что вроде все стараются поужать аппетиты в плане трат на разработку игр, да и кризис еще этот дурацкий с этим вирусом. Влюбом случае конечно плойку, как покупали, так и будут покупать и надеюсь разработчики смогут правильно реализовать эту функцию в своих играх с 3D звучанием.

[@TheZero533]

Сейчас игры очень дорогие в производстве, я думаю, новые фишки лучше, так как способны удешевить и сократить время на создание игр. Тем более, в последних новостях говорится об уменьшении нагрузки на разработчиков, в свою очередь это приведёт либо к уменьшению масштаба, либо удлинит сроки разработки. Оба варианта меня, как потребителя, расстраивают

[@Awakato]

интересные фишки определенно

[@ОлегИванов-к7ю]

Микрофон в джосте нужен в основном для управления консолью голосом , поскольку сони сказали что этот микро так себе

[@00220v]

Уровень графики и так уже не плох, лучше больше фишек взаимодействия с виртуальным миром, больше фишечек)

[@timarinokbr]

Заметили, что на новых дуалшоках белые накладки немного выступают над черным корпусом? А представьте себе, что эти накладки двигаются и вибрируют. Да да, сами накладки.это же такой опыт будет. Вы только представьте себе как будет вести себя джойстик в хораре и шутане..

[@SuperDracula1992]

круто что прокачивают звук, я недавно захотел пройти doom 3 и внезапно обнаружил что за последние 15 лет звук в играх деградировал на современном железе оказывается нельзя включить eax, а без него звук хуже и не такой объемный

[@dr.zombie3223]

alchemy врубает. Я в гта са попробовал, звук конечно стал пластмассовым внекоторых местах непривычным-типа звуки царапания об машины. Но зато звуки в тоннелях и взрывах стали круто звучать.

[@SuperDracula1992]

@@dr.zombie3223 спасибо за инфу, но я так полагаю всеравно нужна звукая карта с поддержкой eax? хотя они вроде не сильно дорого стоят, за 2 с половиной видел в днс

[@dr.zombie3223]

@@SuperDracula1992 да. Да можно любую б.у с eax купить чтоб был. У меня creative sb z eax 5. Брал 5 лет назад за 5к, решающий выбор пал на еакс последней версии, а в итоге лишь через пару лет смог ее опробовать. Понял что шаманствовать ради старых игр, которые с eaxсом я даже раньше не слушал смысла мало. Выходили б новые был бы резон. Тру аудио кстати помню у amd r260 завезли, технология которая тож появилась для галочки и забылась.

[@SuperDracula1992]

@@dr.zombie3223 я себе присмотрел внешнюю карточку от asus, там якобы есть поддержка EAX 5.0 ну да, как бы ради старых игр только, просто стало жутко интересно, ибо помню даже по детским ощущениям звук в играх раньше был интересней как то

[@aH6y]

Молодец!

[@user-ilya12]

Побольше новых фишек хочу

[@Fintadox]

Ну тут чисто лайк

[@YourCoachOnTheCouch]

Шикарно

[@ArtroX.exe.]

*Если Луцай будет озвучивать новости на Россия1 я буду смотреть - да что ж ты делаешь деман? Луцай тащит абсолютно все*

[@АлексейШадрин-т1м]

Нужно каналу вашему подписывать, где Луцай

[@Alex-fs8so]

топ контент !!!

[@yammiyamm]

Добавьте, пожалуйста, возможность слушать подкаст в Google Подкастах

[@MrTezeuz]

Спасибо!

[@lemansaug3946]

Так в xbox series x же тоже будет 3d audio