Я не люблю загромождать рабочее пространство фигурками или украшениями. Однако одну решил-таки поставить, причем сделать ее своими руками с самого начала.

На курсе "Интерактивный звук и аудиодвижки" мы озвучиваем различные игровые прототипы на Unity. Одной из запоминающихся сцен курса является карта про викингов, где по ней гуляет милый lowpoly викинг. Я решил распечатать его, но не просто как фигурку, а чтобы он нес функциональный смысл.

Оказалось, что просто достать fbx-модель из Unity недостаточно — персонаж просто стоит в скучной Т-позе. Поэтому я загрузил модель в Blender и добавил ей анимацию, чтобы поймать подходящую позу. Самостоятельно сделать красивую позу у меня не получилось, поэтому пришлось прибегнуть к таким ухищрениям. Найдя нужную позу, я экспортировал модель в Fusion360, где подогнал размеры, чтобы в руки викингу могла поместиться ручка, размеры которой я предварительно замерил.

После создания модели я доработал ее поверхность, устранив лишние плоскости, и отправил на печать. Получилась очень крутая и функциональная держалка для ручки в виде персонажа, которого я озвучиваю каждый поток курса "Интерактивный звук и аудиодвижки".

Вчера ночью я вспомнил, что давно хотел реализовать процедурную реверберацию и slapback delay. Еще в 2020 году, после просмотра выступления Роберта Бэнтина, меня глубоко вдохновил его подход к созданию акустического пространства для выстрелов в игре Tom Clancy’s The Division 2.

Я начал процесс создания системы с простого описания схемы работы в тетрадке. Чтобы не запутаться, я стал записывать свои мысли по ходу анализа выступления Роберта и в итоге решил написать целую статью по этой теме.

На видео результат реализации так называемого BubbleSpace на Unity.

Для начала я интегрировал простой контроллер и начал просчет пространства на демоуровне. Процесс начинается с того, что лучи излучаются горизонтально от персонажа с равными угловыми интервалами, охватывающими весь круг (360 градусов). Эти лучи определяют точки пересечения с объектами сцены, и собранные данные сохраняются. Затем из всех полученных расстояний выбирается половина самых близких значений. Этот подход позволяет более точно оценить размер окружающего пространства, игнорируя более дальние объекты, которые могут исказить восприятие. Чтобы избежать резких скачков значений при движении персонажа, я использовал интерполяцию, плавно изменяя текущий размер комнаты и коэффициент поглощения звука от старых значений к новым. Для этого применена интерполяция, которая учитывает изменение во времени, обеспечивая более естественное значение параметров. Каждый раз, когда персонаж перемещается, запускается новый цикл расчета, но если перемещение незначительное, значения обновляются постепенно, что сохраняет плавность изменения размера окружающего пространства.

Это решение хорошо подходит для настройки параметров реверберации и дилэя. Например, звуки персонажа направляются на шину ревербератора с определенными настройками. В зависимости от размера сферы, меняются значения Decay Time, Diffusion, фильтрации и Pre Delay. Параметр абсорбции поверхностей может менять коэффициент гулкости реверберации (HF Damping). Помимо реверберации, можно также управлять ранними отражениями, корректируя настройку Delay в зависимости от размеров пространства.

Следующий шаг — создание slapback delay для выстрелов и проекция их на поверхностях стен. Однако для этого, скорее всего, потребуется разработать собственный плагин для Wwise 🤯

#slapback #unity

Реалистичная акустика выстрелов в шутерах

Продолжаю исследование темы реалистичных отражений выстрелов. Ранее я описывал пример расчёта пространства, используя лучи, который можно использовать для создания процедурной реверберации.

Хвосты реверберации выстрелов, описанные в этом посте, представляют собой вторичные отражения или диффузный хвост звука. Ещё один ключевой элемент системы отражений — это первичные отражения, которые являются первичными эхо-сигналами, слышимыми при выстрелах. Если просто имитировать их с помощью эффекта Delay, как я описал ранее, отражения не будут реалистично позиционироваться на поверхностях зданий.

Сегодня я опубликовал на Sponsr свои исследования реалистичной акустики выстрелов в шутерах: https://sponsr.ru/xssracademy/64885

Если вы хотите ознакомиться только с выводами, вот краткое изложение.

Процесс создания системы Slapback delay осуществляется следующим образом:
• Создаём лучи и проецируем виртуальные эмиттеры отражений.
• Аудиосигнал передаётся в плагин, который воспроизводит его копию через виртуальные эмиттеры.
• Для каждого эмиттера рассчитывается время задержки (Delay time) и частота фильтрации (EQ).

Для реализации этого нужно записать исходный звук в пул. Например, можно стрелять очередями по 3-4 выстрела. Простое воспроизведение того же звукового ивента из точки отражения не подходит, так как эхо - это именно копия сигнала. В Wwise нужно использовать плагин, который будет воспроизводить сэмплированный выстрел с задержкой и эквализацией.

Команда Division 2 для этого разработала несколько плагинов и весь процесс сводится к следующим шагам:
1. Создаётся‏ ‎FakeAudioDevice‏ , который‏ ‎никуда ‎звук‏ ‎не ‎выводит.‏ ‎Этот ‎плагин ‎требуется‏ ‎просто ‎для ‎размещения ‎выхода‏ ‎шины ‎Slapback.
2. Создаётся шина Slapback_Sender, и ‎выход‏ ‎этой ‎шины‏ ‎назначается ‎на ‎созданный ‎в‏ ‎первом‏ ‎шаге‏ ‎аудиодевайс.
3. На эту шину можно отправлять звук из любого звукового контейнера, используя User-Defined Auxiliary Sends.
4. Магия происходит на четвёртом этапе. Плагин (receiver) Slapback_Returns получает данные с девайса Slapback_Sender. Он работает как семплер, который включается и выключается в нужный момент. Звук этого плагина обрабатывается Delay и EQ в зависимости от расстояния до отражения и материала отражающей поверхности.

Существует и альтернативный способ реализации. Можно использовать плагин Wwise Reflect, к которому требуется приобрести дополнительную лицензию. Этот плагин позволяет настраивать скорость звука и материал поверхности отражения в движке. Для работы с крупным калибром я устанавливал значения скорости звука в диапазоне 30-100 метров в секунду. Плагин проецирует эмиттеры отражений на поверхностях, где установлен компонент Surface Reflector.
На первом видео показано, как, меняя время скорости звука, меняется скорость отражений звука.