Как сделать звуки для игр

Основы саунд-дизайна в играх: как звуки влияют на геймплей и определяют опыт пользователей

Звук в играх значительно влияет на передачу информации, создание определённого настроения, усиление вовлечения и другое.

Разбираемся, какие категории звуков существуют, как работает система восприятия звуков и что нужно учитывать начинающему саунд-дизайнеру.

Автор и энтузиаст геймдизайна

Основные категории звуков в играх

Синхронные шумы (foley)

Это звуки, которые записывают для озвучки соответствующих действий. При этом необязательно выполнять то же самое действие, чтобы получить нужный сэмпл.

Например, саунд-дизайнеры Dark Sector озвучивали процесс убийства и расчленения противников при помощи фруктов, овощей и орехов — разработчики их били, ломали, давили, сжимали и так далее. В результате получились «сочные» и запоминающиеся звуки убийств.

Запись звуков для Dark Sector

Этот тип шумов назвали в честь Джека Фоли — специалиста по звуку, который первым записал звук отдельно от видео, а потом наложил его поверх изображения. Ему пришлось использовать такой подход из-за слишком шумных ранних видеокамер, которые заглушали остальные звуки.

Синхронные шумы не обязаны полностью соответствовать действительности — главное, чтобы они звучали достоверно и давали нужное ощущение. Например, саунд-дизайнер The Last of Us Part II Джесси Джеймс Гарсия при создании звука бьющегося стекла придумал целую последовательную систему, чтобы вызвать нужный эффект.

Звуки бьющегося стекла в The Last of Us Part II

Когда Гарсия создавал звук разбивающегося автомобильного стекла, он хотел вызвать страх и усилить ощущение того, что игрока загнали в угол. Поэтому он добавил звук небольшого взрыва, так как неожиданный и резкий звук может застать пользователя врасплох.

Это звуковые эффекты явлений, которых нет в реальности. Например, разнообразные звуки интерфейсов или звук, который появляется во время парирования в Dark Souls.

Пример звуковых эффектов в Dark Souls

Музыка

Применяется, чтобы передать эмоциональное состояние и задать определённое настроение.

Саундтрек может быть линейным и адаптивным. В первом случае музыка играет так, как это задумал композитор. Во втором всё зависит от контекста — мелодия формируется в зависимости от действий, происходящих в игре.

Например, композитор Untitled Goose Game Дэн Голдинг использовал адаптивную музыку, чтобы передать «мышление» гуся — когда птица крадётся, мелодия играет медленно и тихо, а в моменты активных действий музыка становится задорной и быстрой. При этом переход между состояниями происходит абсолютно незаметно — возникает ощущение, что это полностью цельная композиция.

Чтобы добиться такого эффекта, Голдинг разбил оригинальные композиции на много мелких кусочков и создал систему, которая подбирает нужные фрагменты к текущей геймплейной ситуации. Так система следит за контекстом и включает нужные куски.

По словам композитора, общее количество вариантов композиции, которые могут получиться в игре, равно «числу с 52 нулями». Голдинг создал всю музыку на основе нескольких работ французского композитора Клода Дебюсси.

Подобным образом создавался саундтрек для Control. Композитор Мартин Стиг Андерсен придумал систему, которая тоже соединяет разрозненные фрагменты в единую мелодию. По словам Андерсена, его работа заключалась не в написании саундтрека, а в создании мета-композиции — подхода, при помощи которого игра формирует мелодию.

Эта система учитывает множество параметров: расстояние до ближайшего врага, количество здоровья, общую ситуацию на поле боя и так далее. По словам геймдиректора Control Микаэля Касуринена, особенно сложным испытанием для команды стало создание песни для одного из наиболее впечатляющих эпизодов игры — «Лабиринта пепельницы».

Прохождение «Лабиринта пепельницы»

Во время прохождения этой локации играет композиция Take Control вымышленной группы Old Gods of Asgard. Сложность добавления этой песни в игру заключалась в наличии вокальной партии — разработчикам пришлось делать так, чтобы слова сочетались друг с другом независимо от ситуации в бою. При этом было важно сохранить нужный ритм и смысл текста песни.

Голосовая озвучка

Используется не только в песнях. При помощи озвученных диалогов до игрока доносится значительный объём информации. А озвучка действий помогает передать ощущения, которые испытывает герой: например, крик во время падения с высоты или стон при получении урона.

Очевидно, что при подборе актёров озвучки необходимо учитывать соответствие голоса и персонажа — тембр, дикция и общее звучание должны подходить образу персонажа. При этом голос можно исказить, если нужно озвучить монстра или пришельца.

Пример изменённого голоса в Mass Effect

Эмбиенс

Это длинные звуковые дорожки, которые создают атмосферу и формируют аудиоландшафт окружения. Такие фоновые дорожки должны начинаться и заканчиваться незаметно — конец должен плавно переходить в начало, чтобы создать ощущение непрерывности и не нарушить погружение игрока.

Важно помнить, что у каждого звука должен быть свой приоритет. Например, фоновый звук окружения не должен перекрывать крик противника, который собирается атаковать.

Самое главное в игре — это геймплей, поэтому все элементы должны поддерживать его, а не мешать ему.

Пример эмбиенса в The Elder Scrolls V: Skyrim

Звуки в играх предназначены не только для пользователей — искусственный интеллект противников также может «слышать» внутриигровой шум. Эта особенность наиболее актуальна для жанра стелс-экшенов, в которых геймеры должны вести себя тихо и осторожно, чтобы не привлекать к себе нежелательное внимание.

Чтобы система восприятия звуков работала предсказуемо и адекватно, она должна учитывать множество дополнительных факторов. Например, разные объекты и преграды не пропускают звук, поэтому в закрытых помещениях он не может распространяться по прямой.

В Splinter Cell: Blacklist все противники используют систему TEAS (tactical environment awareness system), которая содержит всю необходимую информацию об окружении. Обычно она используется для передвижения по пространству, но её дополнительная функция заключается в симуляции распространения звука. Враги знают, где находятся препятствия, поэтому понимают, как распространяется звук. Если волна до них доходит, то они реагируют соответственно.

Профессия

Геймдизайнер 🎮

При этом реакция персонажей зависит от двух факторов — расстояния до источника звука и приоритета. С расстоянием всё понятно — если источник шума находится слишком далеко, то NPC его просто не услышит. Дальность определяется при помощи системы TEAS, которая учитывает геометрию окружения.

Приоритет влияет на то, на какой источник звука персонаж будет реагировать в первую очередь. Например, если в соседней комнате слышны выстрелы, то NPC не обратит внимания на небольшой шорох рядом с собой.

Но система TEAS из Splinter Cell: Blacklist — пример инструмента, который учитывает лишь дальность источника звука. Эта особенность лежит в основе целой механики, но сама система не может имитировать реальную природу звуковых волн.

Чтобы звук в игре распространялся в соответствии с физическими законами, используется примерно та же технология, что и при трассировке лучей. Технология позволяет просчитывать физически корректное поведение звуковых волн с учётом всех отражений, преломлений и поглощений. Соответственно на распространение звуковых волн влияет не только геометрия окружения, но и материалы, которые по-разному отражают и поглощают их.

Консоли нового поколения уже поддерживают подобную технологию — у Sony за звук отвечает чип Tempest Engine, который рассчитывает все искажения звуковых волн. У Microsoft система построена на основе Project Triton. Обе технологии создают объёмное звучание и работают с любыми колонками и наушниками.

NPC (Non-Player Character) — персонаж, который не находится под контролем игрока

Советы от игровых композиторов и саунд-дизайнеров

В заключение перечислим некоторые советы от игровых композиторов и саунд-дизайнеров, которые поделились своим опытом с начинающими коллегами.

⟹ По словам аудиодиректора студии Pearl Abyss Хвимана Рю, саунд-дизайнеры должны помнить, что аудио — это симбиотическая, а не автономная часть игры. Музыка и звук должны быть тщательно интегрированы и смешаны со всеми другими компонентами. Как бы ни был хорош отдельный эффект, он не должен отвлекать или затмевать другие аспекты игры. При этом он обязательно должен улучшать пользовательский опыт.

⟹ Разработчик American McGee’s Alice и Spore Джордан Мейнард считает, что звуки отлично подходят для создания крепкой ассоциации с игрой. Мелодии и звуковые эффекты могут стать узнаваемым символом, поэтому саунд-дизайнеры должны стремиться к уникальности.

Фанаты серии The Legend of Zelda вряд ли перепутают звуки из игры с чем-либо ещё

⟹ Композитор Resident Evil 7, Bloodborne, Mass Effect 3, Borderlands 2 Крис Веласко считает, что в рабочем процессе важно выстроить правильные отношения с остальной командой разработчиков. Например, если добавить слишком много микроменеджмента, то это убьёт всю творческую свободу композитора. Лучше, чтобы остальные члены команды лишь описывали, какое ощущение должна вызывать композиция, а не указывали на то, как она должна звучать.

Также Веласко признался, что в работе над саундтреком игры он старается как можно раньше получить концепт-арты — любые визуальные материалы способны передать нужное настроение. А это, в свою очередь, может стать отправной точкой для композитора. Ещё лучше, если будет доступен игровой билд.

⟹ Саунд-дизайнер из Mighty Bear Games Абель Тан советует первым делом продумать весь звуковой ландшафт игры. Часто звуки добавляются в последний момент, из-за чего они работают не так, как надо. Именно поэтому команда должна ещё на ранних этапах разработки решить, как игра будет звучать. Для этого можно отталкиваться от темы и сеттинга игры, её настроения и эмоций, которые должен испытывать пользователь.

Вышеуказанные мнения экспертов можно свести к следующим рекомендациям, которые помогут новичкам избежать многих ошибок:

Учитывайте звуковой аспект: при помощи SFX, foley и других инструментов можно создать эмоциональную связь между пользователем и игрой.

Всегда помните, что звук — это вспомогательный элемент, который никогда не должен мешать геймплею. Даже самую мелодичную композицию стоит приглушить, если она мешает получать значимую внутриигровую информацию.

Постарайтесь начать работу над саунд-дизайном как можно раньше. Параллельная работа над разными частями игры позволяет лучше связать разрозненные аспекты.

Источник

Основы саунддизайна в играх Статьи редакции

Классификация звука и особенности его применения.

Звуковой дизайн в видеоиграх и кино во многом схож. Но первые имеют интерактивную природу, из-за которой зачастую используются другие подходы. Звуковой дизайн должен учитывать возможность пользователей взаимодействовать с миром по своему желанию. При этом, ни один элемент не должен выбиваться из общего ряда.

В конце февраля в креативном пространстве для разработчиков игр «Индикатор» в Санкт-Петербурге прошла лекция звукового дизайнера Рината Ситдикова, который рассказал про особенности создания звука в играх. Мы выбрали из его выступления главное.

Для создания целостного звукового дизайна и понимания последовательности работы звуки можно разделить на следующие виды: голосовая озвучка, атмосферы (ambiences), синхронные шумы (foley), звуковые эффекты (SFX), музыка.

Существует несколько способов использования голоса в играх. Озвученные диалоги выступают в качестве основного источника информации для пользователей. Announcers — фразы, которые вознаграждают игрока (например, «Double kill»), или предсказывают какие-либо действия («Round one — Fight»). Озвучка действий главного героя — вскрик при получении урона или прыжке, дыхание при беге — позволяет усилить связь с персонажем и лучше описать его состояние.

При работе с голосовой озвучкой важно подобрать актёров с подходящим тембром, чтобы их голос соответствовал характеру персонажа. У игрока должно возникать ощущение реальности встреченного NPC. Необходимо подчеркнуть особенности произношения и устройства речевого аппарата, если это монстр или пришелец. Для этого саунд-дизайнеры используют инструменты Pitch и Layering: первый помогает изменять звуковысотность и длительность аудио, а второй позволяет накладывать различные слои и фактуры друг на друга. Не стоит забывать и об эффектах.

В игре голосовая озвучка обычно привязывается либо к дереву диалогов, либо к триггеру.

Для создания атмосфер необходимо использовать семплы-петли, в которых конец аудиофайла незаметно входит в своё начало. Нужно убедиться в отсутствии заметных акцентов и использовать аудио длительностью не меньше одной минуты (а ещё лучше — не менее пяти минут). Они должны создавать иллюзию непрерывного фонового звучания. Любой резкий переход может разрушить погружение пользователя.

При добавлении фоновых звуков в виртуальный мир важно учитывать позиционирование на карте. Например, есть локация — джунгли. Общие звуки присутствуют всегда: щебет птиц, водопад, шуршание и так далее. У всех объектов есть зона звучания, которая делится на два уровня: первая — зона нарастания, вторая — зона постоянной громкости. Это называется аттенюацией.

Когда игрок входит в первую зону, то по мере приближения к источнику звука, громкость нарастает. Это происходит до того момента, пока пользователь не подойдёт достаточно близко. Тогда он заходит во вторую зону, в которой громкость не меняется. Это важно для позиционирования и смешивания зон, так как звуки от разных источников могут наслаиваться друг на друга. Фоновые звуки размещаются прямо на локациях. Важно следить за тем, чтобы они не выходили за пределы зоны своего действия.

Параметры атмосфер для ориентирования в мире:

При работе со звуком важно обратить внимание на главные игровые элементы — акценты, которые определяют опыт пользователя. В этом помогает процесс микширования и приоритета звука.

Например, при появлении противника, звуки, которые он издаёт, должны явно выделяться на фоне окружения. Существует несколько способов осуществления этой задачи:

Реверберация также сильно помогает при позиционировании на карте с помощью звука. Нужно помнить что щелчок пальцами в комнате и в пещере звучат с разной длительностью и хвостом из-за отражения от стен и поверхностей. Инструмент Reverb поможет справиться с этой задачей.

Зоны ревербераций обычно соответствуют боксам, в которых расположены атмосферы. Также они могут смешиваться между собой. Необходимо соблюдать единство пространства для всех слоёв звуков в сцене. Также это главный инструмент для плановости — приближения и отдаления звука.

Синхронные шумы (foley) зачастую записываются в студии для того, чтобы создать достаточно достоверное и качественное звучание. В прошлом камеры были очень шумными, поэтому было невозможно писать звук прямо со съёмочной площадки. Джек Фоли, американский специалист по звуку в кино, придумал систему, по которой звук записывался вне площадке синхронно с видео на экране.

Сейчас синхронные шумы также создаются в специальной студии. При этом, не обязательно использовать натуральные материалы для воссоздания нужного звучания. Например, для имитации электричества, достаточно использовать бумагу и эффекты. Или пакет с крахмалом для озвучания снега.

Синхронные шумы проще всего цеплять прямо на анимацию. Например, чтобы озвучить шаги персонажа, нужно смотреть когда нога ставится на поверхность, и в этот момент прикреплять звук. При этом, важно подобрать правильное звучание, которое зависит от материала, на который наступает персонаж.

SFX — это звуковые эффекты всего, чего нет в действительности: инопланетяне, звуки звездолётов, а также акценты, на которые необходимо обратить внимание игрока — взрывы, выстрелы, звуки интерфейса. Для SFX очень важно соответствие сеттингу игры, например, при создании интерфейса можно использовать звуки одной фактуры (стекло, камень, дерево), что придаст единство звучанию.

SFX размещаются на локациях так же, как и шумовые эффекты. Или они могут быть привязаны к конкретному триггеру или анимации.

Музыка используется для того, чтобы задать определённое настроение сцене. Она отлично может передать эмоциональное состояние и драматургию. Может быть как внутрикадровой (источник звука находится в сцене: граммофон, пианино), так и закадровой. Размещается музыка так же, как и фоновые звуки. Практически всегда используется в кат-сценах, и выступает в качестве самого простого и действенного способа склеить звуковую картину.

Глобально музыка в играх делится на:

Адаптивная музыка используется для того, чтобы она гармонично вплеталась в геймплей и соответствовала интенсивности и драматургии происходящего. Но для этого нужно сделать плавные переходы между разными отрезками произведения.

Например, есть закольцованный кусочек музыки А, который привязан к простой прогулке персонажа. Когда игрок подходит к лаве, он наступает на триггер и начинается часть B. Для плавного перехода нужно изначально учитывать возможность смены композиции.

Есть горизонтальный тип перехода: от первого кусочка ко второму, от второму к третьему. Каждый кусочек делится на части, у которых есть свои условия перехода к следующему куску. Например, может быть записана специальная финальная часть, которая включается при переходе на другой кусок.

Также существует вертикальный метод: есть единая фоновая мелодия, которая дополняется другими слоями музыкальных инструментов при переходе в ту или иную локацию или при изменении темпа игры. Например, включается изменённая главная тема. Важно, чтобы все эти части лаконично звучали друг с другом.

Для воссоздания целостного звукового дизайна важно соблюдать определённые критерии:

Кроме того, важно понимание особенностей звука. Например, если из-за горы летит дирижабль, который пока не виден, но слышен, то высоких частот не будет. Как только он вылетает из-за горы, частоты выравниваются и становится слышна реверберация — эхо от ущелья. Чем ближе объект, тем меньше эха. Чем больше объект, тем более низкочастотная фактура ему подходит. Множество подобных деталей познаётся с опытом.

Для работы со звуком в играх существуют специализированные движки. FMOD Studio — доступный и понятный звуковой движок. В нём есть аудиодорожки, таймлайн, 3D-позиционирование, real-time подключение к игре, возможность интеграции с Unreal Engine, Unity и многое другое. Для музыкантов он самый доброжелательный. На нём сделаны Starcraft II, Witcher 2, почти все игры для Xbox 360 и множество известных тайтлов. К тому же он условно-бесплатный, если затраты на разработку игры не превышают 500 тысяч долларов.

Wwise от Audio Kinetic — более профессиональный движок, который больше подходит программистам, но даёт возможность реализовать абсолютно все задумки. Например, с помощью него разработчики Witcher 3 реализовали в игре lipsync — сопоставление анимации движения губ и текста. Иначе говоря, разработчики для каждой отдельной буквы записали свою анимацию, а движок автоматически соотнёс одно и другое.

Источник