Композитор игр и фильмов Мудрец Льюис: «Пока никто не понимает, что такое писать для виртуальной реальности»

Для классически обученного музыканта Сейджа Льюиса технология представляет собой проблему. Хотя его композиции появлялись в рекламе для Google, Facebook и Nintendo, Льюис по-прежнему настойчив с акустическими звуками. «Есть что-то в струнном квартете и главных акустических инструментах, которые выражают так много эмоций», - говорит он по телефону. «Вы не можете выразить это с помощью электронной музыки таким же образом».

Но, возможно, он понял это. На юге к юго-западу самые последние баллы Льюиса - техно-драма оператор в главной роли Мартин Старр (Силиконовая Долина) и Мэй Уитмен, и триллер VR Суррогат - взяться за наше постоянно меняющееся понимание человеческой интерактивности с помощью революционных технологий. Баллы Льюиса, слияние электроники и акустики отражают эти сейсмические сдвиги.

Режиссер Логан Кибенс, оператор следует за программистом, который строит бота обслуживания клиентов, используя свою жену в качестве шаблона, прежде чем он пойдет по навязчивому, разрушительному пути, основанному на любви. Суррогат Между тем, это опыт виртуальной реальности от первого лица, раскрывающий проблемный брак. Номинирован на премию за интерактивные инновации на фестивале, Суррогат «Проблематизирует понятие физического присутствия и отражает… культурные страхи и недуги цифровой эпохи».

Перед фестивалем в Остине Льюис говорил с обратный и рассказал нам, как он сочинил одну из скрытых жемчужин SXSW и как правила написания VR все еще пишутся.

На SXSW в этом году у вас есть оператор а также Суррогат, Что вы можете рассказать мне о своем понимании двух проектов?

Захватывающе, они - два фильма, которые похожи в своих историях, но очень отличаются по форме и способу, которым они пережили. И то, и другое связано с технологиями, отношениями с ними и их влиянием на реальные отношения в нашей личной жизни. Они о искусственном интеллекте и о том, куда мы пойдем в будущем.

Технология и человеческие отношения являются популярными темами, о чем свидетельствуют такие вещи, как Ей а также Черное зеркало, Как вы приблизились к своей оценке оператор ?

Технология все больше и больше опосредует наше общение, но куда мы могли бы идти - это наши отношения не просто с другим человеком, а алгоритм. Работать над этими темами было весело, у партитуры есть камерный ансамбль со струнным квартетом, фортепиано, акустической гитарой, ударной установкой и ударными. Тогда есть целая электронная сторона, каждый электронный инструмент отображается непосредственно на другой акустический инструмент. Мы воссоздали их с нуля с помощью модульного синтезатора. Это создало счет, который был в состоянии выразить эти эмоции в электронном виде.

Учитывая, как эти фильмы так важны для технологии, почему вы включили естественные и классические звуки в оператор ?

Для меня это было о двух сосуществующих мирах, одном виртуальном и одном естественном, и о том, как они сосуществуют в гармонии и конфликте, сражаясь в одном и том же пространстве. Было важно иметь кусочки. Если вы противопоставляете две вещи друг другу, это делает каждую из них более сильной. Электронная музыка звучит более электронно, когда речь идет об акустической музыке. Качество чего-то естественного может звучать еще более естественно, когда вы настраиваете его на что-то очень неестественное.

Какая ваша любимая часть оператор набрать?

Есть несколько красивых сцен озера Мичиган, где персонаж Джо бежит каждый день. Он измеряет свои данные о здоровье, идет к озеру Мичиган и делает снимок. Есть сцена, где они говорили: «Это одна из самых важных частей фильма. Это все, что ты, мудрец. Музыка тоже должна быть простой, в ней не было много жестов. Это была всего пара минут из нескольких жестов, которые были просты в размещении и могли по-настоящему поразить вас. Это было самым захватывающим для меня.

Как вы составляете субъективный опыт в VR по сравнению с фильмом, как оператор ?

Это интересно, потому что никто не понимает, как это сделать. Вы нигде не сможете его изучить, даже проверить другие проекты виртуальной реальности, чтобы увидеть, что они сделали, потому что он по-прежнему недоступен. Есть много, чтобы понять себя. У нас есть собственные гарнитуры Oculus, которые мы использовали для этого. Иногда мы идем на конференции VR, чтобы посмотреть другой контент, но по большей части это продукт, который еще не появился на рынке.

Как насчет видеоигр, над которыми вы работали, а также субъективный технологический опыт?

В некотором смысле это похоже на видеоигры, но опыт другой. Суррогат это не игра, а «интерактивный фильм», который действительно хорошо поработал, выяснив новую территорию виртуальной реальности. Это 12 минут, это сферически, то есть вместо кадра 16x9 вы находитесь в фильме, где бы вы ни смотрели, позади вас, вверх, вниз, вы могли ходить вокруг. Это гибрид CG, снятый сферической камерой, с реальными персонажами. Не аватары.

Когда вы ходите по кругу, часть музыки используется использует все время для поддержки повествования. Этот другой тип расположен в пробелах. Если вы пойдете в это место, вы услышите это, но если нет, вы не услышите. Вам нужно много общаться, когда вы находитесь в фильме, чтобы заставить сюжет работать, чтобы люди не пропускали важные части, но в виртуальной реальности вы не можете контролировать пользователя. Пользователь может бродить где угодно.

Партитура в VR помогает передать эмоциональную дугу, независимо от того, уделяют ли они внимание игре или нет. Вы должны использовать счет, чтобы объединить вещи, потому что у вас нет контроля. Это интересно для меня, потому что внутри персонажа, которого вы внутри, это психологический триллер для этого персонажа в его уме и теле, но во внешнем мире это не так. Люди ходят и разговаривают, а не обычный триллер с действием.

Камеры в фильмах передают повествование и тему, которая усиливает музыку. В VR кажется, что музыка делает всю работу.

Это тоже трудно понять, потому что, когда я сочиняю, я не могу испытать это. Я не могу продемонстрировать это, потому что вы не можете сочинять музыку при включенной гарнитуре. В фильме вы можете посмотреть его, включить музыку и посмотреть снова, а группа людей сядет вместе и расскажет об этом.

VR похож на театр на самом деле. У некоторых людей хорошие места, у некоторых плохие места. Они смотрят со всех сторон. С музыкальной точки зрения, вы знаете, как все будет синхронизироваться. Вам не нужно догадываться, как они будут себя чувствовать на сцене, когда вы над этим работаете. В ВР вы угадываете, воображаете это в своем сознании материалы, на которые ссылаетесь, которые помогают информировать вас о том, как вещи должны выглядеть и чувствовать себя в конце.

Это никогда не закончено. Это просто продолжает меняться. Суррогат Мы только что закончили делать последнее обновление. Тогда мы будем над этим долго работать, основываясь на том, что мы узнаем. Все идет медленнее, потому что вы полагаетесь на программистов, все внутри системы все время ломается. Это так по-другому.

Как вы думаете, сколько времени понадобится композиторам, чтобы найти ритм музыки в VR?

Выяснение того, как писать музыку для VR, займет столько же времени, как и выяснение других элементов. Я думаю, что три-пять лет, пока он не достигнет точки, когда он работает и является частью жизни каждого. В этом году VR выйдет на рынок. Вероятно, потребуются годы, чтобы улучшить прототип и выяснить, как создавать контент, но я вижу, что это происходит примерно в 2020 году, когда это хорошо развитая форма. Фильм тоже занял много времени. С самого начала были отличные фильмы, «Чарли Чаплин» и тому подобное, но для разработки этой технологии потребовалось много времени до ее золотого века. Мы все еще далеки от этого, но это происходит сейчас. Мы увидим это в этом году. Это увлекательно.