Вся музыка в этом видео была записана в виде свободной импровизации, за один дубль. Формы, которые вы видите, являются точным отображением гармонических соотношений аккордов, которые Дэн наигрывал левой рукой. Компьютер генерировал их в режиме реального времени в ответ на музыку. Дэн выбрал для настройки самых основных аккордов простую интонацию, а не равный темп; вот почему вы иногда видите соотношение целых чисел в левом верхнем углу экрана и почему эти аккорды создают менее плотные визуальные формы.
Эта разница в гамме отражается в звуках, генерируемых компьютером. В некоторых моментах Дэн намеренно отодвигал гармонические соотношения друг от друга, создавая постепенный слуховой и визуальный диссонанс.
Natural Machines - это проект, в котором автор исследует пересечение в музыке естественных и механических процессов. Дэн импровизирует за фортепиано, и программы, которые он написал на своем компьютере, взаимодействуют с ним в режиме реального времени, как в музыкальном, так и в визуальном плане.
Автор использует дисклавир Yamaha. Это акустическое пианино с дополнительными возможностями: когда он играет, оно отправляет данные на компьютер, а когда компьютер отправляет ему данные, оно воспроизводит их, перемещая клавиши самостоятельно.
Звук, который компьютер издает через пианино, точно такой же, как и тот, что создаёт автор. В Natural Machines Дэн не сочинял пьесу, а решал, как она будет звучать. Он программировал простые правила, которым компьютер должен следовать, реагируя на то, что он играл. Поскольку он импровизировал, ему приходилось всегда слушать, что играет компьютер, и реагировать на это. Так что правила в конечном итоге затрагивают и меня тоже.
Визуализации, которые автор сделал, призваны раскрыть музыкальную структуру каждого произведения. Они создаются в режиме реального времени по мере того, как он играл. Все, что отображается на экране, является прямым отражением некоторых аспектов музыки: высоты тона, динамики, ритма, гармонии. Дэн запрограммировал музыкальные алгоритмы в SuperCollider, а визуальные эффекты - в Processing.
Полный альбом на YouTube: