Як створювати музику з допомогою жестів

Як музиканти застосовують

контролер Leap Motion

Хагай Давідофф

Чи може одна людина за допомогою двох рук «зіграти» на інструментах за весь оркестр? Використовуючи спеціальну програму, Хагай Давідофф — ізраїльський композитор і аранжувальник, який пише музику для театру і кіно, керує ансамблем з VSTi-інструментів, лише рухаючи руками і пальцями.

DJ SelArom

Електронний музикант і діджей SelArom демонструє, як за допомогою моушен-контролера він витягує комерційний електро-хаусовий звук, не торкаючись до інструментів. Виглядає це теж дуже ефектно. За його словами, контролер Leap Motion не просто заміняє йому миша, але дозволяє робити таке, чого з допомогою миші зробити просто неможливо.

Ехецкель Разів

Інший ізраїльський музикант, який експериментує з новими технологіями, використовував Leap Motion контролер в процесі живої гри на фортепіано. У співпраці з електронним музикантом Danski він зробив тонку настройку, спотворює звуки класичного фортепіано, що дозволило йому зіграти неможливі пасажі прямо в повітрі.

Кіо Фуджімото

Японський музикант, який раніше експериментував зі схрещуванням технології Leap Motion і бітбоксу, виніс управління жестами в музиці на новий рівень. У своєму лайв в Токіо під назвою ∑ (SIGMA) він контролював як аудіо, так і відеосупровід за допомогою електронних сенсорів, приєднаних до його тіла. Вони відстежували його серцебиття, рух м’язів, а він в додаток до всього жестами керував Leap Motion Controller.

Aliceffekt

 

Девін Лю Линвига, більш відомий як Aliceffekt, також активно використовує технологію Leap Motion. Футуристичний музикант записав свій новий альбом Telekinetic завдяки все тому ж компактному USB-пристрою, який розпізнає рухи рук у просторі. Девін пов’язав цю технологію з музичним софтом і активно використовує свій метод на лайвах. Виступи Дэвина нагадують магічні уявлення, під час яких діджей створює музику буквально з повітря.

Как создавать музыку  с помощью жестов. Изображение № 2.

Как создавать музыку  с помощью жестов. Изображение № 3.

Антон Маскелиаде

Знайшовся адепт технології Leap Motion і в Росії. Антон Маскелиаде, який нещодавно представив новий кліп і готується випустити свій перший повноцінний альбом цієї весни (стежити за датою релізу можна на SoundCloud і Bandcamp), пише і виконує емоційну «ефемерну» музику, або, як він її називає, «музику перших дублів». У всіх своїх треках він використовує «сирий» матеріал і найперші, недбалі тейки. 90 % всіх використовуваних звуків Антон витягує з підручного, а під руку йому попадаються і гітари, і кватирки, і інші не самі музичні предмети. Його концепція полягає в тому, щоб привести цю живу недбалість до цілісності і удобоваримому для слухачів звучанням.

«Я завжди цікавився різними девайсами і тим, що відбувається з технологіями сьогодні. Попутно я весь час думаю про те, як зробити мої живі виступи більш яскравими, більш цікавими для глядачів, ну і більш приємними для мене самого. Взагалі живі виступи для мене — найголовніше. Якось випадково мені потрапила на очі технологія Leap Motion, і в першу чергу я був здивований низькою ціною. Контролер обійшовся мені в 5 тисяч рублів. Почав стежити за ним я ще влітку: у серпні він вийшов в Штатах, а вже восени я тримав його в руці і вже встиг випробувати в своїх перших концертах. Це відео, власне, одна з перших проб цього пристрою.

Використовуючи його на сцені, я створюю нові звуки шляхом осциляції, тригерів, якихось ефектів, обробки, модуляції і всього чого завгодно. Але, так чи інакше, пристрій перетворює ці одиниці і нулі в якесь цікаве звучання незрозумілими рухами моїх рук. Поки я не використовую Leap Motion при записі. Може бути, у моїх майбутніх треках, якщо мені потрібно буде прописати якусь доріжку автоматизації ефектів, я зможу ним скористатися».

Про свій сет-апі

«Музику я запускаю з Ableton, яким я керую з допомогою MIDI-контролер AKAI MPD32 і, відповідно, Leap Motion. В тому числі я використовую семплер і процесор ефектів Korg KP3 Plus, в нього ж співаю, а також роблю з ним всякі штуки, які пов’язані з семплінгом і обробкою. Зараз я готую новий концепт лайва: на натискання кнопочок і рухи рук буде реагувати не тільки музика, але й відео, що проектуватиметься на мене або екран».

Про додатках для Leap Motion

«Я використовую додаток Geco MIDI, яке розраховане для конвертації рухів і жестів в MIDI-сигнал. Цим сигналам в Ableton можна задавати певні параметри зміни і створення звуку на конкретні рухи рук: вгору/вниз, вліво/вправо, поворот кисті, зміщення кута нахилу».

Как создавать музыку  с помощью жестов. Изображение № 4.

 

Інші цікаві програми

для контролера Leap Motion

Как создавать музыку  с помощью жестов. Изображение № 5.

Acoustica AirMIDI

Призначений для музикантів, щоб дозволити їм управляти комп’ютером за MIDI з допомогою жестів.

Как создавать музыку  с помощью жестов. Изображение № 6.

Handwavy AirBeats

Дозволяє грати на барабанах в повітрі з включеними наборами пресетів для різних музичних стилів: драм-н-бейс, хіп-хоп, дабстеп, техно та ін.

Как создавать музыку  с помощью жестов. Изображение № 7.

Just Add Music Swoosh

Додаток для Mac () дозволяє контролювати треки

з плейлистів вашої бібліотеки iTunes і дає відчути себе діджеєм майбутнього.

Как создавать музыку  с помощью жестов. Изображение № 8.

Olympia Noise Co. Chordion Conductor

Нащадок iPad-версії Chordio Conductor для Mac. Програма представляє цілу низку кольорових вертикальних смуг на екрані, на яких можна грати, як на клавіатурі, прямо в повітрі.

Как создавать музыку  с помощью жестов. Изображение № 9.

SnibbeStudio OscilloScoop

Просте і ефектне додаток для Mac, яке дозволяє рухами рук змінювати форму хвиль і витягувати звуки.

 

 

Про недоліки Leap Motion

«На даному етапі досі виникають проблеми з-за недостатньої якості розпізнавання жестів. Але, я думаю, що через пару років пристрій зможе уловлювати будь-який рух краще. Зараз іноді виникають якісь збої, якісь глюки. Спочатку я хотів покласти на Leap Motion більш «важкі» ефекти, але потім зрозумів, що якщо він спрацює як-то не так, то пісня буде просто знищена. Також є невелика затримка. Якщо вона була б трохи повільніше, то користуватися контролером було б складно. Але всього лише нюанси, досить тонкі і несерйозні. Пристрій круте, враховуючи його вартість. На мою думку, в 2014 році воно буде дуже популярним у багатьох сферах. Вже є купа графічних додатків, ігор і т. д. загалом, це цілий світ».

Про аналоги Leap Motion

«Зараз повинна була з’явитися штука, яка називається Hot Hand USB. Це колечко, яке одягається на палець, і в залежності від розташування руки в просторі передає MIDI-повідомлення на USB-приймач. Його головний плюс в тому, що воно бездротове. Ти не прив’язаний до столу, ти не прив’язаний до свого сет-апу — тобто ти можеш ходити і робити все, що хочеш. Інше питання — яка у нього затримка, але в будь-якому випадку в моїх планах її придбати і випробувати в своєму лайв».

  

  1. 5
  2. 4
  3. 3
  4. 2
  5. 1
(0 голосов, в среднем: 0 из 5)

Залишити відповідь

Ваша e-mail адреса не оприлюднюватиметься. Обов’язкові поля позначені *