Instalație Sonificare partituri grafice

DESCRIERE INSTALAȚIE

Graphic Score - Flyer with QR codes links to sonification videos
Graphic Score – Flyer with QR codes links to sonification videos

if (find == color) makesound

Installation exposed @ IOMO Galery
Installation exposed @ IOMO Galery

Instalație de sonificare partituri grafice, aplicație de tracking forme și culori și traducerea lor în parametrii de sunet analog electronic. Sistem complet de studiu al sinesteziei formelor și culori cu sunetul.

Display vizual Instalație

Construit în jurul unui mini computer linux Raspberry PI3 (1) în C++ folosind platforma openFrameworks, aplicația scanează partiturile grafice, le filtrează pe culori și mai apoi are loc sonificarea formelor grafice.

mini computer linux Raspberry PI3
mini computer linux Raspberry PI3

Instalația prezentată în această expoziție poate analiza compoziții grafice în paletă de până la 16 culori, și pentru 4 instrumente electronice simultan, sonificarea realizându-se cu un synthesizer analogic Elektron Analogue 4 MK2 (2) amplifcat prin două monitoare de studio active (3). Vizualizare procesului de color tracking și decodificare se poate face pe un monitor sau proiector (4).

Sonificare partituri grafice - Instalație
Componente Instalație Sonificare / Prototype

CUM FUNCȚIONEAZĂ

Conceptul de sonificare merge pe ideea unei benzi de hartie, rolă, care rulează într-un sens, iar citirea grafică se face într-o zonă îngustă ghidată de CURENT PLAY CURSOR.

Sonificare partituri grafice - Play buffer & Colors tracking
Play buffer & Colors tracking

Partiturile grafice sunt încărcate pe rând în sistem, mini computer RPI3 (Raspberry PI3B+), și redate în timp real. Partiturile grafice sunt compuse pentru 4 instrumente electronice distribuite pe 4 piste TRACK 01-04.

Aplicația filtrează formele după cele 16 culori din banda cromatică plasată la începutul partiturii grafice. Fiecăre-i piste audio îi sunt rezervate câte 4 culori, 4 x 4 = 16 culori per partitură.

Sonificare partituri grafice - Sound Maping
Sound Mapping

Decodificarea formelor, shapes, este translatată din dimensiuni în pixeli în semnale MIDI (Musical Instrument Digital Interface).

Procedeul de corespondență culori / parametrii sunet se numește Sound Mapping. Din fiecare culoare se pot obține mai multe valori care corespund parametrilor de sunet sintetic (Note Trigger, Velocity, Pitch, Panning, Filter, LFO, Delay și Reverb).

IOMO Gallery - Expunere Instalație Sonificare partituri grafice

Instalația, sub numele if (find == color) makesound , este expusă la galeria IOMO, în perioada 08.05-30.05.2021
Adresa: Băiculești 29, 013193, Bucharest

IOMO Contemporary Art Gallery

Mai multe detalii despre Partituri Grafice / Graphic Score

Flyer with QR codes links to sonification videos
Flyer with QR codes links to sonification videos
Graphic Score Sonification - Flyers details
Graphic Score Sonification – Flyers details
Graphic Score Sonification - Flyers details QR code
Graphic Score Sonification – Flyers details QR code