Instalacja bioart: od podpięcia roślin do syntezy dźwięku

Działa dlatego, że jej tkanki zmieniają przewodnictwo elektryczne, a układ elektroniczny potrafi te niewielkie różnice zmierzyć, przeliczyć i zamienić na komunikaty sterujące syntezatorem. Cała warstwa artystyczna zaczyna się dopiero później — w chwili, gdy twórca zdecyduje, jaki dźwięk przypisać zmianie sygnału i jak pozwolić mu rozwijać się w czasie.

To rozróżnienie ma znaczenie praktyczne. Dzięki niemu projekt nie opiera się na micie o „mowie roślin”, tylko na czytelnym połączeniu biologii, elektroniki i kompozycji. Można zbudować muzykę z roślin, ale nie należy udawać, że jest ona bezpośrednim zapisem intencji albo emocji konkretnego organizmu.

Mechanika biosonifikacji: co właściwie mierzą czujniki

Najprostszy układ biosonifikacyjny wykorzystuje dwie elektrody przymocowane do powierzchni liścia. Elektrody mogą mieć postać niewielkich klipsów albo żelowych podkładek podobnych do tych stosowanych w elektrostymulacji. Układ przepuszcza przez obwód bardzo słaby sygnał pomiarowy i obserwuje, jak zmienia się przewodnictwo elektryczne na powierzchni tkanki.

Liść nie jest przewodem o stałych parametrach. Wilgotność, budowa komórkowa, ruch wody i warunki otoczenia wpływają na opór oraz przewodnictwo. Elektronika rejestruje więc mikrozmiany, a nie gotowe nuty. Nie ma tu naturalnej skali dźwiękowej ukrytej w roślinie. Jest surowy sygnał, który dopiero trzeba zinterpretować.

W praktyce proces wygląda następująco:

1. Dwie elektrody zostają umieszczone na liściu lub innej części rośliny.

2. Układ pomiarowy wykrywa zmiany przewodnictwa elektrycznego.

3. Mikrokontroler filtruje i skaluje odczyt.

4. Zmiana zostaje zamieniona na komunikat muzyczny, najczęściej MIDI Note albo Control Change.

5. Syntezator sprzętowy lub program w komputerze reaguje na ten komunikat dźwiękiem.

W niektórych rozwiązaniach stosuje się układ 555 pracujący jako astabilny multiwibrator. Jego zadaniem jest wytworzenie sygnału, którego parametry mogą reagować na zmiany w obwodzie rośliny. Dalej sygnał trafia do mikrokontrolera, na przykład ATmega328, który może przeliczyć go na dane w standardzie MIDI.

Nie trzeba jednak budować całego toru od podstaw, aby zrozumieć jego zasadę. Urządzenia rozwijane wokół projektu MIDI Sprout, a później także rozwiązania komercyjne, takie jak PlantWave, pokazują tę samą logikę w bardziej gotowej formie: roślina dostarcza zmiennych danych, a elektronika przekłada je na sterowanie dźwiękiem.

Roślina nie wysyła melodii. Dostarcza zmienny sygnał, a melodię projektuje człowiek.

Co oznacza „impuls” w instalacji bioart

W opisach instalacji często pojawia się język impulsów, reakcji i komunikacji. Jest użyteczny, o ile nie traktuje się go dosłownie. Pojedynczy skok przewodnictwa nie jest wiadomością o określonej treści. Nie wiadomo też, czy odpowiada jednej konkretnej reakcji fizjologicznej. W przypadku konkretnej rośliny trudno byłoby przypisać każdą zmianę do jednego procesu biologicznego bez specjalistycznych badań.

Dlatego biosonifikacja jest przede wszystkim metodą artystycznego mapowania danych. Twórca wybiera, które zakresy odczytu będą uruchamiały nuty, a które zmienią barwę, głośność, długość wybrzmienia albo przestrzenne położenie dźwięku. Ten wybór może być subtelny i niemal niezauważalny albo bardzo ekspresyjny. W obu przypadkach dźwięk jest interpretacją pomiaru, nie jego literalnym tłumaczeniem.

Hardware dla bioartu: gotowe urządzenie czy własny układ

Projekt można zacząć na kilku poziomach trudności. Najszybciej uruchamia się gotowe urządzenie z elektrodami i wyjściem MIDI. Więcej pracy wymaga zbudowanie własnego obwodu z układem 555, mikrokontrolerem i odpowiednim oprogramowaniem. Trzecia droga to prototyp oparty na popularnej płytce mikrokontrolerowej, na przykład zgodnej z Arduino, oraz własnym modułem pomiarowym.

Każda z tych dróg prowadzi do innego rodzaju pracy. Gotowy kontroler pozwala skupić się na kompozycji, scenografii i interakcji z publicznością. Własny układ daje większą kontrolę nad filtrowaniem danych, czułością elektrod i sposobem wysyłania komunikatów, ale wymaga wiedzy z zakresu elektroniki.

Wczesne konstrukcje tego typu były często budowane jako projekty otwarte. MIDI Sprout, kojarzony z działalnością Sama Cusumano i Electricity for Progress, spopularyzował sposób myślenia o roślinie jako źródle danych sterujących. Z czasem pojawiły się udoskonalone klipsy elektrodowe i rozwiązania wykorzystujące nowsze płytki, między innymi Adafruit Feather.

Nie warto jednak zaczynać od zakupu wszystkich możliwych modułów. Najpierw trzeba określić, co ma być osią instalacji:

• jeśli najważniejszy jest dźwięk, wystarczy stabilny kontroler i dobrze zaprojektowane mapowanie MIDI;
• jeśli instalacja ma reagować na ruch publiczności, potrzebne będą dodatkowe czujniki, niezależne od pomiaru rośliny;
• jeśli projekt ma być edukacyjny, warto pokazać również elektrody, przewody i wizualizację danych;
• jeśli instalacja ma działać przez wiele godzin, większym problemem od samej syntezy będzie stabilność kontaktu i zasilania;
• jeśli kilka roślin ma sterować różnymi warstwami utworu, trzeba zaplanować osobne kanały, zakresy wartości i sposób ograniczania wzajemnych zakłóceń.

MIDI jako praktyczny punkt styku

Standard MIDI jest w tym układzie ważniejszy niż konkretna marka urządzenia. To on pozwala oddzielić pomiar biologiczny od generowania dźwięku. Kontroler nie musi sam zawierać syntezatora. Może wysłać komunikat do programu typu DAW, instrumentu sprzętowego albo systemu przygotowanego specjalnie dla instalacji.

Najczęściej wykorzystywane są dwa rodzaje komunikatów:

• Note On i Note Off — uruchamiają i kończą nuty;
• Control Change, czyli komunikaty CC — zmieniają parametry takie jak filtr, głośność, panorama, pogłos albo częstotliwość modulacji.

To daje znacznie większe możliwości niż proste przypisanie jednego impulsu do jednej nuty. Zmiana przewodnictwa może na przykład powoli otwierać filtr, podczas gdy osobny próg uruchamia krótką sekwencję dźwięków. Dzięki temu instalacja nie brzmi jak przypadkowy generator pojedynczych tonów.

Warto też rozdzielić trzy pojęcia, które bywają mieszane:

1. Pomiar — surowa zmiana przewodnictwa.

2. Dane sterujące — przefiltrowana i przeskalowana wartość wysyłana przez kontroler.

3. Dźwięk — rezultat działania syntezatora lub programu muzycznego.

Jeżeli instalacja brzmi chaotycznie, przyczyna nie musi leżeć w roślinie. Problemem może być zbyt szeroki zakres mapowania, brak wygładzenia sygnału albo przypisanie każdej drobnej fluktuacji do nowej nuty.

Przygotowanie rośliny i elektrod

Kontakt z liściem wygląda niepozornie, ale właśnie tutaj wiele prototypów traci powtarzalność. Elektroda może być poprawnie podłączona, a mimo to sygnał będzie niestabilny, jeśli powierzchnia liścia jest pokryta warstwą utrudniającą kontakt.

W przypadku roślin kupowanych w sklepach ogrodniczych na liściach mogą znajdować się pozostałości środków ochronnych, w tym powłok grzybobójczych. Przed zamocowaniem elektrod zaleca się delikatne umycie liścia wodą z mydłem i pozostawienie go do wyschnięcia. Nie chodzi o intensywne szorowanie. Tkanka liścia łatwo ulega uszkodzeniu, a mechaniczne podrażnienie może zmienić warunki pomiaru.

Sama roślina nie powinna być traktowana jak element jednorazowy. Klips musi trzymać się stabilnie, ale nie może zaciskać liścia tak mocno, aby go odkształcać. Przy długiej ekspozycji znaczenie ma również prowadzenie przewodów. Ciężki kabel zwisający z elektrody będzie poruszał liściem i wprowadzał zmiany, które nie mają związku z działaniem układu biologicznego.

Przed uruchomieniem instalacji dobrze jest sprawdzić kilka rzeczy:

• czy elektrody mają stabilny, ale delikatny kontakt z powierzchnią;
• czy przewody nie ciągną liści przy każdym ruchu widza;
• czy roślina stoi w miejscu bez gwałtownych zmian temperatury;
• czy źródło światła nie nagrzewa bezpośrednio miejsca pomiaru;
• czy zasilanie kontrolera i syntezatora jest odseparowane od przypadkowych zakłóceń;
• czy po kilku minutach od podłączenia sygnał nie odpływa całkowicie poza użyteczny zakres.

Kalibracja nie jest jednorazowym ustawieniem

Każda roślina ma własne właściwości. Różnice między liśćmi tego samego egzemplarza potrafią być na tyle duże, że ustawienia przygotowane dla jednego miejsca nie sprawdzą się w innym. Dlatego kalibracja powinna odbywać się już po ustawieniu rośliny w docelowej przestrzeni.

Najpierw warto obserwować sam sygnał bez dźwięku. Jeśli odczyt od razu wywołuje serię nut, trudno rozpoznać, czy instalacja reaguje na dane, czy na przypadkowy szum. Dopiero po ustaleniu zakresu spoczynkowego można przypisać mu konkretne funkcje muzyczne.

Przydatne jest również wprowadzenie strefy niewrażliwości. Niewielkie zmiany mogą być ignorowane, aby dźwięk nie reagował na każdą minimalną fluktuację. Dopiero przekroczenie ustalonego progu uruchamia zmianę. W instalacji publicznej ma to duże znaczenie: ciągłe trzaski i przypadkowe nuty szybko sprawiają wrażenie awarii, nawet jeśli elektronika działa poprawnie.

Z drugiej strony zbyt mocne wygładzanie zabija charakter systemu. Jeśli wszystkie dane zostaną uśrednione i opóźnione, roślina przestanie być źródłem zmienności, a instalacja zacznie przypominać zwykły, zaprogramowany utwór. Zadaniem projektanta jest znalezienie zakresu, w którym sygnał pozostaje czytelny, ale nie zostaje całkowicie uwięziony w filtrach.

Mapowanie danych na dźwięk

Najłatwiejszy do zbudowania system przypisuje niskie wartości do niskich dźwięków, a wysokie do wysokich. Taki układ można uruchomić szybko, ale jego możliwości są ograniczone. Muzyka z roślin instalacja artystyczna wymaga zwykle bardziej przemyślanej relacji między pomiarem a słyszalnym rezultatem.

Można mapować dane na kilka sposobów.

Skala zamiast pełnego zakresu chromatycznego

Jeżeli każda wartość steruje dowolną nutą, nawet niewielka zmiana może powodować fałszywe wysokości i wrażenie przypadkowości. Bezpieczniej jest ograniczyć materiał do wybranej skali, na przykład pentatonicznej albo modalnej. Wtedy roślina nie wybiera dowolnego dźwięku, tylko porusza się w ramach wcześniej zdefiniowanego języka muzycznego.

To nie jest oszustwo wobec danych. Każda decyzja o mapowaniu jest artystyczną interpretacją. Odczyt nadal pochodzi z układu pomiarowego, ale jego przełożenie na słyszalną formę jest kontrolowane przez twórcę.

Parametry ciągłe

Nie każda zmiana musi uruchamiać nową nutę. W wielu instalacjach ciekawszy efekt daje przypisanie danych do parametrów ciągłych:

• częstotliwości odcięcia filtra;
• poziomu pogłosu;
• czasu opóźnienia;
• głośności warstwy;
• położenia dźwięku w panoramie;
• szybkości sekwencji;
• stopnia zniekształcenia;
• długości wybrzmienia.

W takim wariancie roślina nie „wybiera nuty”, ale stopniowo zmienia zachowanie całego instrumentu. Dźwięk może być spokojny i niemal nieruchomy, a następnie powoli gęstnieć pod wpływem zmian sygnału.

Progi i zdarzenia

Wartość ciągła może zostać podzielona na kilka progów. Przekroczenie pierwszego uruchamia pojedynczy ton, drugiego dodaje szum, a trzeciego zmienia rytm lub przełącza scenę dźwiękową. Taka metoda dobrze sprawdza się w instalacjach, w których publiczność ma obserwować wyraźne przejścia.

Trzeba jednak pilnować, aby system nie przełączał się wielokrotnie przy wartości utrzymującej się blisko progu. Pomaga tu histereza: próg włączenia i próg wyłączenia nie są identyczne. Dzięki temu drobne wahania nie powodują nerwowego przeskakiwania między stanami.

Opóźnienie i pamięć

Surowy sygnał rośliny może zmieniać się szybko, ale utwór nie musi reagować natychmiast. Krótkie opóźnienie pozwala widzowi usłyszeć związek między zmianą na ekranie, ruchem liścia i dźwiękiem. Pamięć kilku ostatnich wartości umożliwia z kolei budowanie fraz, narastania i wybrzmień.

To moment, w którym generowanie dźwięku z roślin za pomocą Arduino lub innego mikrokontrolera staje się projektowaniem instrumentu, a nie tylko odczytem czujnika. Kod decyduje, czy instalacja będzie reagowała nerwowo, czy będzie miała własny rytm oddechu.

Najlepsza biosonifikacja nie udaje dokumentu z życia rośliny. Pokazuje, jak dane biologiczne przechodzą przez decyzje artysty.

Od prototypu do instalacji dla publiczności

Prototyp może działać na biurku z jednym liściem, krótkim przewodem i słuchawkami. Instalacja wystawiennicza ma inne wymagania. Musi być czytelna dla osoby, która pojawia się przy niej na kilkadziesiąt sekund, a jednocześnie wystarczająco stabilna, by działać przez wiele godzin.

Warto rozdzielić warstwy projektu:

1. Warstwa biologiczna — roślina, liść, wilgotność i warunki otoczenia.

2. Warstwa pomiarowa — elektrody, przewody oraz układ odpowiedzialny za odczyt.

3. Warstwa przetwarzania — mikrokontroler, filtracja, progi i skalowanie.

4. Warstwa muzyczna — komunikaty MIDI, syntezator, efekty i miks.

5. Warstwa ekspozycyjna — światło, opis, ekran z wizualizacją danych i sposób kontaktu widza z obiektem.

Awaria w jednej warstwie może wyglądać jak problem w innej. Jeśli z głośników nie wydobywa się dźwięk, przyczyną może być brak komunikatu MIDI, zły kanał, nieuruchomiony instrument programowy albo nieprawidłowe mapowanie. Jeśli dźwięk jest nieustannie aktywny, źródłem może być zarówno zakłócenie elektryczne, jak i zbyt niski próg wyzwalania.

Dlatego diagnostykę najlepiej prowadzić etapami. Najpierw trzeba sprawdzić, czy kontroler widzi zmianę przewodnictwa. Następnie — czy wysyła komunikaty. Dopiero na końcu ocenia się brzmienie. Ekran pokazujący prosty wykres wartości może być w tym przypadku nie tylko dekoracją, ale narzędziem objaśniającym działanie instalacji.

Rola widza

Interakcja nie musi polegać na dotykaniu rośliny. W wielu przypadkach dotyk publiczności utrudnia pomiar, narusza stabilność elektrod i przyspiesza zużycie liścia. Lepszym rozwiązaniem może być zaprojektowanie przestrzeni, w której widz wpływa na warunki wokół obiektu: zmienia natężenie światła, uruchamia dodatkową warstwę dźwiękową albo obserwuje, jak parametry instalacji ewoluują bez bezpośredniej ingerencji.

Jeśli dotyk ma być częścią pracy, trzeba jasno określić jego zakres. Elektrody nie powinny być przypadkowo odrywane, a przewody nie mogą tworzyć pułapki dla przechodzących osób. Wystawa wymaga też regularnego sprawdzania rośliny, ponieważ długotrwałe utrzymywanie klipsów w jednym miejscu może wpływać na jej kondycję.

Jak opowiadać o „muzyce roślin” bez tworzenia mitu

Język opisu jest częścią dzieła. Hasło o roślinach komponujących muzykę przyciąga uwagę, ale technicznie jest zbyt mocne. Roślina nie świadomie komponuje utworu, a dźwięk nie jest bezpośrednią mową rośliny. To efekt mapowania zmian oporu i przewodnictwa na parametry syntezatora.

Nie odbiera to pracy artystycznej znaczenia. Przeciwnie — pozwala precyzyjniej opisać, gdzie znajduje się twórczy gest. Jest nim wybór organizmu, układu pomiarowego, zakresu danych, algorytmu filtracji, skali muzycznej i sposobu prezentacji. Bioart nie musi udowadniać, że roślina jest ukrytym muzykiem. Wystarczy, że pokaże, jak technologia zmienia sposób słuchania procesów, których na co dzień nie odbieramy bezpośrednio.

Warto więc mówić o:

• sonifikacji danych przewodnictwa elektrycznego;
• artystycznej interpretacji zmian biologicznych;
• układzie roślina–czujnik–mikrokontroler–syntezator;
• generowaniu komunikatów MIDI na podstawie pomiaru;
• instalacji reagującej na zmienność organizmu i otoczenia.

Lepiej unikać stwierdzeń, że konkretny ton oznacza radość, stres albo zamiar rośliny. Takie interpretacje mogą być elementem fikcji artystycznej, ale nie powinny być przedstawiane jako ustalony fakt biologiczny.

Od czego zacząć własny projekt bioart

Najrozsądniejszy pierwszy projekt nie powinien próbować od razu obsługiwać całej szklarni, kilku syntezatorów i wielokanałowej projekcji. Jeden stabilny pomiar, jedna roślina i jedna dobrze zaprojektowana relacja dźwiękowa dają więcej informacji niż rozbudowana instalacja, której nie da się skalibrować.

Dobry początek obejmuje:

• pojedynczy kontroler biosonifikacyjny albo prosty układ z mikrokontrolerem;
• dwie elektrody o stabilnym mocowaniu;
• roślinę o liściach pozwalających na powtarzalny kontakt;
• połączenie MIDI z jednym instrumentem;
• zapis surowych danych przed rozpoczęciem pracy nad brzmieniem;
• prostą skalę lub ograniczony zestaw parametrów;
• możliwość wyciszenia dźwięku bez odłączania pomiaru.

Dopiero po sprawdzeniu podstaw warto dodawać kolejne rośliny, wizualizacje i interakcje. Przy wielu źródłach trzeba zdecydować, czy każde będzie sterować osobną warstwą, czy wszystkie dane zostaną połączone w jeden wspólny model. Pierwsze rozwiązanie daje większą czytelność, drugie może prowadzić do bardziej złożonego, mniej przewidywalnego pejzażu.

Instalacja bioart działa najlepiej wtedy, gdy jej techniczna konstrukcja nie znika całkowicie pod efektownym opisem. Widz powinien móc zobaczyć roślinę, elektrody, przewody i rezultat dźwiękowy jako elementy jednego układu. Nie chodzi o to, by każdy odbiorca rozumiał działanie układu 555 albo strukturę komunikatu Control Change. Chodzi o uczciwą relację między tym, co mierzone, tym, co przetwarzane, a tym, co słyszalne.

Biosonifikacja nie jest tłumaczem z języka roślin na język muzyki. Jest narzędziem, które pozwala uczynić zmiany biologiczne słyszalnymi. Najciekawsza część projektu zaczyna się dopiero wtedy, gdy twórca przestaje obiecywać odbiorcy tajemniczy głos natury i pokazuje cały łańcuch interpretacji: od przewodnictwa liścia, przez elektrody i mikrokontroler, aż po dźwięk, który powstaje w instalacji.