Ζωντανό Μουσικό performance μπάσου, ηλεκτρικής κιθάρας και MIDI με συνδυασμό Arduino και Resolume

Aνάλυση Κεντρικής Ιδέας

Το project θα συνδυάσει performance από bass και electric guitar από έναν μουσικό καλλιτέχνη ο οποίος θα συνεργαστεί μαζί μου για την υλοποίηση του project. Στο μουσικό κομμάτι θα κάνω το perform των drums( kick ,hihat και snare ) μέσω midi keyboard. Τα loops θα γίνονται live processing στο Ableton live μέσω plugins, από το midi μέσω auxiliaries και θα επηρεάζεται κάποια συνθήκη από έναν αισθητήρα απόστασης μέσω του Arduino. Επιπλέον θα υπάρχει και visual κομμάτι μέσω του Resolume το οποίο θα φαίνεται μέσω μιας οθόνης.

Θέματα Μελέτης

- Performance Technologies: Ηλεκτρικό μπάσο, ηλεκτρική κιθάρα , Midi Keyboard

Αυτοσχεδιασμός όλων των παραπάνω οργάνων

- Advanced Audio Technologies: Αναλογικός & Ψηφιακός Ήχος, Ζωντανή Επεξεργασία Σήματος

Ο αναλογικός ήχος των δύο οργάνων θα υποστούν επεξεργασία και ο ψηφιακός ήχος του project θα παράγεται από το midi όπου και θα είναι τα drums.

- Interactive Audio & Visual Tools: Ableton Live, Max, Arduino, Resolume

- Creative & Art Direction and Managment : Πειραµατισµός, Καινοτοµίες, Σχεδιασµός, Αξιολόγηση, Εξέλιξη, Καθοδήγηση

- Composition & Design: Ηλεκτρονική Σύνθεση, Ηχητικός Σχεδιασµός, Γραµµικές & Μη Γραµµικές Εφαρµογές

- Human-Computer Interaction - Interdisciplinary Collaboration: Διεπιστηµονικές Συνεργασίες

Μέσο του αισθητήρα απόστασης θα επηρεάζεται το κομμάτι

- Events Production: Ήχος-Εικόνα

-Φωτισμός, Δημιουργική Διαδικασία - Aesthetics: Τρόποι Σκέψης, Πειραματισμοί, Στρατηγικές

Η εικόνα του resolume θα φαίνεται από μια οθόνη.

Ανάλυση Εξοπλισμού

· Κάρτα ήχου με επαρκείς εισόδους και εξόδους( 2ins 2outs )

· 2 καλώδια TS jack (για το PA)

· 1 καλώδιo Male TS to Dual RCA Male (για τα όργανα)

· Laptop (με Ableton , Resolume, OBS , ΜΑΧ MSP)

· 2 Ηχεία

· Οθόνη

· Arduino + Sensor

· Midi Keyboard

· Bass

· Electric Guitar

· 2 Κάμερες

Στόχοι – Βήματα

Κατάληξη μουσικού κομματιού

Συναντήθηκα με τον μουσικό και συμφωνήσαμε να κάνουμε ένα κομμάτι με ηλεκτρική κιθάρα, ηλεκτρικό μπάσο και MIDI keyboard. Ηχογραφήσαμε ένα demo από loops των οργάνων για να βρούμε το ηχόχρωμα και το ύφος του κομματιού. Επίσης έφτιαξα ένα freeze reverb που δημιουργεί ένα soundscape στο υπόβαθρο, με triggering μίας νότας της κιθάρας. Ένα επιπλέον ενδιαφέρον στοιχείο που προσθέσαμε ήταν ένα Shimer reverb στην μία λούπα της κιθάρας.

Αφότου είχα στην κατοχή μου το demo, μου επέτρεψε να δημιουργήσω ένα drum loop το οποίο είχε kick, hi-hat και αντί για snare έβαλα δύο ασυνήθιστούς ήχους με panning δεξιά και αριστερά. Ως αποτέλεσμα το κομμάτι είχε φτάσει σε μία θεμελιώδεις μορφή που μπορούσα να εντοπίσω τις υπόλοιπες ανάγκες του κομματιού.

Δημιουργία Ableton Live Session

Γνωρίζοντας τον αριθμό των tracks, οργάνωσα ένα session στο session view που θα είναι βολικό και εύχρηστο κατά την διάρκεια του live perform. Συγκεκριμένα δημιούργησα ένα drum rack,δύο group tracks για το μπάσο και την κιθάρα και ένα track που θα γίνει record to freeze reverb. Επιπροσθέτως έφτιαξα και 4 κανάλια για τα μέρη των drums όπου θα επηρέαζαν κάποιες παραμέτρους του Resolume. Συγκεκριμένα είχαν midi from Drum Rack, Midi to loopmidi port σε διαφορετικά κανάλια και monitor in.

A screenshot of a computer

AI-generated content may be incorrect.

Στην συνέχεια έκανα τον mix των tracks και έκανα midi map στο midi keyboard στα drum pads και στα auxiliaries για να επιτευχθεί το live processing.

A screenshot of a computer

AI-generated content may be incorrect.

11/3/2025

Πρόχειρο Session για το perform:

16/3/2025

Δημιούργησα όλα τα tracks πριν συναντήσω τον μουσικό ώστε να ήμαστε όσο πιο γρήγορα έτοιμη να ηχογραφήσουμε . Αφού έγινε η demo ηχογράφηση, σε όλα τα tracks έκανα mix για να δημιούργηθει ο χαρακτήρας του κομματιού. Επιπλέον έκανα το midi map σε ένα midi keyboard τα drums και τα ποντεσιόμετρα της κιθάρας.

Οργάνωση Resolume

To Resolume μου επέτρεψε να δημιουργήσω το visual κομμάτι της εργασίας, αποτυπώνοντας την αισθητική του κομματιού σε εικόνα. Το θέμα του visual είναι το ‘διάστημα’, συγκεκριμένα είχα πάρει ένα βίντεο loop και είχα πρόσθεση ένα Glitch εφέ που έκανε trigger με το hi-hat. Επιπλέον είχα βάλει και 3 εικόνες με tiger style piano όπου κάνανε trigger με το kick και τους 2 ήχους που είχα αντί του snare. Για την επίτευξη των triggers, έκανα midi map με τις νότες από το Ableton Live χρησιμοποιώντας το loopmidi. Η αναπαραγωγή των visuals στο live performance, γινόταν μέσο μίας οθόνης τοποθετημένη ανάμεσα σε εμένα και το μουσικό.

A screenshot of a computer

AI-generated content may be incorrect.

22/3/2025

Πρóσθεσα στο column του resolume ένα βίντεο που παίζει συνέχεια και 3 εικόνες με triger style piano. Στο project του ableton έφτιαξα 4 κανάλια για να στείλω τα μέρη των drums στο relolume μέσο loopmidi. Στο βίντεο έβαλα ένα φίλτρο με midi map στο opacity με το hihat και στις εικόνες έκανα midi map για το kick και τους 2 ήχους που έβαλα αντί για κάποιο snare. Ουσιαστικά οι εικόνας και το εφέ του βίντεο, κάνανε triger κάθε φορά που έπαιζα τα drums.

Οργάνωση Arduino

Χρησιμοποίησα έναν αισθητήρα απόστασης μέσω του Arduino UNO ώστε να επηρεάζω το fader του return track του freeze reverb. Για την υλοποιήσει του ξεκίνησα γράφοντας τον κώδικα για τον αισθητήρα στο Arduino IDE app. Σιγουρεύτηκα ότι δουλεύει και ότι δίνει σωστές τιμές τρέχοντας τον κώδικα. Στην συνέχεια δημιούργησα το MAX MSP patch ώστε να μεταφέρω την πληροφορία (τα αποτελέσματα δηλαδή του αισθητήρα) του Arduino στο loop Midi port για να πάει μέσω αυτού στο Ableton project. Τέλος έκανα Midi map τον αισθητήρα στο fader έτσι ώστε όταν πλησιάζω το χέρι μου να ανεβαίνει το fader και να ενεργοποιείτε το soundscape.

A screenshot of a computer program

AI-generated content may be incorrect. A screenshot of a computer

AI-generated content may be incorrect.

20/2/2025

O Κώδικας ήταν γραμμένος από το προηγούμενο 6μηνο και το max patch επίσης καθώς είχα ξανά χρησιμοποιήσει τον ίδιο σένσορα.

Πρόβα perform και processing

O μουσικός προετοίμασε τις λούπες των οργάνων πριν το τελικό perform και εγώ προετοίμασα το perform του midi keyboard και το live processing. Το δικό μου κομμάτι επιτεύχθηκε μέσω ενός midi keyboard όπου πρόβαρα το drum loop και το live processing μέσω των auxiliaries όπου επηρεάζανε τις λούπες της κιθάρας και των drums.

24/3/2025

Έκανα πρόβα με το midi keyboard ώστε να είμαι έτοιμος.

Προετοιμασία Recoding

Με το OBS έγινε record το Ableton και με 2 κάμερες (1 στον μουσικό και 1 σε εμένα) καταγράφετε το perform ταυτόχρονα με τα visuals.

Σημειώσεις: Οι κάμερες ήταν ένα κινητό και μια go pro action cam.

Στήσιμο Εξοπλισμού και Live Performance

Πραγματοποιήθηκε το live performance σε ένα σαλόνι όπου είχε στηθεί ο εξοπλισμός και καταγράφηκαν τα βίντεο . Το τελικό βίντεο έχει synced ήχο από το Ableton και έγινε μοντάζ στο Davinci Resolve ώστε να φαίνονται όλα τα κομμάτια του perform.

A computer on a desk

AI-generated content may be incorrect.

15/5/2025

To perform έγινε επιτυχώς , χρειάστηκε κάποια tries κυρίως για τον λόγο του ότι πριν πατήσω record στα tracks έπρεπε να το πατήσω 1 μέτρο πριν ώστε να γίνει σωστά η λούπα.

Συμπεράσματα και μελλοντικά σχέδια

Ο συνδυασμός των μουσικό τεχνολογικών στοιχείων με το Arduino και το MAX , των visuals με το Resolume και η ζωντανή εκτέλεση και επεξεργασία , διαμορφώνουν ένα ενδιαφέρον μουσικό project. Το τελικό υλικό παρουσίασης υπό την μορφή βίντεο δημοσιεύθηκε στην πλατφόρμα του YouTube για μελλοντική ανάδειξη ικανοτήτων στον μουσικό τεχνολογικό τομέα και του Ableton Live όπου είναι το κύριο DAW που χρησιμοποιώ.