codeklavier

Programming with the piano as interface

View on GitHub

For EnglishšŸ‡¬šŸ‡§

ARquatic Live - A CodeKlavier Augmented Reality Experience

Over ARquatic

ā€˜ARquatic Liveā€™ van de CodeKlavier biedt het publiek een totaalervaring van geluid, muziek en Augmented Reality (AR). Live muziek levert de input voor een fantasierijke, associatieve onderwaterwereld, die zich voor uw ogen ontvouwt op uw smartphone.

De AR-objecten en structuren worden gecreĆ«erd volgens de regels van Lindenmayer-systemen, die o.a. gebruikt worden om 3D-bomen te creĆ«ren. ā€˜ARquatic Liveā€™ legt ongebruikelijke objecten, geĆÆnspireerd op water, over alledaagse omgevingen. De combinatie van de natuurlijke verschijning van de wereld om ons heen met de artificiĆ«le schoonheid van de AR-objecten stimuleert de verbeelding: zowel live als online.

Shows

Zondag 6 Juni
ARquatic Live in het Pinetum, Hilversum
Tijd: 14.00, 15.00, 16.00
Reservering is verplicht. Klik hier om het formulier in te vullen

Zondag 13 Juni
ā€œMeer dan Muziekā€ Festival in Toets des Tijds, Amsterdam
Tijd: 17.00, 20.00
Kaartjes bestellen

Download de app

De ARquatic app is beschikbaar te downloaden: klik hier voor Apple en hier voor Android. U heeft een Apple iPhone SE/6S (of later) of een Android van deze lijst nodig. U kunt ook gewoon de link voor de app volgen en kijken of de demo op uw telefoon werkt. In dat geval werkt de app ook voor het live optreden. Als u geen geschikte mobiele telefoon heeft, dan kunt u nog steeds genieten van de visuals in 2D, maar niet van Augmented Reality.

Motivatie

L-systemen vinden hun oorsprong in de natuur en organische groei: daarom nemen wij deze principes in onze muzikale- en programmeerparadigmaā€™s. L-systemen worden op dit moment al op grote schaal gebruikt in generatieve kunst en muziek. Wij onderzoeken hoe de piano-codeur met dit model complexe structuren tot uitdrukking kan brengen en hoe de regels van het systeem de improvisatie aan de piano beĆÆnvloeden. Lindenmayer werkte aan de Universiteit van Utrecht in 1968. Daarom is Nederland een bijzondere locatie voor de presentatie van dit project.

Over de technologie

De ā€˜ARquatic Liveā€™-ervaring wordt mogelijk gemaakt door drie belangrijke technologische elementen en fasen; CodeKlavier, Lindemayer en Unity.

CodeKlavier: een systeem waarmee de pianist kan coderen door piano te spelen. In ā€˜ARquatic Liveā€™ codeert de pianist met lambda-calculus om getallen te creĆ«ren. Deze nummers worden vervolgens vertaald in symbolen die worden gebruikt in de L-systeemengine.

De L-systeemengine is het tweede element en zet de symbolen om in formele grammaticaā€™s die het startpunt en de L-systeemregels definiĆ«ren. Samen vormen deze de L-systeembomen die de structuren creĆ«ren van de AR-visuele elementen die u ziet.

Deze structuren, samen met enkele kenmerken van het pianospel, worden vervolgens toegepast op de visuals ontworpen door Patrick Borgeat en weergegeven in Unity. Dit is de laatste stap van het technologische proces en levert de AR-visuals op die je tijdens de show ervaart via de ARquatic app.

Credits

Anne Veinberg - piano
Felipe Ignacio Noriega - laptop audio
Patrick Borgeat - visuals

Sponsors

Met dank aan het Stimulerings Fonds NL en onze angel sponsor voor het mogelijk maken van de CodeKlavier project.

Met dank aan het Fonds Podium kunsten Balkonscenes Fonds voor het mogelijk maken van de optredens in Juni 2021.

Vragen?

Contact arquatic@codeklavier.space