SoundSculpt: Muziek Vormgeven met Beweging en Technologie

Innovatieve synthese van kunst, technologie en emotie in één draagbare ervaring

SoundSculpt van Yiqi Zhao transformeert het creatieve proces door gebruikers letterlijk muziek te laten vormen met hun bewegingen, en biedt zo een unieke samensmelting van kunst, technologie en welzijn.

SoundSculpt, een bekroonde interactieve muzieksynthesizer, herdefinieert de relatie tussen mens en muziek door het creatieve proces tastbaar en meeslepend te maken. Geïnspireerd door het ambacht van traditioneel beeldhouwen, nodigt dit innovatieve ontwerp gebruikers uit om hun omgeving te transformeren via beweging, geluid en visuele kunst. Door de grenzen tussen maker en creatie te vervagen, biedt SoundSculpt een nieuwe dimensie aan artistieke expressie en emotionele beleving.

Het hart van SoundSculpt ligt in de integratie van ruimtelijk geluid, motion tracking en generatieve visuele kunst. Door gebruik te maken van Bose AR Frames met geavanceerde gyrosensoren, worden hoofdbewegingen van de gebruiker in realtime omgezet in muzikale modulaties en visuele veranderingen. Deze technologie, ontwikkeld op het Unity-platform met C# scripts, maakt een directe, intuïtieve interactie mogelijk waarbij elke beweging een unieke audiovisuele compositie oplevert. Het resultaat is een dynamisch landschap waarin creativiteit, emotie en technologie samenkomen.

De technische specificaties van SoundSculpt onderstrepen de innovatieve kracht van het ontwerp. Het systeem gebruikt een MIDI-framework om de oriëntatiegegevens van de Bose Frames te vertalen naar toonhoogte en volume, terwijl aanraakinteracties de virtuele bubbel manipuleren. Synesthesieprincipes versterken de zintuiglijke ervaring, waardoor een vloeiende overgang ontstaat tussen fysieke en digitale kunstvormen. Met een compact formaat, waterbestendigheid en een batterijduur van 5,5 uur is SoundSculpt ontworpen voor draagbaarheid en langdurig gebruik.

Onderzoek uitgevoerd aan het MIT Media Lab toonde aan dat SoundSculpt niet alleen de perceptie van ruimte, geluid en beweging verbetert, maar ook bijdraagt aan emotionele stabiliteit. Gebruikers, zowel ontwerpers als niet-ontwerpers, rapporteerden een verhoogd gevoel van welzijn en creatieve voldoening. Deze bevindingen suggereren dat toepassingen in kunsttherapie en psychiatrie binnen handbereik liggen, waarbij speelse creatie wordt ingezet voor emotionele regulatie.

Het overwinnen van technische uitdagingen, zoals het naadloos integreren van multisensorische feedback en het synchroniseren van audio-visuele elementen, vereiste een iteratief ontwerpproces en het benutten van de nieuwste XR-technologie. Door deze obstakels te overwinnen, biedt SoundSculpt een vloeiende, meeslepende ervaring die de gebruiker centraal stelt in het creatieve proces.

SoundSculpt ontving in 2025 de Iron A' Design Award, een erkenning voor innovatieve, praktische en technisch geavanceerde ontwerpen die bijdragen aan een betere wereld. Met deze prijs bevestigt het project zijn positie als pionier op het snijvlak van digitale kunst, technologie en welzijn. SoundSculpt nodigt uit tot heroverweging van wat het betekent om kunst te maken en te beleven in het digitale tijdperk.


Projectdetails en Credits

Projectontwerpers: Yiqi Zhao
Afbeeldingscredits: Image 1: Yiqi Zhao, 2024. Image 2: Yiqi Zhao, 2024. Image 3: Yiqi Zhao, 2024. Image 4: Yiqi Zhao, 2024. Image 5: Yiqi Zhao, 2024. Video Credits: Yiqi Zhao, 2024.
Projectteamleden: Yiqi Zhao
Projectnaam: Sound Sculpt
Projectklant: MIT Media Lab


Sound Sculpt  IMG #2
Sound Sculpt  IMG #3
Sound Sculpt  IMG #4
Sound Sculpt  IMG #5
Sound Sculpt  IMG #5

Lees meer op Pracht Ontwerp