SoundSculpt: Scolpire il Suono con la Realtà Aumentata

Un sintetizzatore musicale interattivo che trasforma il gesto in arte sonora

L’arte della scultura ha da sempre rappresentato un dialogo profondo tra materia e creatività. SoundSculpt, ideato da Yiqi Zhao presso il MIT Media Lab, trasporta questa antica pratica nel mondo digitale, invitando l’utente a modellare il suono attraverso il movimento del corpo. L’ispirazione nasce dall’atto tattile di plasmare la creta, trasformato qui in un’esperienza multisensoriale che fonde audio spaziale, arte visiva e interazione gestuale.

Il cuore innovativo di SoundSculpt risiede nell’integrazione delle Bose AR Frames: occhiali intelligenti dotati di sensori giroscopici che rilevano i movimenti della testa su sei assi (6 dof). Questi dati vengono tradotti in tempo reale in modulazioni sonore tramite un framework MIDI, mentre l’interfaccia visiva risponde dinamicamente grazie a tecniche di mesh deformation e manipolazione dei vertici. Il risultato è un paesaggio audio-visivo generativo, dove ogni gesto modella la musica e la forma virtuale di una “bolla” interattiva.

La piattaforma, sviluppata su Unity con script C#, consente un’interazione fluida e intuitiva. Gli utenti possono inclinare la testa o premere pulsanti sulle montature per modificare il suono e la forma della bolla, vivendo un ciclo continuo di ascolto, scultura e generazione artistica. L’adozione dei principi della sinestesia amplifica la percezione sensoriale, creando un ponte tra arte fisica e digitale e favorendo il benessere emotivo attraverso la creatività.

Dal punto di vista tecnico, SoundSculpt si distingue per la sua portabilità (7,2 x 3,1 x 2,9 pollici, 350 grammi), l’autonomia fino a 5,5 ore e la resistenza all’acqua IPX2. La connessione Bluetooth garantisce una libertà di movimento fino a 9 metri, mentre le lenti polarizzate assicurano comfort visivo. Queste caratteristiche rendono il dispositivo ideale sia per la sperimentazione artistica che per applicazioni in ambito terapeutico.

La ricerca alla base del progetto ha coinvolto designer e non-designer, evidenziando un miglioramento nella percezione dello spazio, del suono e del movimento, oltre a una maggiore stabilità emotiva. SoundSculpt si propone come strumento innovativo per la regolazione delle emozioni, con potenziali applicazioni in arteterapia e psichiatria, promuovendo il benessere attraverso la creazione ludica.

SoundSculpt ha superato sfide tecniche e creative, come la sincronizzazione in tempo reale di feedback multisensoriali e la gestione della precisione dei sensori, grazie a test iterativi e all’impiego di tecnologie XR all’avanguardia. Il progetto, premiato con l’Iron A’ Design Award 2025, rappresenta un esempio virtuoso di come arte, design e innovazione possano convergere per migliorare la qualità della vita.

SoundSculpt invita a esplorare nuovi confini dell’espressione artistica, offrendo un’esperienza immersiva che mette l’individuo al centro del processo creativo. Un invito a scolpire il proprio paesaggio sonoro e a riscoprire il potere trasformativo dell’arte digitale.