Registrazione di suoni spaziali con ARKit e spostamento attraverso forme d'onda 3D virtuali

L'artista di codice Zach Lieberman ha sfruttato il nuovo framework ARKit di Apple in iOS 11 per creare un'app audio spaziale a prova di concetto che può essere utilizzata per registrare il suono in realtà aumentata e riprodurlo spostandosi letteralmente attraverso forme d'onda 3D virtuali.

Ecco un breve video che mostra questo in azione (assicurati di attivare l'audio)

Test rapido di registrazione del suono nello spazio e riproduzione attraverso lo spostamento (il video ha audio!) #Openframeworks pic.twitter.com/GdZcK3rj1L

- zach lieberman (@zachlieberman) 6 settembre 2017

Lo ha realizzato utilizzando ARKit e OpenFrameworks, un toolkit C ++ open source per la codifica creativa.

Vedo gli usi per questo nei musei come una sorta di installazione artistica interattiva: immagina di registrare composizioni musicali in questo modo con note e ritmi che occupano schemi spaziali che le persone potrebbero riprodurre muovendosi attraverso forme d'onda 3D.

Si potrebbe anche creare un'installazione o una pista fitness dedicata in cui le persone potrebbero correre attraverso un corso per riprodurre musica preregistrata. Oppure, che ne dici di una caccia a Scavenger nella realtà aumentata in cui devi trovare indizi audio in tutta la casa?

Le possibilità sono infinite: se riesci a fare audio spaziale con ARKit, non è un tratto immaginare parole di realtà aumentata, tweet, emoji, fogli di musica fluttuanti e così via.

Ecco altre demo di Zach che mostrano come ARKit rileva i punti oggetto in tempo reale.

Test rapido che anima i dati della nuvola di punti pic.twitter.com/34mQvuKXNd

- zach lieberman (@zachlieberman) 1 settembre 2017

Un altro pic.twitter.com/5RSFSzSg5N

- zach lieberman (@zachlieberman) 31 agosto 2017

È bello guardare i punti funzione e vedere il modello che sta costruendo (thx @xavitribo) pic.twitter.com/8rqObs8seI

- zach lieberman (@zachlieberman) 31 agosto 2017

La demo di Zach ricorda la serie The Light Barrier dello studio Kimchi and Chips, un progetto che crea disegni volumetrici nell'aria usando centinaia di proiezioni video calibrate. Come dimostrato nel video incorporato di seguito, queste proiezioni di luce si fondono in un campo di nebbia per creare oggetti grafici che si animano attraverso lo spazio fisico come fanno nel tempo.

Oggi, ti abbiamo mostrato l'ultima app di misurazione dello sviluppatore Rinat Khanov, chiamata MeasureKit, che puoi usare per misurare qualsiasi cosa, come l'altezza di una persona, la distanza dagli oggetti, l'angolo tra due punti e altro ancora, puntando il tuo iPhone verso gli oggetti.

Ti piace questa nuova demo di ARKit?