Pittura con le dita e scultura 3D in realtà aumentata con ARKit

A molti lettori di iDownloadBlog è piaciuta molto la demo di ordinazione degli alimenti di ieri che rende gli alimenti virtuali su un piatto, quindi stiamo presentando un altro nuovo caso d'uso per il nuovo framework ARKit di Apple: pittura con le dita e scultura di oggetti 3D attraverso la realtà aumentata.

Lo sviluppatore Fabin Rasheed ha messo insieme un'app chiamata Maker Studio che ti consente di scolpire e dipingere oggetti 3D con il dito o Apple Pencil su un iPad Pro, il tutto in realtà aumentata.

Se lo desideri, puoi iscriverti alla versione beta e agli aggiornamenti tramite il sito Web ufficiale.

"Questo è il mio recente lavoro che esplora la scultura e la pittura con ARKit", ha scritto. "È stato bello usare Apple Pencil per scolpire e dipingere e ARKit ha dato una prospettiva ad esso."

Non sono sicuro di quanto sia pratica la modellazione 3D nella realtà aumentata, ma la demo sembra sicuramente divertente.

Un artista 3D potrebbe utilizzare una piattaforma di modellazione e pittura ARKit completa come quella per visualizzare qualsiasi cosa. Gli architetti potevano facilmente modellare le estensioni per edifici preesistenti, i progettisti potevano vestire modelli virtuali con i loro ultimi abiti e così via.

Un'altra demo arriva tramite lo sviluppatore Osama Abdel-Karim, che ha creato la sua app utilizzando una combinazione di framework ARKit e Vision di iOS 11 per creare l'effetto di pittura con le dita.

Secondo Osama:

Una delle fantastiche librerie introdotte da Apple in iOS 11 è Vision Framework. Fornisce alcune tecniche di visione artificiale in un modo abbastanza utile ed efficiente. In particolare, useremo la tecnica di tracciamento degli oggetti.

Il tracciamento degli oggetti funziona come segue: in primo luogo, forniamo un'immagine e le coordinate di un quadrato entro i limiti dell'immagine per l'oggetto che vogliamo tracciare. Dopodiché chiamiamo alcune funzioni per inizializzare il tracciamento. Infine, inseriamo una nuova immagine in cui è cambiata la posizione di quell'oggetto e il risultato dell'analisi dell'operazione precedente.

Detto questo, ci restituirà la nuova posizione dell'oggetto.

Molto probabilmente Apple presenterà app basate su ARKit in una sezione speciale dell'App Store.

La società ha affermato che le app ARKit richiederanno un iPhone o iPad con il processore A9, A10 o successivo, il che significa che i proprietari di iPhone 6, iPad Air 2 e dispositivi precedenti saranno esclusi dal freddo.