Empowering Children to Create AI-Enabled Augmented Reality Experiences
Di cosa parla
Capybara permette ai bambini di creare e programmare personaggi 3D sovrapposti al mondo reale usando la fotocamera. Possono generare personaggi e accessori da semplici descrizioni di testo, animarli con strumenti che li fanno muovere e seguire i loro movimenti, e farli interagire con oggetti reali riconosciuti dalla fotocamera. Studi con bambini negli Stati Uniti e in Argentina indicano che il sistema favorisce esperienze AR personalizzate e coinvolgenti.
Cosa permette di osservare
Permette di esplorare se e come dare ai bambini strumenti che li trasformino da consumatori a creatori di contenuti digitali, quanto l'intelligenza artificiale renda accessibile la creazione in tre dimensioni e come il mondo reale possa influenzare le storie virtuali.
Dalla fonte
Despite their potential to enhance children's learning experiences, AI-enabled AR technologies are predominantly used in ways that position children as consumers rather than creators. We introduce Capybara, an AR-based and AI-powered visual programming environment that empowers children to create, customize, and program 3D characters overlaid onto the physical world. Capybara enables children to create virtual characters and accessories using text-to-3D generative AI models, and to animate these characters through auto-rigging and body tracking. In addition, our system employs vision-based AI models to recognize physical objects, allowing children to program interactive behaviors between virtual characters and their physical surroundings. We demonstrate the expressiveness of Capybara through a set of novel AR experiences. We conducted user studies with 20 children in the United States a…