AI-driven conversational agents are increasingly explored as educational tools, there is however little information about visio-verbal systems that combine voice interaction with tangible visualizations. This thesis investigates TellUs, an AI-driven, voice-interactive globe that answers STEM-related questions while simultaneously projecting visualizations on a spherical display. The aim is to examine how children experience interacting with Tel- lUs, whether its responses are perceived as relevant and pedagogically valuable, and which interaction patterns can inform future design improvements. An exploratory, mixed- method field study was conducted across two naturalistic contexts (a science center ex- hibit and a classroom pre-pilot). Data was collected through observations, semi-structured interviews with students and a teacher, and an emoji-based questionnaire adapted from the System Usability Scale and the Chatbot Usability Questionnaire (N = 77). Qualitative data were analyzed using thematic analysis. The results suggest that TellUs is generally experienced as notably engaging and usable, with a mean composite usability score of ap- proximately 69/100. Students reported positive impressions of the system’s social tone and the willingness to reuse the TellUs system, and the students described the combined visual-and-verbal presentation as supportive for their perceived understanding. However, repeatedly occurring breakdowns, especially mishearing by the speech-recognition feature, long or complex answers, and turn-taking friction in group settings can disrupt the learn- ing flow and decrease the social comfort. The findings give real-world evidence for this under-studied interaction form and suggest design priorities such as age-adjusted response length and complexity, better support for group use, and safeguards for misinformation.

AI-drivna konversationsagenter utforskas i allt högre grad som pedagogiska verktyg, men det finns fortfarande begränsad kunskap om visuellt-verbala system som kombinerar röstinteraktion med konkreta visualiseringar. Denna uppsats undersöker TellUs, en AI-driven, röstinteraktiv glob som besvarar STEM-relaterade frågor samtidigt som visualiseringar projiceras på en sfärisk display. Syftet är att undersöka hur barn upplever interaktionen med TellUs, om dess svar uppfattas som relevanta och pedagogiskt värdefulla, samt vilka interaktionsmönster som kan bidra till framtida designförbättringar. En explorativ fältstudie med mixed methods genomfördes i två naturalistiska kontexter (en science center-utställning och en förstudie i klassrumsmiljö). Data samlades in genom observationer, semistrukturerade intervjuer med elever och en lärare samt en emojibaserad enkät anpassad från System Usability Scale och Chatbot Usability Questionnaire (N = 77). Det kvalitativa materialet analyserades med tematisk analys. Resultaten tyder på att TellUs generellt upplevs som engagerande och användbart, med ett genomsnittligt sammanvägt användbarhetsresultat på cirka 69/100. Eleverna rapporterade positiva intryck av systemets sociala ton och en vilja att använda TellUs igen, och de beskrev den kombinerade visuella och verbala presentationen som stödjande för deras upplevda förståelse. Samtidigt kunde återkommande störningar, särskilt feltolkningar i taligenkänningen, långa eller komplexa svar samt svårigheter med turtagning i gruppsituationer, störa lärandeflödet och minska den sociala bekvämligheten. Resultaten ger empiriskt stöd från verkliga användningssituationer för denna relativt outforskade interaktionsform och pekar på designprioriteringar såsom åldersanpassad längd och komplexitet i svaren, bättre stöd för gruppanvändning samt skyddsåtgärder mot desinformation.