“Why do I have to look to listen?”: Facilitating Accessible ‘On-The-Go’ Audio Streaming through Gesture Interaction and Multimodal Feedback for Users Navigating Situationally-Induced Impairments
2024 (English)Independent thesis Advanced level (degree of Master (Two Years)), 20 credits / 30 HE credits
Student thesisAlternative title
”Varför måste jag titta för att lyssna?” : Att underlätta tillgänglig strömning av ljud "på-språng" genom gestinteraktion och multimodal feedback för användare som navigerar situationsinducerade funktionsnedsättningar (Swedish)
Abstract [en]
Millions of users engage daily with audio content - music, podcasts, audiobooks - through digital audio streaming platforms (ASPs) like Apple Music and Podcasts, Audible, Deezer, Spotify, YouTube Music. These ASPs provide access to vast content libraries and hyper-personalised recommendations, but information-navigation and decision-making on their visually-heavy screen-based interfaces present challenges for users engaging with audio whilst 'on-the-go', i.e. along with contextual activities (like exercising, commuting, household tasks). In such scenarios, situationally-induced impairments (SIIs) arise, dynamically limiting users' sensory and attentional capacities and making navigation harder. This limits users' agency in shaping their listening sessions. This study examines these friction points through semi-structured interviews. This study also explores how accessibility improvements can be materialised through gesture-based interaction protocols and multimodal feedback, via an ideation workshop involving bodystorming and sketching. Findings indicate that the nature of contextual activities and the magnitude of SIIs imposed, the surrounding environment, and engagement motivations influence users' willingness and ability to interact with ASPs. Drawing on Ability-based Design principles and workshop insights, this study proposes design considerations for gesture-based, multimodal interfaces that facilitate creating accessible ways to engage with ASPs even when under the influence of several SIIs. This study concludes by drawing a proposed concept (crystallised from findings derived in primary research and from established literature) that's hypothesised to offer an accessible ‘on-the-go’ listening experience. The findings from this study also have broader implications for developing accessible interaction frameworks for other similar high-information-density platforms that are frequently accessed whilst 'on-the-go'.
Abstract [sv]
Miljontals användare interagerar dagligen med ljudinnehåll - musik, poddar, ljudböcker - via digitala ljudströmningsplattformar som Apple Music och Podcasts, Audible, Deezer, Spotify, och YouTube Music. Dessa plattformar erbjuder tillgång till omfattande innehållsbibliotek och hyperpersonaliserade rekommendationer, men informationsnavigering och beslutsfattande på deras visuellt betungande, skärmbaserade gränssnitt utgör utmaningar för användare som konsumerar ljud "på språng", det tillsammans med kontextuella aktiviteter (som träning, pendling, hushållsarbete). I sådana scenarier uppstår situationellt framkallade funktionsnedsättningar, som dynamiskt begränsar användarnas sensoriska och uppmärksamhetsförmåga och gör navigeringen svårare. Detta begränsar användarnas möjligheter att forma sina lyssningssessioner. Denna studie undersöker dessa friktionspunkter genom semistrukturerade intervjuer. Studien utforskar också hur förbättringar i tillgänglighet kan realiseras genom att använda gestbaserade interaktionsprotokoll och multimodal feedback, via en idégenereringsworkshop som inkluderar "bodystorming" och skissarbete. Resultaten indikerar att karaktären av kontextuella aktiviteter och omfattningen av framkallde funktionshinder, omgivande miljö och engagemangmotivering påverkar användarnas vilja och förmåga att interagera med digitala strömningsplattformar. Med utgångspunkt i principerna för förmågebaserad design och insikter från workshopen föreslår studien designöverväganden för gestbaserade, multimodala gränssnitt som möjliggör tillgängligt användande av strömningsplattformar även under påverkan av flera framkallde funktionshinder. Denna studie avslutas med att presentera ett koncept (kristalliserat från resultat från primär forskning och från etablerad litteratur) som har en hypotes om att erbjuda en tillgänglig "on-the-go"-lyssningsupplevelse. Resultaten från denna studie har också bredare implikationer för utvecklingen av tillgängliga interaktionsramverk för andra liknande plattformar med hög informationsdensitet som ofta används "på-språng".
Place, publisher, year, edition, pages
2024. , p. 34
Series
TRITA-EECS-EX ; 2024:913
Keywords [en]
Accessibility, Situationally-Induced Impairments, Gesture-Interaction, Multimodality, Ability-based Design, Wearable Technology, Audio Streaming, ‘On-The-Go’ Interaction
National Category
Computer and Information Sciences
Identifiers
URN: urn:nbn:se:kth:diva-360881OAI: oai:DiVA.org:kth-360881DiVA, id: diva2:1942318
Supervisors
Examiners
2025-03-132025-03-042025-03-13Bibliographically approved