Change search
CiteExportLink to record
Permanent link

Direct link
Cite
Citation style
  • apa
  • ieee
  • modern-language-association-8th-edition
  • vancouver
  • Other style
More styles
Language
  • de-DE
  • en-GB
  • en-US
  • fi-FI
  • nn-NO
  • nn-NB
  • sv-SE
  • Other locale
More languages
Output format
  • html
  • text
  • asciidoc
  • rtf
Adding insight in educational lecture environments with ARS: A post-presentation analysis using an interactive visualization tool
KTH, School of Electrical Engineering and Computer Science (EECS).
2019 (English)Independent thesis Advanced level (degree of Master (Two Years)), 20 credits / 30 HE creditsStudent thesis
Abstract [en]

Feedback plays an important role in evaluating and developing courses in higher education. Due to inefficient factors, the feedback cycle does not meet its full potential and can therefore be counterproductive. Current evaluation methods typically demand much effort from both students and teachers, when asking for feedback at the end of the course and analyzing the results. Lack of engagement can thus be observed in both parties. Moreover, we can see an increasing trend of ARS used in educational settings, to improve learning quality and enhance the relationship between the presenter and audience.

This study’s aim was to make the feedback process more efficient and to explore how to provide insight in lecture quality for continuous course development. To fully understand the target user, a pre-study was conducted to identify design requirements and to investigate which areas to evaluate during the courses and why. The interview sessions resulted in four main dimensions to evaluate; Meaningfulness, comprehension, knowledge and attitude. Based on these dimensions, a feedback tool was developed to gather the feedback data from students in two different cohorts. The tool was developed in a survey format, with the help of an existing ARS. The feedback was then collected after two university lectures during two courses. To explore the potential of providing useful insight to the lecturer, and to facilitate the analytical step of the process, an interactive visualization tool was prototyped to display the data. The visualization tool was evaluated, both in terms of usability and its overall concept, with a total of eight lecturers, two of which were lecturers in the courses used to gather the feedback data.

Even though the results show that it might be difficult to draw a single conclusion of the tools’ usability, the users found the concept interesting and were positive towards the idea. The perception of the tool’s intended use varied and is discussed along with future development.

Abstract [sv]

Feedback spelar en viktig roll när det kommer till utvärdering och utveckling av kurser inom högre utbildning. På grund av ineffektiva faktorer uppnår feedbackcykeln inte sin fulla potential och kan därför vara kontraproduktiv. Aktuella utvärderingsmetoder kräver typiskt mycket ansträngning från både elever och lärare och brist på engagemang kan således observeras hos båda parter. Dessutom kan vi se en ökande trend av ARS som används i utbildningsinstitutioner, för att förbättra utbildningskvaliteten samt förhållandet mellan presentatören och publiken.

Syftet med studien var att göra feedbackprocessen mer effektiv och undersöka hur man kan ge insikt i föreläsningskvaliteten för kontinuerlig kursutveckling. För att förstå slutanvändaren genomfördes en förundersökning för att identifiera deras begär och för att undersöka vilka områden som ska utvärderas under kurserna och varför. Intervjuerna resulterade i fyra huvuddimensioner att utvärdera och ge insikt inom; Betydelse, förståelse, kunskap och attityd. Baserat på dessa dimensioner utvecklades ett feedbackverktyg. Verktyget var i form av ett formulär och producerades med hjälp av ett befintlig ARS. Feedbackdatan samlades sedan in efter två universitetsföreläsningar under två kurser. För att undersöka möjligheten att ge föreläsaren användbar insikt och för att underlätta det analytiska steget i processen, utvecklades ett interaktivt visualiseringsverktyg. Visualiseringsverktyget utvärderades, både vad gäller användbarhet och dess övergripande koncept, med totalt åtta föreläsare.

Även om resultaten visar att det kan vara svårt att dra en enda slutsats av verktygets användbarhet, fann användarna konceptet intressant och var överlag positiva. Uppfattningen av verktygets avsedda användning varierar och diskuteras tillsammans med framtida utveckling.

Place, publisher, year, edition, pages
2019. , p. 10
Series
TRITA-EECS-EX ; 2019:443
Keywords [en]
Feedback; Audience response system; Information visualization; Usability
National Category
Computer and Information Sciences
Identifiers
URN: urn:nbn:se:kth:diva-254991OAI: oai:DiVA.org:kth-254991DiVA, id: diva2:1337204
Supervisors
Examiners
Available from: 2019-07-12 Created: 2019-07-12 Last updated: 2019-07-12Bibliographically approved

Open Access in DiVA

fulltext(786 kB)9 downloads
File information
File name FULLTEXT01.pdfFile size 786 kBChecksum SHA-512
e351847dbe6cdeacc301f484d4a07fbbfef2ae508ef740702a6b4461d89b7a5b902893f62b95e61bae4234fec53d060d1899314f54bcd7a50b1036d5f6e79f30
Type fulltextMimetype application/pdf

By organisation
School of Electrical Engineering and Computer Science (EECS)
Computer and Information Sciences

Search outside of DiVA

GoogleGoogle Scholar
Total: 9 downloads
The number of downloads is the sum of all downloads of full texts. It may include eg previous versions that are now no longer available

urn-nbn

Altmetric score

urn-nbn
Total: 27 hits
CiteExportLink to record
Permanent link

Direct link
Cite
Citation style
  • apa
  • ieee
  • modern-language-association-8th-edition
  • vancouver
  • Other style
More styles
Language
  • de-DE
  • en-GB
  • en-US
  • fi-FI
  • nn-NO
  • nn-NB
  • sv-SE
  • Other locale
More languages
Output format
  • html
  • text
  • asciidoc
  • rtf