Change search
CiteExportLink to record
Permanent link

Direct link
Cite
Citation style
  • apa
  • ieee
  • modern-language-association-8th-edition
  • vancouver
  • Other style
More styles
Language
  • de-DE
  • en-GB
  • en-US
  • fi-FI
  • nn-NO
  • nn-NB
  • sv-SE
  • Other locale
More languages
Output format
  • html
  • text
  • asciidoc
  • rtf
Ranking quality in higher education: guiding or misleading?
Linköping University, Department of Behavioural Sciences and Learning. Linköping University, Faculty of Educational Sciences.
Department of Statistics, Macquarie University, Sydney, Australia.
Linköping University, Department of Medical and Health Sciences, Division of Community Medicine. Linköping University, Faculty of Medicine and Health Sciences.ORCID iD: 0000-0001-5066-8728
2014 (English)In: Quality in Higher Education, ISSN 1353-8322, E-ISSN 1470-1081, Vol. 20, no 3, 330-347 p.Article in journal (Refereed) Published
Abstract [en]

The study examines two different models of measuring, assessing and ranking quality in higher education. Do different systems of quality assessment lead to equivalent conclusions about the quality of education? This comparative study is based on the rankings of 24 Swedish higher education institutions. Two ranking actors have independently assessed the quality of these institutions during the same year. The analysis focuses on the concepts of quality on which the rankings are based, the choice of quality indicators, as well as methods, data sources and assessors. Although both actors base their rankings on the same overarching definition of quality, their conclusions do not correspond. The statistical method applied in this review, Bland-Altman analysis, indicates no significant agreement between the qualitative and quantitative measurements of quality in higher education. On the contrary, in several cases there are remarkable differences.

Place, publisher, year, edition, pages
2014. Vol. 20, no 3, 330-347 p.
Keyword [en]
Quality assessment; ranking; higher education; medical and health care professions; qualitative and quantitative measurements
National Category
Pedagogy
Identifiers
URN: urn:nbn:se:liu:diva-122139DOI: 10.1080/13538322.2014.976419OAI: oai:DiVA.org:liu-122139DiVA: diva2:862009
Available from: 2015-10-20 Created: 2015-10-20 Last updated: 2017-12-01
In thesis
1. Vägledande eller vilseledande?: Kvalitetsmätning och ranking av universitet och högskolor
Open this publication in new window or tab >>Vägledande eller vilseledande?: Kvalitetsmätning och ranking av universitet och högskolor
2015 (Swedish)Licentiate thesis, comprehensive summary (Other academic)
Abstract [sv]

Få samhällsinstitutioner kan räkna sin historia lika långt tillbaka i tiden som universiteten. Utan tvekan kan akademin hävda sin hållbarhet som kunskapsorganisation. Det institutionella konceptet för att bedriva forskning och utbildning har under århundradenas lopp vunnit stora framgångar. Ett universitets auktoritet, autonomi och integritet är dock inte given.

Sedan slutet av 1990-talet granskas, bedöms och rankas kvaliteten vid svenska lärosäten systematiskt av externa organisationer, offentliga myndigheter, intresseorganisationer och kommersiella medier både nationellt och internationellt. Syftet med granskningarna uppges som regel vara att informera en bred allmänhet och framför allt ge vägledning till blivande studenter om kvaliteten i högre utbildning. Men de modeller och metoder som tillämpas vid bedömningarna kan skilja sig åt väsentligt.

I två empiriska studier analyseras och jämförs resultaten av tre skilda modeller för extern bedömning, mätning och rankning av kvaliteten vid 24 svenska universitet och högskolor. Modellerna har alla det gemensamt att bedömningarna baseras på högskolelagen och samma övergripande definition av begreppet kvalitet. Vilka faktorer som anses konstituera kvalitet varierar däremot liksom valet av data och metoder för kvalitetsmätning.

I den första studien jämfördes resultaten från Högskoleverkets utvärdering av 119 utbildningsprogram inom medicin och vård med en kvalitetsranking av lärosäten som genomförts av en enskild förening, Urank. De statistiska analyser som gjordes av resultaten från de båda kvalitetsgranskningarna indikerade endast ett slumpmässigt samband. I flera fall var skillnaderna betydande.

Också i den andra studien är utvärderingen av utbildningarna i medicin och vård ett av jämförelseobjekten. Den här gången jämfördes utfallen av utvärderingen med slutsatserna av de bedömningar som  Högskoleverket under en sjuårsperiod gjort av lärosätenas systematiska kvalitetsarbete. Inte heller dessa analyser indikerade något annat än ett statistiskt slumpmässigt samband.

Resultaten bekräftar svårigheterna att finna valida, tillförlitliga och relevanta modeller för kvalitetsbedömningar och rankningar. Hittills har det inte vuxit fram några internationellt vedertagna instrument för mätning av kvaliteten i högre utbildning. Trots det har i synnerhet internationella universitetsrankningar, så kallade ’league tables’, fått ett kraftigt genomslag både som informationskälla och styrinstrument i utvecklingen vid universitet och högskolor.

Erfarenheterna från undersökningarna ger flera skäl att förhålla sig kritisk till resultat av utvärderingar, kvalitetsmätningar och ranking. Externa icke-akademiska organisationer, myndigheter och media, äger för närvarande initiativet ifråga om information och bedömningar av kvaliteten i högre utbildning. En successiv förskjutning syns också i utvecklingen från kollegial styrning till management. Samtidigt riskeras att lärosätenas akademiska auktoritet och autonomi urholkas.

Slutsatserna understryker behovet av fortsatt metodutveckling för att etablera robusta granskningsmodeller som kan vinna tilltro såväl hos  allmänheten som inom akademin själv.

Place, publisher, year, edition, pages
Linköping: Linköping University Electronic Press, 2015. 52 p.
Series
LiU-PEK-R / Department of Behavioural Sciences and Learning (2007-), 263
National Category
Educational Sciences
Identifiers
urn:nbn:se:liu:diva-122142 (URN)10.3384/lic.diva-122142 (DOI)LiU-PEK-R-263 (Local ID)978-91-7685-937-7 (ISBN)LiU-PEK-R-263 (Archive number)LiU-PEK-R-263 (OAI)
Presentation
2015-04-10, I:207, I-huset, Campus Valla, Linköpings universitet, Linköping, 10:00 (Swedish)
Supervisors
Available from: 2015-10-20 Created: 2015-10-20 Last updated: 2015-10-20Bibliographically approved

Open Access in DiVA

fulltext(456 kB)88 downloads
File information
File name FULLTEXT01.pdfFile size 456 kBChecksum SHA-512
cd50579f8ad8a2e8490925c1ff06897046966265b9efa383888c8f5e1c14fafacc8d4ae2205c58081fcb852bcd2c24cb76670fd27c423805f9a127829cd184a8
Type fulltextMimetype application/pdf

Other links

Publisher's full text

Search in DiVA

By author/editor
Bergseth, BritaAbrandt Dahlgren, Madeleine
By organisation
Department of Behavioural Sciences and LearningFaculty of Educational SciencesDivision of Community MedicineFaculty of Medicine and Health Sciences
In the same journal
Quality in Higher Education
Pedagogy

Search outside of DiVA

GoogleGoogle Scholar
Total: 88 downloads
The number of downloads is the sum of all downloads of full texts. It may include eg previous versions that are now no longer available

doi
urn-nbn

Altmetric score

doi
urn-nbn
Total: 176 hits
CiteExportLink to record
Permanent link

Direct link
Cite
Citation style
  • apa
  • ieee
  • modern-language-association-8th-edition
  • vancouver
  • Other style
More styles
Language
  • de-DE
  • en-GB
  • en-US
  • fi-FI
  • nn-NO
  • nn-NB
  • sv-SE
  • Other locale
More languages
Output format
  • html
  • text
  • asciidoc
  • rtf