Traditionella fokusgrupper (TFG) har länge använts som undersökningsmetod inom forskningen. Metoden innebär att en grupp individer samlas för att på forskarens/ samtalsledarens initiativ diskutera ett eller flera ämnen. Målet är att via gruppinteraktion och kommunikation kring ett ämne genera en rik mängd data. IT-stödda fokusgrupper (IFG) har dessutom gjort det enklare att kunna samla geografiskt spridda individer för att delta. IFG har använts inom marknadsundersökningsbranschen, men i mindre utsträckning som datainsamlingsmetod inom forskning. Det finns en begränsad mängd forskning och få empiriska studier om IFG. I uppsatsen redovisas erfarenheterna från sex IFG med studenter som var mycket geografiskt spridda och som hade valt en flexibel utbildningsform i tid och rum.
Med hänsyn till studentgruppens förutsättningar utnyttjades ett diskussionsforum på Internet. Syftet med uppsatsen är att redogöra för erfarenheterna av att använda IFGmetoden, dess möjligheter och begränsningar. Det innebär att de innehållsmässiga resultaten av studien som genomfördes med IFG-metoden utelämnas. Uppsatsen inleds med en beskrivning av TFG och IFG, därefter redovisas på vilket sätt IFGmetoden anpassades till vår studie samt resultaten av genomförandet. Jämförelser görs med forskning på området och artikeln avslutas med att diskutera värdet av metoden.
Regeringen gav år 2003 Myndigheten för skolutveckling i uppdrag att arbeta för en förbättrad förskole- och skolsituation i segregerade områden. I uppdraget ingick bland annat att kartlägga, samla in och analysera framgångsfaktorer samt att sprida lärande exempel. Projektet Idéskolor för mångfald ingår som ett led i detta arbete och syftar till att sprida lärande exempel. I ett första skede utsågs, efter ansökan, ca 20 idéskolor årligen under tre år. Ett senare regeringsuppdrag innebar att myndigheten skulle planera för fortsatta insatser. Ytterligare en omgång idéskolor utsågs och dessutom erbjöds alla idéskolor att efter idéskoleperioden på 2 år fortsätta som nav i lokala nätverk under 2 år.
Utvärderingen har fokuserat på projektets relevans för att utveckla och stärka ett uthålligt mångfaldsarbete i skolorna, projektets konsekvenser för medverkande skolors eget mångfalds- och utvecklingsarbete samt hur spridning och erfarenhetsutbyte med besöksskolor fungerat och vilka effekter det haft.
Deltagandet i projektet har stärkt idéskolorna i deras utvecklingsarbete. De har framför allt fått ett ökat självförtroende och blivit bättre på att ta emot studiebesök samt förmedla och diskutera sina erfarenheter. Besökande skolor har fått inspiration och nya tankar i sitt utvecklingsarbete. Då skolutveckling är en långsam process som påverkas av många faktorer går det inte att utifrån utvärderingens resultat se vilken betydelse ett enstaka studiebesök på en idéskola får för det långsiktiga utvecklingsarbetet i besöksskolorna.
Utvärderingen har redovisats i tre delrapporter, vars innehåll sammanfattas och analyseras i denna slutrapport. Arbetet har utförts av två forskare vid Centrum för utvärderingsforskning (UCER), Umeå universitet samt en forskare vid Institutionen för kultur- och medievetenskaper, Umeå universitet.
This article develops a conceptual framework for studying democratic accountability in decentralized governance, and discusses critical issues about democratic accountability from a citizen’s perspective. First, the concept is discussed and adapted to make it useful for studying democratic accountability in different governance structures. Second, the article scrutinises conditions for democratic accountability in decentralised governance based on three models. Third, democratic accountability is discussed with reference to a case study of public reviewers operating in four municipalities in Sweden. The study indicates that municipal auditors and the local media have the greatest impact on municipal policy. On the whole, auditors improve local governments’ internal control and systems for steering and monitoring municipal policy, whereas the media sometimes alter the policy agenda without changing the policy. Auditors maintain and support an elitist democratic orientation of democratic accountability, and the media maintain this democratic orientation and in addition promote democratic dialogue. Viewed from a citizen’s perspective, the traditional accountability system does not work satisfactorily. State inspectors and municipal auditors – two important public reviewers in the current system – could improve their work to make it more useful to citizens’ democratic control. Another way discussed to develop democratic accountability is to promote participatory policy and concrete means of accountability (e.g. on-site visits, conducted tours and different forms of democratic dialogue). The formal way to improve democratic accountability implies more transparency, monitoring and control, which may also lead to distrust and scapegoat thinking (i.e. a surveillance society), whereas concrete modes of accountability, more associated with participatory and deliberative democracy, imply mutual responsibility and trust building. Strengthening participatory policy, active citizens, collective responsibility and democratic dialogue could be an alternative to the emerging audit society.
The author suggests a Weberian methodology, based on theories of democracy and organization, for assessing normative implications of public organizations. How different organizational models contribute to (re)create democracy and legitimacy is scrutinized with reference to a Swedish IT program. The conclusion is that a system management organization will be an appropriate choice for dealing with "tame" problems, but it will at the same time promote an elitist democratization. In contrast, a development organization will be more appropriate in dealing with complex problems, and it will most likely promote discursive democratization.
The main relations between evaluation and politics are, in this article, explored and discussed in relation to three ideal types. The types differ regarding the political-administrative functions of evaluations, the epistemology, and the implications for democracy. At present, Swedish evaluation policy is partly veiled because there is no open debate concerning the relation between evaluation and politics. The analysis suggests that the dominant evaluation policy is closest to the integrated ideal type, that is, the goal is to completely adjust evaluation to political needs.
There are many options for elaborating democratic evaluations. This article discusses evaluation of and for democracy, and in particular three broad democratic evaluation orientations: elitist democratic evaluation (EDE), participatory democratic evaluation (PDE) and discursive democratic evaluation (DDE). The archetypes differ regarding, for example, evaluation focus, inclusion of stakeholders, dialogue and the role of the evaluator. The three orientations promote certain democratic values and are linked to the elitist, participatory or discursive notions of democracy respectively. It is argued that there is a need to become more conscious of how evaluations not labelled democratic can influence democracy and what responsibility democratic evaluators have. If commissioners and evaluators become more aware of the different democratic orientations evaluations may have, they will be better able to decide which evaluation to commission and undertake.
The overall aim of this article is to develop conceptual tools and practical guidelines for evaluating the effects of public policy and program on civil society and democracy, and to analyze three broad ways of taking evaluation to the people. The terms “civil society” and “democracy” are ambiguous, referring to different notions in various discourses. The article demonstrates how different notions (ideal-types) of civil society and democracy can be useful in assessing the effects of public policies and programs. Finally, three broad approaches to evaluation are analyzed as tools for taking evaluation to the people. I argue that, in light of the legitimacy crisis, the “mediating evaluation approach” is the most promising approach today. However, the role of the evaluator and the notion of both civil society and democracy differ among the three approaches.
This article explores the interplay of local government policy and legitimacy from a broad postpositivist perspective where historical accounts and narratives are used in a complementary fashion. The basic assumption is that legitimacy is the product of satisfying felt needs and solving perceived problems. Health and social malaise problems and related policies of the past 120 years are analyzed in 50 Swedish municipalities. The analysis indicates that municipality policies respond to local problems only partly. Generally, local government policies responded dynamically to ''objective" and perceived problems before the 1970s, but did not resolve the problems. Today's legitimacy crisis could, to some extent, be explained by the discrepancy between high expectations created in the policy discourse and the central and local government's incapacity to offer sustainable solutions to ongoing problems. It is suggested that if history is considered more seriously in public policy making it could help policy makers and citizens readjust expectations, illuminate the limits and prospects for public policy, and identify ways to restore legitimacy. Moreover, legitimacy could be restored if more realistic policies are worked out and if a new division of power between the levels of government is introduced.
Because when a policy process starts, nobody knows what line of action will eventually be implemented, policy evaluation has to continuously examine the content of different policy components. In order to understand and explain public policy, different stakeholders’ perceptions of the policy problem need to be scrutinized. A policy evaluation should also facilitate the interpretation of policy in a broader context. What values and order does the policy or programme promote? Using an open evaluation framework and a mix of criteria can facilitate a broader interpretation of the policy process. In this article, problems undertaking policy evaluation are discussed in relation to a Swedish medical informatics programme.
This article discusses different approaches to evaluating a knowledgeexchange programme designed to foster closer university–industry interaction. It shows how the same policy or programme can be understood and thus evaluated in a number of ways. First, a particular knowledgeexchange programme evaluated by the authors is described. The article then outlines four different methodologies that can be used to evaluate the programme, and assesses it from the perspective of each, outlining the respective strengths and weaknesses of the approaches. The first two evaluation approaches, programme theory evaluation and outcome analysis, tend to be applied in ways that privilege the policy/programme makers’ worldview, and in this sense may be considered ‘management-oriented’ approaches; the second two approaches, policy discourse analysis and qualitative network analysis, are often applied in ways that incorporate a critical stance to this worldview, and may in this sense be considered ‘non-management-oriented’ approaches. The validity of a policy or programme evaluation can be enhanced by adopting a multi-methodological design incorporating both types of approach. Stakeholders are more likely to learn from a programme/policy evaluation and to be receptive to its conclusions if their differing perspectives and success criteria are incorporated into the evaluation.
Vid enkätundersökningar riktade till studenter ställs man ofta i situationer där tilltänkta studenter inte kan eller vill delta i undersökningen, och i lägen där studenter utelämnat enstaka frågor. I rapporten diskuteras möjligheter att nå ut med webbaserade enkäter till olika studerandegrupper och vad som kan göras för att hantera och reducera bortfallsproblematiken. Rapporten granskar ett antal utvärderingar där webbaserade enkäter använts och respondenterna varit studenter. Resultat visar att det är svårt att uppnå en tillfredsställande svarsfrekvens och att svarsprocenten sjunker då studentpopulationen ökar. Olika sätt att reducera bortfall diskuteras och en rekommendation är att använda kompletterande tillvägagångssätt för att administrera webbaserade enkäter.
Rapporten behandlar arbetsmiljösatsningen Jobba friskts förutsättningar och relevans för att bidra till ett hållbart arbetsliv med bättre livskvalitet och hög produktivitet inom åtta myndigheter. Jobba friskts målsättning är att inom två år kunna redovisa resultat som visar att en positiv trendförskjutning har uppnåtts på de arbetsplatser som deltar i projektet. Inom ramen för tre utbildningsmoduler erbjuds deltagarna i Jobba friskt praktiska verktyg och konkreta åtgärdspaket för att åstadkomma förändringar på sina arbetsplatser. Två av utbildningsmodulerna kan beskrivas som inriktade mot förebyggande och hälsofrämjande insatser. Inom dessa prioriteras faktorer som ska inspirera till att utveckla ett förebyggande och hälsofrämjande arbetsmiljöarbete. Den tredje modulen kretsar kring efterhjälpande åtgärder genom rehabilitering av långtidssjukskrivna. I rapporten rekonstrueras projektets underliggande antaganden och satsningen relateras till aktuell forskning och erfarenhet inom området. Med utbildningsinsatser i projektform framstår satsningens förutsättningar som goda. Utbildningsinnehållets generella nedtoning av verksamheternas specifika mål och krav riskerar att försämra förutsättningarna för hur man vid respektive arbetsplats inom de olika myndigheterna ska lösa den grundläggande samordningsfrågan med exempelvis kvalitets- och ekonomifrågor på grupp- och organisationsnivå. Bland slutsatserna framhålls att resultatet kan medföra ett ökat behov av partsgemensamma insatser för att underlätta överföringen och anpassningen av deltagarnas kunskap till de ordinarie verksamheternas krav.