Evaluering af læseplaner og fakulteter er afgørende for alle højere uddannelsesinstitutioner, herunder medicinske skoler.Elevevalueringer af undervisning (SET) har typisk form af anonyme spørgeskemaer, og selvom de oprindeligt er udviklet til at evaluere kurser og programmer, er de gennem tiden også blevet brugt til at måle undervisningens effektivitet og efterfølgende træffe vigtige undervisningsrelaterede beslutninger.Lærer faglig udvikling.Visse faktorer og skævheder kan dog påvirke SET-score, og undervisningseffektivitet kan ikke måles objektivt.Selvom litteraturen om kursus- og fakultetsevaluering i almen videregående uddannelse er veletableret, er der betænkeligheder ved at bruge de samme værktøjer til at evaluere kurser og fakulteter på lægeuddannelser.Især kan SET i almen videregående uddannelse ikke direkte anvendes til pensumdesign og -implementering på medicinske skoler.Denne gennemgang giver et overblik over, hvordan SET kan forbedres på instrument-, ledelses- og fortolkningsniveau.Derudover påpeger denne artikel, at ved at bruge forskellige metoder såsom peer review, fokusgrupper og selvevaluering til at indsamle og triangulere data fra flere kilder, herunder studerende, peers, programledere og selvbevidsthed, kan et omfattende vurderingssystem blive bygget.Mål effektivt undervisningens effektivitet, understøt den faglige udvikling af medicinske undervisere og forbedre kvaliteten af undervisningen i medicinsk uddannelse.
Kursus- og programevaluering er en intern kvalitetskontrolproces i alle videregående uddannelsesinstitutioner, herunder medicinske skoler.Student Evaluation of Teaching (SET) tager normalt form af et anonymt papir eller online spørgeskema ved hjælp af en vurderingsskala såsom en Likert-skala (normalt fem, syv eller højere), der giver folk mulighed for at angive deres enighed eller grad af enighed.Jeg er ikke enig i specifikke udsagn) [1,2,3].Selvom SET'er oprindeligt blev udviklet til at evaluere kurser og programmer, er de over tid også blevet brugt til at måle undervisningens effektivitet [4, 5, 6].Undervisningseffektivitet anses for vigtig, fordi det antages, at der er en positiv sammenhæng mellem undervisningseffektivitet og elevernes læring [7].Selvom litteraturen ikke klart definerer træningens effektivitet, er den normalt specificeret gennem specifikke karakteristika ved træning, såsom "gruppeinteraktion", "forberedelse og organisering", "feedback til studerende" [8].
Information indhentet fra SET kan give nyttig information, såsom om der er behov for at tilpasse undervisningsmaterialerne eller undervisningsmetoderne, der anvendes i et bestemt forløb.SET bruges også til at træffe vigtige beslutninger relateret til lærerens faglige udvikling [4,5,6].Imidlertid er hensigtsmæssigheden af denne tilgang tvivlsom, når højere uddannelsesinstitutioner træffer beslutninger vedrørende fakultetet, såsom forfremmelse til højere akademiske grader (ofte forbundet med anciennitet og lønstigninger) og centrale administrative stillinger inden for institutionen [4, 9].Derudover kræver institutioner ofte, at nye fakulteter inddrager SET'er fra tidligere institutioner i deres ansøgninger om nye stillinger, hvilket ikke kun påvirker fakultetsforfremmelser inden for institutionen, men også potentielle nye arbejdsgivere [10].
Selvom litteraturen om læseplaner og lærerevaluering er veletableret inden for almen videregående uddannelse, er dette ikke tilfældet inden for medicin og sundhedspleje [11].Medicinske underviseres læseplaner og behov adskiller sig fra almindelige videregående uddannelser.For eksempel bruges teamlæring ofte i integrerede medicinske uddannelseskurser.Det betyder, at medicinstudiets pensum består af en række kurser undervist af en række fakultetsmedlemmer, som har uddannelse og erfaring inden for forskellige medicinske discipliner.Selvom eleverne drager fordel af den indgående viden fra eksperter på området under denne struktur, står de ofte over for udfordringen med at tilpasse sig hver lærers forskellige undervisningsstile [1, 12, 13, 14].
Selvom der er forskelle mellem almen videregående uddannelse og medicinsk uddannelse, bruges det SET, der bruges i førstnævnte, også nogle gange i medicin- og sundhedskurser.Implementering af SET i de almene videregående uddannelser giver imidlertid mange udfordringer med hensyn til læseplaner og fakultetsevaluering i sundhedsfaglige uddannelser [11].Især på grund af forskelle i undervisningsmetoder og lærerkvalifikationer, vil kursusevalueringsresultater muligvis ikke omfatte elevernes meninger fra alle lærere eller klasser.Forskning af Uytenhaage og O'Neill (2015) [5] tyder på, at det kan være upassende at bede elever om at bedømme alle individuelle lærere ved slutningen af et kursus, fordi det er næsten umuligt for eleverne at huske og kommentere flere lærervurderinger.Kategorier.Derudover er mange lægeuddannelseslærere også læger, for hvem undervisning kun er en lille del af deres ansvar [15, 16].Fordi de primært er involveret i patientbehandling og i mange tilfælde forskning, har de ofte lidt tid til at udvikle deres undervisningsevner.Imidlertid bør læger som lærere modtage tid, støtte og konstruktiv feedback fra deres organisationer [16].
Medicinstuderende har en tendens til at være meget motiverede og hårdtarbejdende personer, der med succes opnår optagelse på medicinstudiet (gennem en konkurrencedygtig og krævende proces internationalt).Derudover forventes medicinstuderende i løbet af medicinstudiet at tilegne sig en stor mængde viden og udvikle et stort antal færdigheder på kort tid, samt at lykkes med komplekse interne og omfattende nationale vurderinger [17,18,19 ,20].På grund af de høje standarder, der forventes af medicinstuderende, kan medicinstuderende således være mere kritiske og have højere forventninger til undervisning af høj kvalitet end studerende inden for andre discipliner.Medicinstuderende kan således have lavere vurderinger fra deres professorer sammenlignet med studerende i andre discipliner af ovennævnte årsager.Interessant nok har tidligere undersøgelser vist en positiv sammenhæng mellem elevernes motivation og individuelle lærerevalueringer [21].I løbet af de sidste 20 år er de fleste medicinske skoles læseplaner rundt om i verden blevet vertikalt integrerede [22], således at studerende er udsat for klinisk praksis fra de tidligste år af deres program.I løbet af de sidste par år er læger således blevet mere og mere involveret i uddannelsen af medicinstuderende og støtter, selv tidligt i deres programmer, vigtigheden af at udvikle SET'er, der er skræddersyet til specifikke fakultetspopulationer [22].
På grund af den ovenfor nævnte medicinske uddannelses specifikke karakter bør SET'er, der bruges til at evaluere generelle videregående uddannelseskurser undervist af et enkelt fakultetsmedlem, tilpasses til at evaluere det integrerede læseplan og det kliniske fakultet for medicinske programmer [14].Derfor er der behov for at udvikle mere effektive SET-modeller og omfattende vurderingssystemer til mere effektiv anvendelse i lægeuddannelsen.
Den aktuelle gennemgang beskriver de seneste fremskridt i brugen af SET i (almen) videregående uddannelse og dens begrænsninger, og skitserer derefter SETs forskellige behov for medicinske uddannelseskurser og fakulteter.Denne gennemgang giver en opdatering af, hvordan SET kan forbedres på instrumentelle, administrative og fortolkende niveauer, og fokuserer på målene med at udvikle effektive SET-modeller og omfattende vurderingssystemer, der effektivt vil måle undervisningens effektivitet, understøtte udviklingen af professionelle sundhedspædagoger og forbedre kvaliteten af undervisningen i lægeuddannelsen.
Denne undersøgelse følger undersøgelsen af Green et al.(2006) [23] for råd og Baumeister (2013) [24] for råd om at skrive narrative anmeldelser.Vi besluttede at skrive en narrativ anmeldelse om dette emne, fordi denne type anmeldelse hjælper med at præsentere et bredt perspektiv på emnet.Fordi narrative anmeldelser trækker på metodologisk forskellige undersøgelser, hjælper de desuden med at besvare bredere spørgsmål.Derudover kan narrative kommentarer hjælpe med at stimulere tanker og diskussion om et emne.
Hvordan bruges SET i lægeuddannelsen, og hvad er udfordringerne sammenlignet med SET, der bruges i almen videregående uddannelse,
Pubmed- og ERIC-databaserne blev søgt ved hjælp af en kombination af søgetermerne "evaluering af studerendes undervisning", "undervisningseffektivitet", "medicinsk uddannelse", "højere uddannelse", "evaluering af læseplaner og fakulteter" og for Peer Review 2000, logiske operatører .artikler publiceret mellem 2021 og 2021. Inklusionskriterier: Inkluderede studier var originale studier eller oversigtsartikler, og studierne var relevante for områderne for de tre hovedforskningsspørgsmål.Eksklusionskriterier: Undersøgelser, der ikke var engelsksprogede eller undersøgelser, hvori fuldtekstartikler ikke kunne findes eller ikke var relevante for de tre hovedforskningsspørgsmål, blev udelukket fra det aktuelle reviewdokument.Efter udvælgelse af publikationer blev de organiseret i følgende emner og tilhørende underemner: (a) Brugen af SET i almen videregående uddannelse og dens begrænsninger, (b) Brugen af SET i medicinsk uddannelse og dens relevans for at behandle spørgsmål relateret til sammenligning af SET (c) Forbedring af SET på instrumentelt, ledelsesmæssigt og fortolkningsniveau for at udvikle effektive SET-modeller.
Figur 1 giver et flowchart over udvalgte artikler inkluderet og diskuteret i den aktuelle del af gennemgangen.
SET er traditionelt blevet brugt i videregående uddannelser, og emnet er blevet velundersøgt i litteraturen [10, 21].Imidlertid har en lang række undersøgelser undersøgt deres mange begrænsninger og bestræbelser på at adressere disse begrænsninger.
Forskning viser, at der er mange variabler, der påvirker SET-scores [10, 21, 25, 26].Derfor er det vigtigt for administratorer og lærere at forstå disse variable, når de fortolker og bruger data.Det næste afsnit giver et kort overblik over disse variabler.Figur 2 viser nogle af de faktorer, der påvirker SET-score, som er beskrevet detaljeret i de følgende afsnit.
I de senere år er brugen af onlinesæt steget sammenlignet med papirsæt.Beviser i litteraturen tyder dog på, at online SET kan gennemføres, uden at eleverne afsætter den nødvendige opmærksomhed på færdiggørelsesprocessen.I en interessant undersøgelse af Uitdehaage og O'Neill [5] blev ikke-eksisterende lærere føjet til SET, og mange elever gav feedback [5].Ydermere tyder evidens i litteraturen på, at studerende ofte tror, at fuldførelse af SET ikke fører til forbedret uddannelsesniveau, hvilket, når det kombineres med medicinstuderendes travle tidsplan, kan resultere i lavere svarprocenter [27].Selvom forskning viser, at holdningerne fra elever, der tager testen, ikke er anderledes end hele gruppens, kan lave svarprocenter stadig få lærere til at tage resultaterne mindre alvorligt [28].
De fleste online SET'er udfyldes anonymt.Ideen er at give eleverne mulighed for frit at udtrykke deres meninger uden at antage, at deres udtryk vil have nogen indflydelse på deres fremtidige forhold til lærere.I Alfonso et al.'s undersøgelse [29] brugte forskere anonyme vurderinger og vurderinger, hvor bedømmerne skulle give deres navne (offentlige vurderinger) for at evaluere undervisningseffektiviteten af lægeskolefakultetet af beboere og medicinstuderende.Resultaterne viste, at lærerne generelt scorede lavere på de anonyme vurderinger.Forfatterne hævder, at elever er mere ærlige i anonyme vurderinger på grund af visse barrierer i åbne vurderinger, såsom beskadigede arbejdsforhold med deltagende lærere [29].Det skal dog også bemærkes, at den anonymitet, der ofte er forbundet med online SET, kan få nogle elever til at være respektløse og gengældende over for instruktøren, hvis vurderingsresultaterne ikke lever op til elevernes forventninger [30].Forskning viser dog, at elever sjældent giver respektløs feedback, og sidstnævnte kan begrænses yderligere ved at lære eleverne at give konstruktiv feedback [30].
Flere undersøgelser har vist, at der er en sammenhæng mellem elevernes SET-score, deres forventninger til testpræstationer og deres testtilfredshed [10, 21].For eksempel rapporterede Strobe (2020) [9], at elever belønner lette kurser, og lærere belønner svage karakterer, hvilket kan tilskynde til dårlig undervisning og føre til karakterinflation [9].I en nylig undersøgelse har Looi et al.(2020) [31] Forskere har rapporteret, at mere gunstige SET'er er relaterede og lettere at vurdere.Desuden er der foruroligende beviser for, at SET er omvendt relateret til elevernes præstationer i efterfølgende kurser: Jo højere rating, jo dårligere elevpræstationer i efterfølgende kurser.Cornell et al.(2016)[32] gennemførte en undersøgelse for at undersøge, om universitetsstuderende lærte relativt mere af lærere, hvis SET de vurderede højt.Resultaterne viser, at når læring vurderes i slutningen af et kursus, bidrager lærere med de højeste karakterer også til flest elevers læring.Men når læring måles på præstation i efterfølgende relevante kurser, er lærere, der scorer relativt lavt, de mest effektive.Forskerne antog, at at gøre et kursus mere udfordrende på en produktiv måde kunne sænke vurderingerne, men forbedre indlæringen.Elevvurderinger bør således ikke være det eneste grundlag for evaluering af undervisningen, men bør anerkendes.
Flere undersøgelser viser, at SET præstationer er påvirket af selve forløbet og dets tilrettelæggelse.Ming og Baozhi [33] fandt i deres undersøgelse, at der var signifikante forskelle i SET-score blandt elever i forskellige fag.For eksempel har kliniske videnskaber højere SET-score end grundlæggende videnskaber.Forfatterne forklarede, at det skyldes, at medicinstuderende er interesserede i at blive læger og derfor har en personlig interesse og højere motivation til at deltage mere i kliniske naturvidenskabelige kurser sammenlignet med grundlæggende naturvidenskabelige kurser [33].Ligesom ved valgfag har elevernes motivation for faget også en positiv effekt på scoren [21].Flere andre undersøgelser understøtter også, at kursustype kan påvirke SET-score [10, 21].
Desuden har andre undersøgelser vist, at jo mindre klassestørrelsen er, jo højere niveau af SET opnår lærere [10, 33].En mulig forklaring er, at mindre klassestørrelser øger mulighederne for interaktion mellem lærer og elev.Desuden kan de forhold, vurderingen foretages under, have indflydelse på resultaterne.For eksempel ser SET-scores ud til at være påvirket af det tidspunkt og den dag, kurset undervises, såvel som den dag i ugen, hvor SET er afsluttet (f.eks. har vurderinger, der er gennemført i weekenden, en tendens til at resultere i mere positive resultater) end afsluttede vurderinger tidligere på ugen.[10].
En interessant undersøgelse af Hessler et al stiller også spørgsmålstegn ved effektiviteten af SET.[34].I denne undersøgelse blev et randomiseret kontrolleret forsøg udført i et akutmedicinsk kursus.Tredjeårs medicinstuderende blev tilfældigt tildelt enten en kontrolgruppe eller en gruppe, der modtog gratis chokoladekager (småkagegruppe).Alle grupper blev undervist af de samme lærere, og uddannelsesindholdet og kursusmaterialerne var identiske for begge grupper.Efter kurset blev alle elever bedt om at gennemføre et sæt.Resultaterne viste, at cookiegruppen vurderede lærere væsentligt bedre end kontrolgruppen, hvilket satte spørgsmålstegn ved effektiviteten af SET [34].
Beviser i litteraturen understøtter også, at køn kan påvirke SET-scores [35,36,37,38,39,40,41,42,43,44,45,46].For eksempel har nogle undersøgelser vist en sammenhæng mellem elevernes køn og vurderingsresultater: kvindelige studerende scorede højere end mandlige studerende [27].De fleste beviser bekræfter, at elever vurderer kvindelige lærere lavere end mandlige lærere [37, 38, 39, 40].For eksempel har Boring et al.[38] viste, at både mandlige og kvindelige studerende mente, at mænd var mere vidende og havde stærkere lederevner end kvinder.Det faktum, at køn og stereotyper påvirker SET, understøttes også af undersøgelsen af MacNell et al.[41], som rapporterede, at studerende i hans undersøgelse vurderede kvindelige lærere lavere end mandlige lærere på forskellige aspekter af undervisningen [41].Desuden leverede Morgan et al [42] bevis for, at kvindelige læger modtog lavere undervisningsvurderinger i fire store kliniske rotationer (kirurgi, pædiatri, obstetrik og gynækologi og intern medicin) sammenlignet med mandlige læger.
I Murray et al.s (2020) undersøgelse [43] rapporterede forskerne, at fakultetets attraktivitet og studerendes interesse for kurset var forbundet med højere SET-score.Omvendt er kursusbesvær forbundet med lavere SET-score.Derudover gav studerende højere SET-score til unge hvide mandlige humanistiske lærere og til fakultetet med fuld professorater.Der var ingen sammenhænge mellem SET undervisningsevalueringer og lærerundersøgelsesresultater.Andre undersøgelser bekræfter også den positive indvirkning af lærernes fysiske tiltrækningskraft på vurderingsresultater [44].
Clayson et al.(2017) [45] rapporterede, at selvom der er generel enighed om, at SET producerer pålidelige resultater, og at klasse- og lærergennemsnit er konsistente, eksisterer der stadig uoverensstemmelser i individuelle elevers svar.Sammenfattende indikerer resultaterne af denne vurderingsrapport, at eleverne ikke var enige i det, de blev bedt om at evaluere.Reliabilitetsmål udledt af elevevalueringer af undervisningen er utilstrækkelige til at give grundlag for at fastslå validitet.Derfor kan SET nogle gange give information om elever i stedet for lærere.
Sundhedsundervisning SET adskiller sig fra traditionel SET, men undervisere bruger ofte SET, der er tilgængelig i almen videregående uddannelse, snarere end SET, der er specifikt for sundhedsprofessionelle programmer rapporteret i litteraturen.Undersøgelser udført gennem årene har dog identificeret flere problemer.
Jones et al. (1994).[46] gennemførte en undersøgelse for at afgøre spørgsmålet om, hvordan man vurderer medicinsk fakultet fra fakultetets og administratorernes perspektiver.Samlet set var de hyppigst nævnte problemstillinger relateret til undervisningsevaluering.De mest almindelige var generelle klager over utilstrækkeligheden af de nuværende præstationsvurderingsmetoder, hvor respondenterne også fremsatte specifikke klager over SET og den manglende anerkendelse af undervisning i akademiske belønningssystemer.Andre rapporterede problemer omfattede inkonsekvente evalueringsprocedurer og forfremmelseskriterier på tværs af afdelinger, mangel på regelmæssige evalueringer og manglende kobling af evalueringsresultater til lønninger.
Royal et al (2018) [11] skitserer nogle af begrænsningerne ved at bruge SET til at evaluere læseplaner og fakulteter i sundhedsprofessionelle uddannelser i almen videregående uddannelse.Forskere rapporterer, at SET på de videregående uddannelser står over for forskellige udfordringer, fordi det ikke direkte kan anvendes til pensumdesign og kursusundervisning på medicinske skoler.Ofte stillede spørgsmål, herunder spørgsmål om underviseren og kurset, kombineres ofte i ét spørgeskema, så eleverne ofte har svært ved at skelne mellem dem.Derudover undervises kurser i medicinske programmer ofte af flere fakultetsmedlemmer.Dette rejser spørgsmål om validitet i betragtning af det potentielt begrænsede antal interaktioner mellem elever og lærere vurderet af Royal et al.(2018)[11].I en undersøgelse af Hwang et al.(2017) [14] undersøgte forskere konceptet om, hvordan retrospektive kursusevalueringer i vid udstrækning afspejler elevernes opfattelse af forskellige instruktørers kurser.Deres resultater tyder på, at individualiseret klassevurdering er nødvendig for at styre multiafdelingskurser inden for en integreret medicinsk skolepensum.
Uitdehaage og O'Neill (2015) [5] undersøgte, i hvilket omfang medicinstuderende bevidst tog SET i et klasseværelseskursus med flere fakulteter.Hvert af de to prækliniske kurser indeholdt en fiktiv instruktør.Studerende skal give anonyme vurderinger til alle instruktører (inklusive fiktive instruktører) inden for to uger efter at have gennemført kurset, men kan afvise at evaluere instruktøren.Året efter skete det igen, men portrættet af den fiktive foredragsholder var med.66 procent af eleverne bedømte den virtuelle instruktør uden lighed, men færre elever (49 %) bedømte den virtuelle instruktør med lighed til stede.Disse resultater tyder på, at mange medicinstuderende fuldfører SET'er blindt, selv når de ledsages af fotografier, uden nøje overvejelse af, hvem de vurderer, endsige instruktørens præstation.Dette hæmmer forbedringen af uddannelseskvaliteten og kan være skadeligt for lærernes akademiske fremskridt.Forskerne foreslår en ramme, der tilbyder en radikalt anderledes tilgang til SET, der aktivt og aktivt engagerer eleverne.
Der er mange andre forskelle i medicinske uddannelsers uddannelsesplan sammenlignet med andre generelle videregående uddannelser [11].Medicinsk uddannelse er ligesom professionel sundhedsuddannelse klart fokuseret på udvikling af klart definerede professionelle roller (klinisk praksis).Som et resultat bliver læseplaner for medicinske og sundhedsfaglige programmer mere statiske med begrænsede kursus- og fakultetsvalg.Interessant nok tilbydes medicinske uddannelseskurser ofte i et kohorteformat, hvor alle studerende tager det samme kursus på samme tid hvert semester.Derfor kan tilmelding af et stort antal elever (normalt n = 100 eller flere) påvirke undervisningsformen såvel som lærer-elev-relationen.På mange medicinske skoler vurderes de psykometriske egenskaber af de fleste instrumenter ikke ved første brug, og egenskaberne af de fleste instrumenter kan forblive ukendte [11].
Adskillige undersøgelser i løbet af de sidste par år har givet bevis for, at SET kan forbedres ved at adressere nogle vigtige faktorer, der kan påvirke effektiviteten af SET på det instrumentelle, administrative og fortolkende niveau.Figur 3 viser nogle af de trin, der kan bruges til at skabe en effektiv SET-model.De følgende afsnit giver en mere detaljeret beskrivelse.
Forbedre SET på det instrumentelle, ledelsesmæssige og fortolkende niveau for at udvikle effektive SET-modeller.
Som tidligere nævnt bekræfter litteraturen, at kønsbias kan påvirke lærerevalueringer [35, 36, 37, 38, 39, 40, 41, 42, 43, 44, 45, 46].Peterson et al.(2019) [40] gennemførte en undersøgelse, der undersøgte, om elevens køn påvirkede elevernes reaktioner på bias-bekæmpelse.I denne undersøgelse blev SET administreret til fire klasser (to undervist af mandlige lærere og to undervist af kvindelige lærere).Inden for hvert kursus blev eleverne tilfældigt tildelt til at modtage et standardvurderingsværktøj eller det samme værktøj, men ved at bruge sprog designet til at reducere kønsbias.Undersøgelsen viste, at elever, der brugte anti-bias vurderingsværktøjer, gav kvindelige lærere signifikant højere SET-score end elever, der brugte standardvurderingsværktøjer.Desuden var der ingen forskelle i vurderinger af mandlige lærere mellem de to grupper.Resultaterne af denne undersøgelse er væsentlige og demonstrerer, hvordan en relativt simpel sprogintervention kan reducere kønsbias i elevers evalueringer af undervisning.Derfor er det god praksis nøje at overveje alle SET'er og bruge sproget til at reducere kønsbias i deres udvikling [40].
For at få brugbare resultater fra ethvert SET er det vigtigt på forhånd nøje at overveje formålet med vurderingen og formuleringen af spørgsmålene.Selvom de fleste SET-undersøgelser tydeligt angiver et afsnit om organisatoriske aspekter af kurset, dvs. "Kursusevaluering", og et afsnit om fakultetet, dvs. "Lærerevaluering", er forskellen i nogle undersøgelser muligvis ikke indlysende, eller der kan være forvirring blandt studerende om, hvordan man vurderer hvert af disse områder individuelt.Derfor skal udformningen af spørgeskemaet være hensigtsmæssigt, tydeliggøre de to forskellige dele af spørgeskemaet, og gøre eleverne opmærksomme på, hvad der skal vurderes på hvert område.Derudover anbefales pilottestning for at afgøre, om eleverne fortolker spørgsmålene på den tilsigtede måde [24].I en undersøgelse af Oermann et al.(2018) [26] søgte og syntetiserede forskerne litteratur, der beskriver brugen af SET i en bred vifte af discipliner inden for bachelor- og kandidatuddannelser for at give undervisere vejledning om brugen af SET i sygeplejerske og andre sundhedsprofessionelle programmer.Resultaterne tyder på, at SET-instrumenter bør evalueres før brug, herunder pilottestning af instrumenterne med elever, som muligvis ikke er i stand til at fortolke SET-instrumentets elementer eller spørgsmål som instruktørens hensigt.
Flere undersøgelser har undersøgt, om SET-styringsmodellen påvirker elevernes engagement.
Daumier et al.(2004) [47] sammenlignede studerendes vurderinger af instruktøruddannelse gennemført i klassen med vurderinger indsamlet online ved at sammenligne antallet af svar og vurderinger.Forskning viser, at online-undersøgelser typisk har lavere svarprocenter end undersøgelser i klassen.Undersøgelsen fandt dog, at onlinevurderinger ikke producerede signifikant forskellige gennemsnitlige karakterer fra traditionelle klasseværelsesvurderinger.
Der var en rapporteret mangel på tovejskommunikation mellem elever og lærere under færdiggørelsen af online (men ofte trykte) SET'er, hvilket resulterede i manglende mulighed for afklaring.Derfor er betydningen af SET-spørgsmål, kommentarer eller elevevalueringer muligvis ikke altid klar [48].Nogle institutioner har løst dette problem ved at bringe studerende sammen i en time og afsætte en bestemt tid til at gennemføre SET online (anonymt) [49].I deres undersøgelse har Malone et al.(2018) [49] holdt adskillige møder for at diskutere formålet med SET med eleverne, hvem der ville se SET-resultaterne og hvordan resultaterne ville blive brugt, og alle andre spørgsmål, som eleverne rejste.SET udføres meget som en fokusgruppe: den kollektive gruppe besvarer åbne spørgsmål gennem uformel afstemning, debat og afklaring.Svarprocenten var over 70-80 %, hvilket gav lærere, administratorer og læseplansudvalg omfattende information [49].
Som nævnt ovenfor rapporterede forskerne i Uitdehaage og O'Neills undersøgelse [5], at elever i deres undersøgelse vurderede ikke-eksisterende lærere.Som nævnt tidligere, er dette et almindeligt problem i medicinske skolekurser, hvor hvert kursus kan blive undervist af mange fakultetsmedlemmer, men studerende husker måske ikke, hvem der har bidraget til hvert kursus, eller hvad hvert fakultetsmedlem gjorde.Nogle institutioner har behandlet dette problem ved at levere et fotografi af hver underviser, hans/hendes navn og emnet/datoen præsenteret for at genopfriske elevernes hukommelse og undgå problemer, der kompromitterer effektiviteten af SET [49].
Det måske vigtigste problem forbundet med SET er, at lærere ikke er i stand til at fortolke kvantitative og kvalitative SET-resultater korrekt.Nogle lærere vil måske lave statistiske sammenligninger på tværs af år, nogle kan se mindre stigninger/fald i gennemsnitsscore som meningsfulde ændringer, nogle vil tro på hver undersøgelse, og andre er direkte skeptiske over for enhver undersøgelse [45,50, 51].
Manglende fortolkning af resultater eller bearbejdelse af elevfeedback kan påvirke lærernes holdning til undervisning.Resultaterne af Lutovac et al.(2017) [52] Understøttende læreruddannelse er nødvendig og gavnlig for at give feedback til eleverne.Medicinsk uddannelse har et presserende behov for træning i den korrekte fortolkning af SET-resultater.Derfor bør det medicinske fakultet modtage træning i, hvordan man evaluerer resultater og de vigtige områder, som de bør fokusere på [50, 51].
De beskrevne resultater tyder således på, at SET'er bør designes, administreres og fortolkes omhyggeligt for at sikre, at SET-resultater har en meningsfuld indvirkning på alle relevante interessenter, herunder fakultetet, lægeskoleadministratorer og studerende.
På grund af nogle af begrænsningerne ved SET bør vi fortsætte med at stræbe efter at skabe et omfattende evalueringssystem for at reducere skævhed i undervisningseffektivitet og understøtte den faglige udvikling af medicinske undervisere.
En mere fuldstændig forståelse af det kliniske fakultets undervisningskvalitet kan opnås ved at indsamle og triangulere data fra flere kilder, herunder studerende, kolleger, programadministratorer og fakultetets selvevalueringer [53, 54, 55, 56, 57].De følgende afsnit beskriver mulige andre værktøjer/metoder, der kan bruges ud over effektiv SET for at hjælpe med at udvikle en mere passende og fuldstændig forståelse af træningseffektivitet (Figur 4).
Metoder, der kan bruges til at udvikle en omfattende model af et system til vurdering af effektiviteten af undervisning på en lægeskole.
En fokusgruppe er defineret som "en gruppediskussion organiseret for at udforske et specifikt sæt af problemstillinger" [58].I løbet af de sidste par år har medicinske skoler oprettet fokusgrupper for at få kvalitetsfeedback fra studerende og adressere nogle af faldgruberne ved online SET.Disse undersøgelser viser, at fokusgrupper er effektive til at give kvalitetsfeedback og øge elevernes tilfredshed [59, 60, 61].
I en undersøgelse af Brundle et al.[59] Forskerne implementerede en elevevalueringsgruppeproces, der gjorde det muligt for kursusledere og studerende at diskutere kurser i fokusgrupper.Resultater indikerer, at fokusgruppediskussioner supplerer online vurderinger og øger elevernes tilfredshed med den overordnede kursusvurderingsproces.Studerende værdsætter muligheden for at kommunikere direkte med kursusledere og tror på, at denne proces kan bidrage til pædagogisk forbedring.De følte også, at de var i stand til at forstå kursuslederens synspunkt.Ud over studerende vurderede kursusledere også, at fokusgrupper faciliterede mere effektiv kommunikation med studerende [59].Brugen af fokusgrupper kan således give lægeskolerne en mere fuldstændig forståelse af kvaliteten af hvert kursus og undervisningseffektiviteten på det respektive fakultet.Det skal dog bemærkes, at fokusgrupperne selv har nogle begrænsninger, såsom at kun et lille antal studerende deltager i dem i forhold til online SET-programmet, som er tilgængeligt for alle elever.Derudover kan det være en tidskrævende proces for rådgivere og studerende at gennemføre fokusgrupper til forskellige kurser.Dette udgør betydelige begrænsninger, især for medicinstuderende, der har meget travle tidsplaner og kan påtage sig kliniske placeringer på forskellige geografiske steder.Derudover kræver fokusgrupper et stort antal erfarne facilitatorer.Imidlertid kan inkorporering af fokusgrupper i evalueringsprocessen give mere detaljeret og specifik information om effektiviteten af træning [48, 59, 60, 61].
Schiekierka-Schwacke et al.(2018) [62] undersøgte studerendes og fakultets opfattelser af et nyt værktøj til vurdering af fakultetets præstationer og studerendes læringsresultater på to tyske medicinske skoler.Fokusgruppediskussioner og individuelle interviews blev gennemført med fakultet- og medicinstuderende.Lærerne satte pris på den personlige feedback fra vurderingsværktøjet, og eleverne rapporterede, at der skulle oprettes en feedbackloop, inklusive mål og konsekvenser, for at tilskynde til rapportering af vurderingsdata.Resultaterne af denne undersøgelse understøtter således vigtigheden af at lukke sløjfen af kommunikation med eleverne og informere dem om vurderingsresultater.
Peer Review of Teaching (PRT) programmer er meget vigtige og har været implementeret i de videregående uddannelser i mange år.PRT involverer en samarbejdsproces med at observere undervisning og give feedback til observatøren for at forbedre undervisningens effektivitet [63].Derudover kan selvrefleksionsøvelser, strukturerede opfølgende diskussioner og systematisk tildeling af uddannede kollegaer være med til at forbedre effektiviteten af PRT og undervisningskulturen på afdelingen [64].Disse programmer rapporteres at have mange fordele, da de kan hjælpe lærere med at modtage konstruktiv feedback fra peer-lærere, som måske tidligere har stået over for lignende vanskeligheder, og kan yde større støtte ved at give nyttige forslag til forbedringer [63].Ydermere, når det bruges konstruktivt, kan peer review forbedre kursusindhold og leveringsmetoder og støtte medicinske undervisere i at forbedre kvaliteten af deres undervisning [65, 66].
En nylig undersøgelse af Campbell et al.(2019) [67] viser, at peer-støttemodellen på arbejdspladsen er en acceptabel og effektiv lærerudviklingsstrategi for kliniske sundhedsundervisere.I en anden undersøgelse har Caygill et al.[68] gennemførte en undersøgelse, hvor et specielt designet spørgeskema blev sendt til sundhedspædagoger ved University of Melbourne for at give dem mulighed for at dele deres erfaringer med at bruge PRT.Resultaterne indikerer, at der er en ophobet interesse for PRT blandt medicinske undervisere, og at det frivillige og informative peer review-format anses for at være en vigtig og værdifuld mulighed for faglig udvikling.
Det er værd at bemærke, at PRT-programmer skal være omhyggeligt designet for at undgå at skabe et dømmende, "ledelsesmæssigt" miljø, der ofte fører til øget angst blandt observerede lærere [69].Derfor bør målet være omhyggeligt at udvikle PRT-planer, der vil komplementere og lette skabelsen af et sikkert miljø og give konstruktiv feedback.Derfor er der behov for særlig uddannelse for at uddanne anmeldere, og PRT-programmer bør kun involvere virkelig interesserede og erfarne lærere.Dette er især vigtigt, hvis oplysningerne fra PRT bruges i fakultetets beslutninger såsom forfremmelser til højere niveauer, lønstigninger og forfremmelser til vigtige administrative stillinger.Det skal bemærkes, at PRT er tidskrævende og, ligesom fokusgrupper, kræver deltagelse af et stort antal erfarne fakultetsmedlemmer, hvilket gør denne tilgang vanskelig at implementere på ressourcesvage medicinske skoler.
Newman et al.(2019) [70] beskriver strategier brugt før, under og efter træning, observationer, der fremhæver bedste praksis og identificerer løsninger på læringsproblemer.Forskerne gav 12 forslag til anmelderne, herunder: (1) vælg dine ord med omhu;(2) tillade observatøren at bestemme retningen for diskussionen;(3) holde feedback fortrolig og formateret;(4) holde feedback fortrolig og formateret;Feedback fokuserer på undervisningsfærdigheder frem for den enkelte lærer;(5) Lær dine kollegaer at kende (6) Tag hensyn til dig selv og andre (7) Husk at stedord spiller en vigtig rolle i at give feedback, (8) Brug spørgsmål til at kaste lys over undervisningsperspektivet, (10) Etabler processer tillid og feedback i peer-observationer, (11) gør observation af læring til en win-win, (12) lav en handlingsplan.Forskere undersøger også virkningen af bias på observationer, og hvordan processen med at lære, observere og diskutere feedback kan give værdifulde læringserfaringer for begge parter, hvilket fører til langsigtede partnerskaber og forbedret uddannelseskvalitet.Gomaly et al.(2014) [71] rapporterede, at kvaliteten af effektiv feedback bør omfatte (1) afklaring af opgaven ved at give anvisninger, (2) øget motivation til at tilskynde til større indsats og (3) modtagerens opfattelse af det som en værdifuld proces.leveret af en velrenommeret kilde.
Selvom medicinsk fakultet modtager feedback om PRT, er det vigtigt at træne fakultetet i, hvordan man fortolker feedback (svarende til anbefalingen om at modtage undervisning i SET-tolkning) og at give fakultetet tilstrækkelig tid til konstruktivt at reflektere over den modtagne feedback.
Indlægstid: 24. november 2023