Utvärdering av läroplan och fakultet är avgörande för alla institutioner för högre utbildning, inklusive medicinska skolor. Studentutvärderingar av undervisning (SET) har vanligtvis formen av anonyma frågeformulär, och även om de ursprungligen utvecklades för att utvärdera kurser och program, har de med tiden också använts för att mäta undervisningseffektivitet och därefter fatta viktiga undervisningsrelaterade beslut. Lärares professionella utveckling. Vissa faktorer och fördomar kan emellertid påverka inställda poäng och undervisningseffektivitet kan inte mätas objektivt. Även om litteraturen om kurs- och fakultetsutvärdering i allmän högre utbildning är väl etablerad, finns det oro över att använda samma verktyg för att utvärdera kurser och fakulteter i medicinska program. I synnerhet kan inte högre utbildning inte direkt tillämpas på läroplanutformning och implementering i medicinska skolor. Denna översyn ger en översikt över hur inställd kan förbättras på instrument-, hanterings- och tolkningsnivåerna. Dessutom påpekar den här artikeln att genom att använda olika metoder som peer review, fokusgrupper och självbedömning för att samla in och triangulera data från flera källor, inklusive studenter, kamrater, programchefer och självmedvetenhet, kan ett omfattande bedömningssystem konstrueras. Mäta effektivt undervisningseffektivitet, stödja den professionella utvecklingen av medicinska lärare och förbättra kvaliteten på undervisningen i medicinsk utbildning.
Kurs- och programutvärdering är en intern kvalitetskontrollprocess i alla institutioner för högre utbildning, inklusive medicinska skolor. Studentutvärdering av undervisning (SET) har vanligtvis formen av ett anonymt papper eller online -frågeformulär med hjälp av en betygsskala som en Likert -skala (vanligtvis fem, sju eller högre) som gör det möjligt för människor att ange sitt avtal eller avtal. Jag håller inte med specifika uttalanden) [1,2,3]. Även om uppsättningar ursprungligen utvecklades för att utvärdera kurser och program, har de med tiden också använts för att mäta undervisningseffektivitet [4, 5, 6]. Undervisningseffektivitet anses vara viktig eftersom det antas att det finns ett positivt samband mellan undervisningseffektivitet och studentinlärning [7]. Även om litteraturen inte tydligt definierar effektiviteten i träningen, specificeras den vanligtvis genom specifika egenskaper hos träning, till exempel "gruppinteraktion", "förberedelser och organisation", "feedback till studenter" [8].
Information som erhållits från SET kan ge användbar information, till exempel om det finns ett behov av att justera undervisningsmaterialet eller undervisningsmetoderna som används i en viss kurs. SET används också för att fatta viktiga beslut relaterade till lärares professionella utveckling [4,5,6]. Emellertid är lämpligheten för denna strategi tvivelaktig när institutioner för högre utbildning fattar beslut om fakulteten, till exempel främjande av högre akademiska rangordningar (ofta förknippade med senioritet och löneförhöjningar) och viktiga administrativa positioner inom institutionen [4, 9]. Dessutom kräver institutioner ofta att nya fakulteter inkluderar uppsättningar från tidigare institutioner i sina ansökningar om nya positioner, vilket därmed påverkar inte bara fakultets kampanjer inom institutionen, utan också potentiella nya arbetsgivare [10].
Även om litteraturen om läroplan och lärarutvärdering är väl etablerad inom området för allmän högre utbildning, är detta inte fallet inom medicin och hälsovård [11]. Läroplanen och behoven hos medicinska lärare skiljer sig från den allmänna högre utbildningen. Till exempel används teaminlärning ofta i integrerade medicinska utbildningskurser. Detta innebär att läroplanen för medicinsk skolor består av en serie kurser som undervisas av ett antal fakultetsmedlemmar som har utbildning och erfarenhet inom olika medicinska discipliner. Även om eleverna drar nytta av djupgående kunskap från experter inom området under denna struktur, står de ofta inför utmaningen att anpassa sig till varje lärares olika undervisningsstilar [1, 12, 13, 14].
Även om det finns skillnader mellan allmän högre utbildning och medicinsk utbildning, används uppsättningen som används i det förstnämnda också i medicin- och sjukvårdskurser. Imellertid utgör en genomförande i allmän högre utbildning många utmaningar när det gäller utvärdering av läroplan och fakultet i hälso- och sjukvårdsprogram [11]. På grund av skillnader i undervisningsmetoder och lärarnas kvalifikationer kan resultaten av utvärderingsresultaten inte inkludera studenters åsikter från alla lärare eller klasser. Forskning från Uytenhaage och O'Neill (2015) [5] föreslår att att be eleverna att betygsätta alla enskilda lärare i slutet av en kurs kan vara olämpligt eftersom det är nästan omöjligt för eleverna att komma ihåg och kommentera flera lärarbetyg. kategorier. Dessutom är många lärare i medicinsk utbildning också läkare för vilka undervisning endast är en liten del av deras ansvar [15, 16]. Eftersom de främst är involverade i patientvård och i många fall forskning har de ofta lite tid att utveckla sina undervisningsförmågor. Läkare som lärare bör emellertid få tid, stöd och konstruktiv feedback från sina organisationer [16].
Medicinska studenter tenderar att vara mycket motiverade och hårt arbetande individer som framgångsrikt får tillträde till medicinskolan (genom en konkurrenskraftig och krävande process internationellt). Under medicinsk skola förväntas dessutom medicinska studenter förvärva en stor mängd kunskap och utveckla ett stort antal färdigheter på kort tid, samt för att lyckas med komplexa interna och omfattande nationella bedömningar [17,18,19 , 20]. På grund av de höga standarder som förväntas av medicinska studenter kan medicinska studenter vara mer kritiska och ha högre förväntningar på högkvalitativ undervisning än studenter inom andra discipliner. Således kan medicinska studenter ha lägre betyg från sina professorer jämfört med studenter inom andra discipliner av de skäl som nämns ovan. Intressant nog har tidigare studier visat ett positivt samband mellan studentmotivation och individuella lärarutvärderingar [21]. Under de senaste 20 åren har de flesta läroplaner för medicinska skolor runt om i världen blivit vertikalt integrerade [22], så att studenter utsätts för klinisk praxis från de tidigaste åren av sitt program. Under de senaste åren har således läkare blivit alltmer involverade i utbildning av medicinska studenter, som stödjer, till och med tidigt i sina program, vikten av att utveckla uppsättningar skräddarsydda för specifika fakultetspopulationer [22].
På grund av den specifika karaktären av medicinsk utbildning som nämns ovan, bör uppsättningar som används för att utvärdera allmänna högre utbildningskurser som undervisas av en enda fakultetsmedlem anpassas för att utvärdera den integrerade läroplanen och kliniska fakulteten för medicinska program [14]. Därför finns det ett behov av att utveckla effektivare uppsättningsmodeller och omfattande utvärderingssystem för effektivare tillämpning inom medicinsk utbildning.
Den nuvarande översynen beskriver de senaste framstegen i användningen av inställda i (allmän) högre utbildning och dess begränsningar och beskriver sedan de olika behoven av uppsättning för medicinsk utbildningskurser och fakultet. Denna recension ger en uppdatering om hur uppsättningen kan förbättras på instrumentella, administrativa och tolkande nivåer och fokuserar på målen att utveckla effektiva uppsättningsmodeller och omfattande utvärderingssystem som effektivt kommer att mäta undervisningseffektivitet, stödja utvecklingen av professionella hälsoutbildare och förbättra Kvaliteten på undervisningen i medicinsk utbildning.
Denna studie följer studien av Green et al. (2006) [23] för råd och Baumeister (2013) [24] för råd om att skriva berättelser. Vi beslutade att skriva en berättande granskning om detta ämne eftersom denna typ av granskning hjälper till att presentera ett brett perspektiv på ämnet. Eftersom berättande recensioner bygger på metodiskt olika studier hjälper de dessutom att svara på bredare frågor. Dessutom kan berättande kommentarer hjälpa till att stimulera tanken och diskussionen om ett ämne.
Hur används set i medicinsk utbildning och vilka utmaningar jämfört med set som används i allmän högre utbildning,
PubMed- och Eric -databaserna sökte med hjälp av en kombination av söktermerna "Studentundervisningsutvärdering", "Lärares effektivitet", "Medicinsk utbildning", "Högre utbildning" . Artiklar publicerade mellan 2021 och 2021. Inkluderingskriterier: Inkluderade studier var ursprungliga studier eller granskningsartiklar, och studierna var relevanta för områdena för de tre huvudsakliga forskningsfrågorna. Uteslutningskriterier: Studier som inte var engelska eller studier där artiklar i fulltext inte kunde hittas eller inte var relevanta för de tre huvudsakliga forskningsfrågorna utesluts från det aktuella granskningsdokumentet. Efter att ha valt publikationer organiserades de i följande ämnen och tillhörande subtopics: (a) användningen av uppsättning i allmän högre utbildning och dess begränsningar, (b) användningen av uppsättning inom medicinsk utbildning och dess relevans för att ta itu med frågor relaterade till jämförelse av Uppsättning (c) Förbättra uppsättningen på instrumentella, ledande och tolkande nivåer för att utveckla effektiva uppsättningsmodeller.
Figur 1 tillhandahåller ett flödesschema över utvalda artiklar som ingår och diskuteras i den aktuella delen av översynen.
SET har traditionellt använts i högre utbildning och ämnet har studerats väl i litteraturen [10, 21]. Ett stort antal studier har emellertid undersökt sina många begränsningar och ansträngningar för att hantera dessa begränsningar.
Forskning visar att det finns många variabler som påverkar uppsättningar [10, 21, 25, 26]. Därför är det viktigt för administratörer och lärare att förstå dessa variabler när de tolkar och använder data. Nästa avsnitt ger en kort översikt över dessa variabler. Figur 2 visar några av de faktorer som påverkar uppsättningar, som är detaljerade i följande avsnitt.
Under de senaste åren har användningen av online -satser ökat jämfört med papperssatser. Bevis i litteraturen tyder emellertid på att onlineuppsättningen kan slutföras utan att studenter ägnar den nödvändiga uppmärksamheten till slutförandet. I en intressant studie av Uitdehaage och O'Neill [5] lades icke-existerande lärare till uppsättningen och många elever gav feedback [5]. Dessutom antyder bevis i litteraturen att studenter ofta tror att slutförandet av SET inte leder till förbättrad utbildningsuppnåelse, som, i kombination med det upptagna schemat för medicinska studenter, kan leda till lägre svarsfrekvens [27]. Även om forskning visar att åsikter från studenter som tar testet inte skiljer sig från hela gruppen, kan låga svarsfrekvenser fortfarande leda till att lärare tar resultaten mindre på allvar [28].
De flesta onlineuppsättningar är slutförda anonymt. Tanken är att låta eleverna uttrycka sina åsikter fritt utan antagandet att deras uttryck kommer att ha någon inverkan på deras framtida relationer med lärare. I Alfonso et al .: S studie [29] använde forskare anonyma betyg och betyg där raters var tvungna att ge sina namn (offentliga betyg) för att utvärdera undervisningseffektiviteten hos medicinska skolfakulteter av invånare och medicinska studenter. Resultaten visade att lärare i allmänhet fick lägre på de anonyma bedömningarna. Författarna hävdar att eleverna är mer ärliga i anonyma bedömningar på grund av vissa hinder i öppna bedömningar, till exempel skadade arbetsrelationer med deltagande lärare [29]. Det bör emellertid också noteras att anonymiteten som ofta är förknippad med onlineuppsättning kan leda till att vissa studenter är respektlösa och hämnd mot instruktören om utvärderingsresultat inte uppfyller studentens förväntningar [30]. Forskning visar emellertid att studenter sällan ger respektlöst feedback, och den senare kan ytterligare begränsas genom att lära eleverna att ge konstruktiv feedback [30].
Flera studier har visat att det finns en korrelation mellan elevernas uppsättningar, deras testprestandaförväntningar och deras testtillfredsställelse [10, 21]. Till exempel rapporterade Strobe (2020) [9] att eleverna belönar enkla kurser och lärare belönar svaga betyg, vilket kan uppmuntra dålig undervisning och leda till betygsinflation [9]. I en ny studie har Looi et al. (2020) [31] forskare har rapporterat att mer gynnsamma uppsättningar är relaterade och lättare att bedöma. Dessutom finns det störande bevis på att uppsättningen är omvänt relaterad till studentprestanda i efterföljande kurser: ju högre betyg, desto sämre studentprestanda i efterföljande kurser. Cornell et al. (2016) [32] genomförde en studie för att undersöka om studenter lärde sig relativt mer av lärare vars uppsättning de betygsatt högt. Resultaten visar att när lärande bedöms i slutet av en kurs, bidrar lärare med de högsta betyg också till inlärningen av de flesta studenter. Men när lärande mäts av prestanda i efterföljande relevanta kurser är lärare som gör relativt låga de mest effektiva. Forskarna antog att att göra en kurs mer utmanande på ett produktivt sätt kan sänka betyg men förbättra lärandet. Således bör studentbedömningar inte vara den enda grunden för utvärdering av undervisningen, utan bör erkännas.
Flera studier visar att uppsättning prestanda påverkas av själva kursen och dess organisation. Ming och Baozhi [33] fann i sin studie att det fanns betydande skillnader i uppsättningsresultat bland studenter i olika ämnen. Till exempel har kliniska vetenskaper högre uppsättningar än grundvetenskap. Författarna förklarade att detta beror på att medicinska studenter är intresserade av att bli läkare och därför har ett personligt intresse och högre motivation att delta mer i kliniska vetenskapskurser jämfört med grundläggande vetenskapskurser [33]. Liksom i fallet med valfria har studentmotivation för ämnet också en positiv effekt på poäng [21]. Flera andra studier stöder också den kurstypen kan påverka uppsättningsresultat [10, 21].
Dessutom har andra studier visat att ju mindre klassstorleken, desto högre är nivån på uppsättning av lärare [10, 33]. En möjlig förklaring är att mindre klassstorlekar ökar möjligheterna för lärarstudentinteraktion. Dessutom kan förhållandena vid vilka bedömningen genomförs påverka resultaten. Till exempel verkar uppsättningsresultat påverkas av den tid och dag som kursen lärs ut, liksom veckodagen som uppsättningen är klar (t.ex. bedömningar som slutförts på helgerna tenderar att resultera i mer positiva poäng) än bedömningar genomförda genomförda tidigare i veckan. [10].
En intressant studie av Hessler et al ifrågasätter också effektiviteten hos SET. [34]. I denna studie genomfördes en randomiserad kontrollerad studie i en akutmedicinskurs. Tredjeårsmedicinska studenter tilldelades slumpmässigt antingen en kontrollgrupp eller en grupp som fick gratis chokladchipkakor (Cookie Group). Alla grupper undervisades av samma lärare, och utbildningsinnehållet och kursmaterialet var identiska för båda grupperna. Efter kursen ombads alla studenter att slutföra en uppsättning. Resultaten visade att cookiegruppen bedömde lärare betydligt bättre än kontrollgruppen och ifrågasatte effektiviteten hos uppsättningen [34].
Bevis i litteraturen stöder också att kön kan påverka uppsättningar [35,36,37,38,39,40,41,42,43,44,45,46]. Till exempel har vissa studier visat ett samband mellan elevernas kön och utvärderingsresultat: kvinnliga studenter fick högre poäng än manliga studenter [27]. De flesta bevis bekräftar att elever betygsätter kvinnliga lärare lägre än manliga lärare [37, 38, 39, 40]. Till exempel Boring et al. [38] visade att både manliga och kvinnliga studenter trodde att män var mer kunniga och hade starkare ledarskapsförmågor än kvinnor. Det faktum att kön och stereotyper påverkar uppsättningen stöds också av studien av Macnell et al. [41], som rapporterade att elever i sin studie bedömde kvinnliga lärare lägre än manliga lärare om olika aspekter av undervisningen [41]. Dessutom gav Morgan et al [42] bevis för att kvinnliga läkare fick lägre undervisningsbetyg i fyra stora kliniska rotationer (kirurgi, pediatrik, obstetrik och gynekologi och internmedicin) jämfört med manliga läkare.
I Murray et al. (2020) -studien [43] rapporterade forskarna att fakulteten attraktivitet och studentintresse i kursen var förknippade med högre uppsättningar. Omvänt är kurssvårigheter förknippade med lägre uppsättningsresultat. Dessutom gav studenter högre uppsättningar till unga vita manliga humaniora -lärare och till fakulteten som innehar full professur. Det fanns inga korrelationer mellan utvärderingar av utbildningar och resultat för lärarundersökning. Andra studier bekräftar också den positiva effekten av lärarnas fysiska attraktivitet på utvärderingsresultaten [44].
Clayson et al. (2017) [45] rapporterade att även om det finns allmän överenskommelse om att SET ger tillförlitliga resultat och att klass- och lärargenomsnitt är konsekventa, finns det fortfarande inkonsekvenser i enskilda studentsvar. Sammanfattningsvis indikerar resultaten från denna utvärderingsrapport att eleverna inte var överens om vad de ombads att utvärdera. Tillförlitlighetsåtgärder härrörande från studentutvärderingar av undervisning är otillräckliga för att ge en grund för att fastställa giltighet. Därför kan SET ibland ge information om elever snarare än lärare.
Hälsoutbildningsuppsättning skiljer sig från traditionell uppsättning, men lärare använder ofta uppsättning tillgängliga i allmän högre utbildning snarare än att ställa in specifika för hälsoprofessionsprogram som rapporterats i litteraturen. Studier som genomförts under åren har emellertid identifierat flera problem.
Jones et al (1994). [46] genomförde en studie för att bestämma frågan om hur man utvärderar fakulteten för medicinsk skolor ur fakultetens och administratörernas perspektiv. Sammantaget är de mest nämnda frågorna relaterade till utvärdering av undervisning. De vanligaste var allmänna klagomål om bristande metoder för de aktuella prestationsbedömningsmetoderna, där respondenterna också gjorde specifika klagomål om uppsättning och bristen på erkännande av undervisning i akademiska belöningssystem. Andra problem rapporterade inkluderade inkonsekventa utvärderingsförfaranden och marknadsföringskriterier mellan avdelningar, brist på regelbundna utvärderingar och ett misslyckande med att koppla utvärderingsresultat till löner.
Royal et al (2018) [11] beskriver några av begränsningarna för att använda uppsättning för att utvärdera läroplan och fakultet i hälso- och sjukvårdsprogram i allmän högre utbildning. Forskare rapporterar att de ställs in i högre utbildning står inför olika utmaningar eftersom det inte kan tillämpas direkt på läroplanens design och kursundervisning i medicinska skolor. Vanliga ställningar, inklusive frågor om instruktören och kursen, kombineras ofta till ett frågeformulär, så eleverna har ofta problem med att skilja mellan dem. Dessutom undervisas kurser i medicinska program ofta av flera fakultetsmedlemmar. Detta ställer frågor om giltighet med tanke på det potentiellt begränsade antalet interaktioner mellan elever och lärare bedömda av Royal et al. (2018) [11]. I en studie av Hwang et al. (2017) [14] undersökte forskare begreppet hur retrospektiva kursutvärderingar omfattande återspeglar studentuppfattningar om olika instruktörskurser. Deras resultat tyder på att individualiserad klassbedömning är nödvändig för att hantera multidepartmental kurser inom en integrerad läroplan för medicinsk skola.
Uitdehaage och O'Neill (2015) [5] undersökte i vilken utsträckning medicinska studenter medvetet tog in en klassrumskurs med flera fakulteter. Var och en av de två prekliniska kurserna innehöll en fiktiv instruktör. Studenter måste tillhandahålla anonyma betyg till alla instruktörer (inklusive fiktiva instruktörer) inom två veckor efter genomförandet av kursen, men kan avslå för att utvärdera instruktören. Året efter hände det igen, men porträttet av den fiktiva föreläsaren inkluderades. Sextiosex procent av eleverna bedömde den virtuella instruktören utan likhet, men färre studenter (49%) bedömde den virtuella instruktören med likhet närvarande. Dessa resultat tyder på att många medicinska studenter slutför uppsättningar blint, även när de åtföljs av fotografier, utan noggrant övervägande av vem de bedömer, än mindre instruktörens prestanda. Detta hindrar förbättringen av programkvaliteten och kan vara skadligt för lärarnas akademiska framsteg. Forskarna föreslår ett ramverk som erbjuder en radikalt annorlunda strategi för att ställa in som aktivt och aktivt engagerar studenter.
Det finns många andra skillnader i utbildningens läroplan för medicinska program jämfört med andra allmänna högre utbildningsprogram [11]. Medicinsk utbildning, som professionell hälsoutbildning, är tydligt fokuserad på utvecklingen av tydligt definierade professionella roller (klinisk praxis). Som ett resultat blir läroplanerna för medicinska och hälsoprogram mer statiska, med begränsade kurs- och fakultetsval. Intressant nog erbjuds ofta medicinsk utbildningskurser i ett kohortformat, där alla studenter tar samma kurs samtidigt varje termin. Därför kan registrera ett stort antal studenter (vanligtvis n = 100 eller mer) påverka undervisningsformatet såväl som relationen mellan lärarstudenten. I många medicinska skolor bedöms dessutom de psykometriska egenskaperna hos de flesta instrument inte vid första användning, och egenskaperna hos de flesta instrument kan förbli okända [11].
Flera studier under de senaste åren har gett bevis på att uppsättningen kan förbättras genom att hantera några viktiga faktorer som kan påverka effektiviteten hos set på de instrumentella, administrativa och tolkande nivåerna. Figur 3 visar några av stegen som kan användas för att skapa en effektiv uppsättningsmodell. Följande avsnitt ger en mer detaljerad beskrivning.
Förbättra uppsättningen på instrumentella, ledande och tolkande nivåer för att utveckla effektiva uppsättningsmodeller.
Som nämnts tidigare bekräftar litteraturen att könsförskjutning kan påverka utvärderingar av lärarnas utvärderingar [35, 36, 37, 38, 39, 40, 41, 42, 43, 44, 45, 46]. Peterson et al. (2019) [40] genomförde en studie som undersökte om studentkön påverkade studentens svar på partiskhetsarbetet. I denna studie administrerades SET till fyra klasser (två undervisade av manliga lärare och två undervisade av kvinnliga lärare). Inom varje kurs tilldelades eleverna slumpmässigt att få ett standardbedömningsverktyg eller samma verktyg men med hjälp av språk som är utformat för att minska könsförspänning. Studien fann att studenter som använde anti-partiska utvärderingsverktyg gav kvinnliga lärare betydligt högre uppsättningar än studenter som använde standardbedömningsverktyg. Dessutom fanns det inga skillnader i betyg av manliga lärare mellan de två grupperna. Resultaten av denna studie är betydande och visar hur en relativt enkel språkintervention kan minska könsförskjutningen vid studentutvärderingar av undervisningen. Därför är det god praxis att noggrant överväga alla uppsättningar och använda språk för att minska könsförskjutningen i deras utveckling [40].
För att få användbara resultat från alla uppsättningar är det viktigt att noggrant överväga syftet med bedömningen och formuleringen av frågorna i förväg. Även om de flesta inställda undersökningar tydligt indikerar ett avsnitt om organisatoriska aspekter av kursen, kan dvs "kursutvärdering" och ett avsnitt om fakulteten, dvs. "lärarutvärdering", i vissa undersökningar kan skillnaden inte vara uppenbar, eller så kan det vara förvirring bland studenter om hur man bedömer vart och ett av dessa områden individuellt. Därför måste utformningen av frågeformuläret vara lämpligt, klargöra de två olika delarna av frågeformuläret och göra eleverna medvetna om vad som bör bedömas i varje område. Dessutom rekommenderas pilotprovning för att avgöra om eleverna tolkar frågorna på det avsedda sättet [24]. I en studie av Oermann et al. (2018) [26] sökte forskarna och syntetiserade litteratur som beskrev användningen av uppsättning inom ett brett spektrum av discipliner inom grundutbildningen och forskarutbildningen för att ge lärare vägledning om användning av SET i omvårdnad och andra hälso- och sjukvårdsprogram. Resultaten tyder på att uppsättningsinstrument ska utvärderas före användning, inklusive pilottestning av instrumenten med studenter som kanske inte kan tolka de inställda instrumentobjekten eller frågor som avses av instruktören.
Flera studier har undersökt om den uppsättningsstyrningsmodellen påverkar studentengagemanget.
Daumier et al. (2004) [47] jämförde studentbetyg av instruktörsträning som slutförts i klassen med betyg som samlats in online genom att jämföra antalet svar och betyg. Forskning visar att onlineundersökningar vanligtvis har lägre svarsfrekvens än undersökningar i klassen. Studien fann emellertid att online -bedömningar inte producerade signifikant olika genomsnittliga betyg från traditionella klassrumsbedömningar.
Det fanns en rapporterad brist på tvåvägskommunikation mellan elever och lärare under slutförandet av online (men ofta tryckta) uppsättningar, vilket resulterade i brist på möjlighet till förtydligande. Därför kanske betydelsen av fastställda frågor, kommentarer eller studentutvärderingar inte alltid är tydliga [48]. Vissa institutioner har tagit upp denna fråga genom att förena studenter i en timme och tilldela en viss tid för att slutföra uppsättningen online (anonymt) [49]. I sin studie har Malone et al. (2018) [49] höll flera möten för att diskutera med eleverna syftet med SET, som skulle se uppsättningsresultaten och hur resultaten skulle användas och alla andra frågor som tas upp av studenter. SET bedrivs mycket som en fokusgrupp: den kollektiva gruppen svarar öppna frågor genom informell omröstning, debatt och förtydligande. Svarsfrekvensen var över 70–80%, vilket gav lärare, administratörer och läroplankommittéer med omfattande information [49].
Som nämnts ovan, i Uitdehaage och O'Neills studie [5], rapporterade forskarna att studenter i sin studie rankade som icke-existerande lärare. Som nämnts tidigare är detta ett vanligt problem i medicinska skolkurser, där varje kurs kan undervisas av många fakultetsmedlemmar, men studenter kanske inte kommer ihåg vem som har bidragit till varje kurs eller vad varje fakultetsmedlem gjorde. Vissa institutioner har tagit upp denna fråga genom att tillhandahålla ett fotografi av varje föreläsare, hans/hennes namn och ämnet/datum som presenteras för att uppdatera elevernas minnen och undvika problem som komprometterar effektiviteten hos SET [49].
Det kanske viktigaste problemet som är förknippat med uppsättningen är att lärare inte kan tolka kvantitativa och kvalitativa uppsättningsresultat. Vissa lärare kanske vill göra statistiska jämförelser genom år, andra kan se mindre ökningar/minskningar i medelvärden som meningsfulla förändringar, vissa vill tro på varje undersökning och andra är helt skeptiska till alla undersökningar [45,50, 51].
Underlåtenhet att korrekt tolka resultat eller bearbeta elevernas feedback kan påverka lärarnas attityder till undervisning. Resultaten från Lutovac et al. (2017) [52] Stödande lärarutbildning är nödvändig och fördelaktig för att ge feedback till studenter. Medicinsk utbildning behöver snabbt utbildning i rätt tolkning av inställda resultat. Därför bör medicinsk skolfakultet få utbildning i hur man utvärderar resultat och de viktiga områden som de bör fokusera på [50, 51].
Således tyder de beskrivna resultaten på att uppsättningar bör vara noggrant utformade, administreras och tolkas för att säkerställa att uppsättningsresultaten har en meningsfull inverkan på alla relevanta intressenter, inklusive fakulteter, medicinska skoladministratörer och studenter.
På grund av några av begränsningarna i SET, bör vi fortsätta att sträva efter att skapa ett omfattande utvärderingssystem för att minska partiskhet i undervisningseffektiviteten och stödja den professionella utvecklingen av medicinska lärare.
En mer fullständig förståelse av klinisk fakultetsundervisningskvalitet kan uppnås genom att samla in och triangulera data från flera källor, inklusive studenter, kollegor, programadministratörer och självbedömningar av fakulteten [53, 54, 55, 56, 57]. Följande avsnitt beskriver möjliga andra verktyg/metoder som kan användas utöver effektiva uppsättningar för att utveckla en mer lämplig och fullständig förståelse för träningseffektivitet (figur 4).
Metoder som kan användas för att utveckla en omfattande modell av ett system för att bedöma effektiviteten i undervisningen i en medicinsk skola.
En fokusgrupp definieras som ”en gruppdiskussion organiserad för att utforska en specifik uppsättning frågor” [58]. Under de senaste åren har medicinska skolor skapat fokusgrupper för att få kvalitetsåterkoppling från studenter och ta itu med några av fallgroparna i onlineuppsättningen. Dessa studier visar att fokusgrupper är effektiva för att ge kvalitetsåterkoppling och öka studenternas tillfredsställelse [59, 60, 61].
I en studie av Brundle et al. [59] Forskarna implementerade en gruppprocess för studentutvärdering som gjorde det möjligt för kursledare och studenter att diskutera kurser i fokusgrupper. Resultaten indikerar att fokusgruppsdiskussioner kompletterar utvärderingar online och ökar studenternas tillfredsställelse med den övergripande kursbedömningsprocessen. Studenter värderar möjligheten att kommunicera direkt med kurschefer och tror att denna process kan bidra till utbildningsförbättringar. De kände också att de kunde förstå kursdirektörens synvinkel. Förutom studenter bedömde kurschefer också att fokusgrupper underlättade effektivare kommunikation med studenter [59]. Således kan användningen av fokusgrupper ge medicinska skolor en mer fullständig förståelse för kvaliteten på varje kurs och undervisningseffektiviteten för respektive fakultet. Det bör emellertid noteras att fokusgrupperna själva har vissa begränsningar, till exempel bara ett litet antal studenter som deltar i dem jämfört med onlineuppsättningsprogrammet, som är tillgängligt för alla studenter. Dessutom kan man genomföra fokusgrupper för olika kurser vara en tidskrävande process för rådgivare och studenter. Detta utgör betydande begränsningar, särskilt för medicinska studenter som har mycket upptagna scheman och kan genomföra kliniska placeringar på olika geografiska platser. Dessutom kräver fokusgrupper ett stort antal erfarna underlättare. Att införliva fokusgrupper i utvärderingsprocessen kan emellertid ge mer detaljerad och specifik information om träningens effektivitet [48, 59, 60, 61].
Schiekierka-Schwacke et al. (2018) [62] undersökte student- och fakultetsuppfattningar om ett nytt verktyg för att utvärdera fakultetsprestanda och studentinlärningsresultat i två tyska medicinska skolor. Fokusgruppsdiskussioner och individuella intervjuer genomfördes med fakulteter och medicinska studenter. Lärare uppskattade den personliga feedbacken från utvärderingsverktyget, och eleverna rapporterade att en återkopplingsslinga, inklusive mål och konsekvenser, bör skapas för att uppmuntra rapporteringen av utvärderingsdata. Således stöder resultaten från denna studie vikten av att stänga kommunikationsslingan med studenter och informera dem om utvärderingsresultat.
Peer Review of Teaching (PRT) -program är mycket viktiga och har implementerats i högre utbildning i många år. PRT involverar en samarbetsprocess för att observera undervisning och ge feedback till observatören för att förbättra undervisningseffektiviteten [63]. Dessutom kan självreflektionsövningar, strukturerade uppföljningsdiskussioner och systematisk tilldelning av utbildade kollegor bidra till att förbättra effektiviteten hos PRT och avdelningens undervisningskultur [64]. Dessa program rapporteras ha många fördelar eftersom de kan hjälpa lärare att få konstruktiv feedback från kamratlärare som kan ha mött liknande svårigheter tidigare och kan ge större stöd genom att ge användbara förslag till förbättringar [63]. Dessutom, när de används konstruktivt, kan peer review förbättra kursinnehållet och leveransmetoderna och stödja medicinska lärare i att förbättra kvaliteten på deras undervisning [65, 66].
En ny studie av Campbell et al. (2019) [67] ger bevis på att arbetsplatsens peer supportmodell är en acceptabel och effektiv lärarutvecklingsstrategi för kliniska hälsoutbildare. I en annan studie, Caygill et al. [68] genomförde en studie där ett specialutformat frågeformulär skickades till hälsoutbildare vid University of Melbourne för att tillåta dem att dela sina erfarenheter av att använda PRT. Resultaten indikerar att det finns uppmanat intresse för PRT bland medicinska lärare och att det frivilliga och informativa peer review-formatet anses vara en viktig och värdefull möjlighet för professionell utveckling.
Det är värt att notera att PRT -program måste vara noggrant utformade för att undvika att skapa en bedömande ”ledningsmiljö” som ofta leder till ökad ångest bland observerade lärare [69]. Därför bör målet vara att noggrant utveckla PRT -planer som kommer att komplettera och underlätta skapandet av en säker miljö och ge konstruktiv feedback. Därför behövs specialutbildning för att utbilda granskare, och PRT -program bör bara involvera verkligt intresserade och erfarna lärare. Detta är särskilt viktigt om informationen som erhålls från PRT används i fakultetsbeslut som kampanjer till högre nivåer, löneförhöjningar och kampanjer till viktiga administrativa positioner. Det bör noteras att PRT är tidskrävande och, liksom fokusgrupper, kräver deltagande av ett stort antal erfarna fakultetsmedlemmar, vilket gör detta tillvägagångssätt svårt att genomföra i medicinska skolor med låg resurs.
Newman et al. (2019) [70] beskriver strategier som används före, under och efter utbildning, observationer som belyser bästa praxis och identifierar lösningar på inlärningsproblem. Forskarna gav 12 förslag till granskare, inklusive: (1) väljer dina ord klokt; (2) låta observatören bestämma riktningen för diskussionen; (3) hålla feedback konfidentiell och formaterad; (4) hålla feedback konfidentiell och formaterad; Feedback fokuserar på undervisningsfärdigheter snarare än den enskilda läraren; ) och feedback i peer-observationer, (11) gör observation av att lära sig en win-win, (12) skapa en handlingsplan. Forskare undersöker också effekterna av partiskhet på observationer och hur processen att lära sig, observera och diskutera feedback kan ge värdefulla inlärningsupplevelser för båda parter, vilket leder till långsiktiga partnerskap och förbättrad utbildningskvalitet. Gomaly et al. (2014) [71] rapporterade att kvaliteten på effektiv feedback bör inkludera (1) förtydligande av uppgiften genom att tillhandahålla anvisningar, (2) ökade motivationen för att uppmuntra till större ansträngning och (3) mottagarens uppfattning om det som en värdefull process. tillhandahålls av en ansedd källa.
Även om fakulteten för medicinskola får feedback på PRT, är det viktigt att utbilda fakulteten om hur man tolkar feedback (liknande rekommendationen att få utbildning i inställd tolkning) och att ge fakulteten tillräcklig tid att konstruktivt reflektera över den mottagna feedbacken.
Inläggstid: nov 24-2023