• mi

Procjena učenja učenika i razvijanje sveobuhvatnih standarda za mjerenje učinkovitosti nastave u medicinskoj školi | BMC medicinsko obrazovanje

Procjena kurikuluma i fakulteta presudna je za sve visokoškolske institucije, uključujući medicinske škole. Studentske evaluacije poučavanja (SET) obično imaju oblik anonimnih upitnika, i iako su prvobitno razvijeni za procjenu tečajeva i programa, s vremenom su se također koristili za mjerenje učinkovitosti nastave i naknadno donošenje važnih odluka vezanih uz nastavu. Profesionalni razvoj učitelja. Međutim, određeni čimbenici i pristranosti mogu utjecati na postavljene rezultate, a učinkovitost nastave ne može se mjeriti objektivno. Iako je literatura o evaluaciji tečaja i fakulteta u općem visokom obrazovanju dobro uspostavljena, postoje zabrinutosti za korištenje istih alata za procjenu tečajeva i nastavnika iz medicinskih programa. Konkretno, postavljeno u općenito visoko obrazovanje ne može se izravno primijeniti na dizajn i provedbu nastavnog plana i programa u medicinskim školama. Ovaj pregled daje pregled načina na koji se Set može poboljšati na razini instrumenta, upravljanja i interpretacije. Uz to, ovaj članak ističe da koristeći različite metode kao što su recenzija, fokusne grupe i samoprocjena za prikupljanje i trokutaste podatke iz više izvora, uključujući studente, vršnjake, menadžere programa i samosvijest, sveobuhvatni sustav procjene može biti konstruiran. Učinkovito mjerite učinkovitost nastave, podržava profesionalni razvoj medicinskih odgajatelja i poboljšati kvalitetu nastave u medicinskom obrazovanju.
Procjena tečaja i programa interni je postupak kontrole kvalitete u svim visokim obrazovnim institucijama, uključujući medicinske škole. Studentska evaluacija podučavanja (SET) obično poprima oblik anonimnog papira ili internetskog upitnika koristeći ljestvicu ocjene, poput Likertove skale (obično pet, sedam ili više) koja omogućuje ljudima da naznače svoj dogovor ili stupanj sporazuma. Ne slažem se s određenim izjavama) [1,2,3]. Iako su setovi izvorno razvijeni za procjenu tečajeva i programa, s vremenom su se također koristili za mjerenje učinkovitosti nastave [4, 5, 6]. Učinkovitost podučavanja smatra se važnom jer se pretpostavlja da postoji pozitivan odnos između učinkovitosti nastave i učenja učenika [7]. Iako literatura jasno ne definira učinkovitost treninga, ona se obično specificira kroz specifične karakteristike obuke, poput "grupne interakcije", "priprema i organizacija", "povratne informacije studentima" [8].
Informacije dobivene iz SET -a mogu pružiti korisne informacije, poput toga, postoji li potreba za prilagodbom nastavnih materijala ili metoda nastavnih metoda koji se koriste u određenom tečaju. Skup se također koristi za donošenje važnih odluka vezanih za profesionalni razvoj učitelja [4,5,6]. Međutim, prikladnost ovog pristupa je upitna kada institucije visokog obrazovanja donose odluke u vezi s fakultetom, poput promicanja u višim akademskim redovima (često povezanim s povećanjem stanice i povećanja plaće) i ključnih administrativnih položaja unutar institucije [4, 9]. Osim toga, institucije često zahtijevaju da novi fakultet uključi setove prethodnih institucija u svoje prijave za nove pozicije, a time utječu na ne samo promocije fakulteta unutar institucije, već i na potencijalne nove poslodavce [10].
Iako je literatura o kurikulumu i evaluaciji učitelja dobro utvrđena u području općeg visokog obrazovanja, to nije slučaj na području medicine i zdravstvene zaštite [11]. Kurikulum i potrebe medicinskih odgajatelja razlikuju se od općeg visokog obrazovanja. Na primjer, timsko učenje često se koristi u integriranim tečajevima medicinskog obrazovanja. To znači da se nastavni plan i program medicinskog fakulteta sastoji od niza tečajeva koje je podučavao brojni članovi fakulteta koji imaju obuku i iskustvo u raznim medicinskim disciplinama. Iako učenici imaju koristi od dubinskog znanja stručnjaka na terenu u okviru ove strukture, oni se često suočavaju s izazovom prilagođavanja različitim stilovima nastavnog učitelja [1, 12, 13, 14].
Iako postoje razlike između općeg visokog obrazovanja i medicinskog obrazovanja, skup koji se koristi u prvom ponekad se koristi i u tečajevima medicine i zdravstvene zaštite. Međutim, provedba postavljenog u općem visokom obrazovanju predstavlja brojne izazove u smislu evaluacije kurikuluma i fakulteta u zdravstvenim profesionalnim programima [11]. Konkretno, zbog razlika u metodama poučavanja i kvalifikacija nastavnika, rezultati evaluacije tečaja ne mogu uključivati ​​mišljenja učenika svih učitelja ili nastave. Istraživanje Uytenhaagea i O'Neilla (2015) [5] sugerira da traženje učenika da ocijene sve pojedine nastavnike na kraju tečaja može biti neprimjereno jer je učenici gotovo nemoguće pamtiti i komentirati više ocjena nastavnika. kategorije. Osim toga, mnogi učitelji medicinskog obrazovanja također su liječnici za koje je podučavanje samo mali dio njihovih odgovornosti [15, 16]. Budući da su prvenstveno uključeni u skrb o pacijentima i, u mnogim slučajevima, često imaju malo vremena za razvijanje svojih nastavnih vještina. Međutim, liječnici kao učitelji trebali bi primati vrijeme, podršku i konstruktivne povratne informacije od svojih organizacija [16].
Studenti medicine imaju tendenciju da su visoko motivirani i marljivi pojedinci koji uspješno dobivaju prijem na medicinski fakultet (kroz konkurentni i zahtjevan proces na međunarodnoj razini). Osim toga, tijekom medicinske škole, očekuje se da će studenti medicine steći veliku količinu znanja i razviti veliki broj vještina u kratkom vremenu, kao i uspjeti u složenim unutarnjim i sveobuhvatnim nacionalnim procjenama [17,18,19 , 20]. Stoga, zbog visokih standarda koji se očekuju od studenata medicine, studenti medicine mogu biti kritičniji i imati veća očekivanja za visokokvalitetnu nastavu od učenika u drugim disciplinama. Dakle, studenti medicine mogu imati niže ocjene svojih profesora u usporedbi sa studentima u drugim disciplinama iz gore spomenutih razloga. Zanimljivo je da su prethodne studije pokazale pozitivan odnos između motivacije učenika i pojedinačnih evaluacija nastavnika [21]. Pored toga, u posljednjih 20 godina, većina nastavnog plana medicinskog fakulteta širom svijeta postala je vertikalno integrirana [22], tako da su učenici izloženi kliničkoj praksi iz najranijih godina svog programa. Dakle, u posljednjih nekoliko godina, liječnici se sve više uključuju u obrazovanje studenata medicine, podržavajući, čak i rano u svojim programima, važnost razvoja setova prilagođenih specifičnim fakultetskim populacijama [22].
Zbog specifične prirode spomenutog medicinskog obrazovanja, skupovi koji se koriste za procjenu općih tečajeva visokog obrazovanja koje je podučavao jedan član fakulteta trebao bi biti prilagođen za procjenu integriranog kurikuluma i kliničkog fakulteta medicinskih programa [14]. Stoga je potrebno razviti učinkovitije postavljene modele i sveobuhvatne sustave procjene za učinkovitiju primjenu u medicinskom obrazovanju.
Trenutačni pregled opisuje nedavni napredak u korištenju SUT u (općem) visokoj obrazovanju i njegovim ograničenjima, a zatim opisuje različite potrebe za tečajevima i nastavnicima. Ovaj pregled pruža ažuriranje o tome kako se set može poboljšati na instrumentalnoj, administrativnoj i interpretacijskoj razini, te se usredotočuje na ciljeve razvoja učinkovitih postavljenih modela i sveobuhvatnih sustava procjene koji će učinkovito mjeriti učinkovitost poučavanja, podržati razvoj profesionalnih zdravstvenih odgajatelja i poboljšati se Kvaliteta nastave u medicinskom obrazovanju.
Ova studija slijedi proučavanje Green i sur. (2006) [23] za savjete i Baumeister (2013) [24] za savjete o pisanju narativnih recenzija. Odlučili smo napisati narativni pregled na ovu temu jer ova vrsta pregleda pomaže u prezentiranju široke perspektive te teme. Štoviše, budući da narativni pregledi temelje se na metodološki raznolikim studijama, pomažu u odgovoru na šire pitanja. Uz to, narativni komentar može pomoći u poticanju misli i rasprave o nekoj temi.
Kako se postavlja u medicinskom obrazovanju i koji su izazovi u usporedbi s postavljenim u općem visokom obrazovanju,
Baze podataka PubMed i Eric pretražene su korištenjem kombinacije pojmova za pretraživanje „Evaluacija podučavanja učenika“, „Učinkovitost nastave“, „Medicinsko obrazovanje“, „Visoko obrazovanje“, „Procjena nastavnog plana i fakulteta“ i za Peer Review 2000, logički operatori, logički operatori . Članci objavljeni između 2021. i 2021. Kriteriji za uključivanje: Uključene studije bile su originalne studije ili pregledni članci, a studije su bile relevantne za područja triju glavnih istraživačkih pitanja. Kriteriji za isključenje: Studije koje nisu bili engleski jezik ili studije u kojima se članci u cijelom tekstu nisu mogli pronaći ili nisu bili relevantni za tri glavna istraživačka pitanja isključene su iz trenutnog dokumenta o pregledu. Nakon odabira publikacija organizirani su u sljedeće teme i pridružene subtopije: (a) Upotreba skupa u općem visokom obrazovanju i njegovim ograničenjima, (b) upotreba skupa u medicinskom obrazovanju i njegovu važnost za rješavanje pitanja vezanih uz usporedbu Skup (c) Poboljšanje skupa na instrumentalnoj, upravljačkoj i interpretacijskoj razini za razvoj učinkovitih postavljenih modela.
Slika 1 sadrži dijagram odabranih članaka uključenih i raspravljenih u trenutnom dijelu pregleda.
Set se tradicionalno koristi u visokom obrazovanju i tema je dobro proučena u literaturi [10, 21]. Međutim, veliki broj studija ispitao je njihova brojna ograničenja i napore na rješavanju tih ograničenja.
Istraživanja pokazuju da postoje mnoge varijable koje utječu na rezultate [10, 21, 25, 26]. Stoga je važno da administratori i nastavnici razumiju ove varijable prilikom tumačenja i korištenja podataka. Sljedeći odjeljak daje kratak pregled ovih varijabli. Slika 2 prikazuje neke od čimbenika koji utječu na postavljene rezultate, koji su detaljno opisani u sljedećim odjeljcima.
Posljednjih godina upotreba internetskih kompleta povećala se u usporedbi s papirnatim setovima. Međutim, dokazi u literaturi sugeriraju da se internetski set može završiti bez da studenti ne posvete potrebnu pažnju postupku završetka. U zanimljivoj studiji Uitdehaagea i O'Neilla [5], u set su dodani nepostojeći učitelji, a mnogi su učenici pružili povratne informacije [5]. Nadalje, dokazi u literaturi sugeriraju da studenti često vjeruju da završetak SET -a ne dovodi do poboljšanog obrazovnog postignuća, što, u kombinaciji s užurbanim rasporedom studenata medicine, može rezultirati nižim stopama odgovora [27]. Iako istraživanja pokazuju da se mišljenja učenika koji polažu test ne razlikuju od onih iz cijele grupe, niske stope odgovora i dalje mogu navesti nastavnike da rezultate shvate manje ozbiljno [28].
Većina internetskih setova dovršena je anonimno. Ideja je omogućiti učenicima da slobodno izražavaju svoje mišljenje bez pretpostavke da će njihov izraz imati bilo kakav utjecaj na njihove buduće odnose s učiteljima. U studiji Alfonso i suradnici [29], istraživači su koristili anonimne ocjene i ocjene u kojima su ocjenjivači morali dati svoja imena (javne ocjene) kako bi procijenili učinkovitost nastavnog fakulteta medicinskih škola od strane stanovnika i studenata medicine. Rezultati su pokazali da su nastavnici uglavnom postigli niže na anonimnim procjenama. Autori tvrde da su studenti iskreniji u anonimnim procjenama zbog određenih prepreka u otvorenim procjenama, poput oštećenih radnih odnosa s nastavnicima koji sudjeluju [29]. Međutim, također treba napomenuti da anonimnost često povezana s internetskim setom može dovesti do toga da neki studenti budu nepoštovani i odmazdni prema instruktoru ako ocjene ne ispunjavaju očekivanja učenika [30]. Međutim, istraživanje pokazuje da studenti rijetko pružaju nepoštivanje povratnih informacija, a potonje se može dodatno ograničiti podučavanjem studenata da pruže konstruktivne povratne informacije [30].
Nekoliko studija pokazalo je da postoji povezanost između postignutih rezultata učenika, njihovih očekivanja testnih performansi i njihovog testnog zadovoljstva [10, 21]. Na primjer, Strobe (2020.) [9] izvijestio je da studenti nagrađuju jednostavne tečajeve i nastavnici nagrađuju slabe ocjene, što može potaknuti lošu nastavu i dovesti do inflacije razreda [9]. U nedavnoj studiji, Looi i sur. (2020.) [31] Istraživači su izvijestili da su povoljniji skupovi povezani i lakši za procjenu. Nadalje, postoje uznemirujući dokazi da je set obrnuto povezan s učinkom studenata na sljedećim tečajevima: što je viša ocjena, lošiji učinak studenata u sljedećim tečajevima. Cornell i sur. (2016) [32] proveo je studiju kako bi ispitao jesu li studenti relativno više od učitelja čiji su set ocijenili visoko. Rezultati pokazuju da kada se učenje procjenjuje na kraju tečaja, učitelji s najvišim ocjenama također doprinose učenju većine učenika. Međutim, kada se učenje mjeri izvedbom na sljedećim relevantnim tečajevima, nastavnici koji postižu relativno nisko su najučinkovitije. Istraživači su hipotetirali da bi tečaj postao izazovniji na produktivniji način mogao smanjiti ocjene, ali poboljšati učenje. Dakle, procjene studenata ne bi trebale biti jedine osnova za ocjenu nastave, već ih treba prepoznati.
Nekoliko studija pokazuje da na postavljeni učinak utječe sam tečaj i njegova organizacija. Ming i Baozhi [33] otkrili su u svojoj studiji da postoje značajne razlike u zadanim rezultatima među studentima u različitim predmetima. Na primjer, kliničke znanosti imaju veće skupove od osnovnih znanosti. Autori su objasnili da je to zbog toga što su studenti medicine zainteresirani postati liječnici i stoga imaju osobni interes i veću motivaciju za sudjelovanje više na tečajevima kliničkih znanosti u usporedbi s osnovnim tečajevima znanosti [33]. Kao i u slučaju izbora, motivacija studenata za tu temu također ima pozitivan učinak na rezultate [21]. Nekoliko drugih studija također podržava da vrsta tečaja može utjecati na postavljene rezultate [10, 21].
Nadalje, druge studije pokazale su da što je manja veličina klase, to je veća razina skupa koju su postigli nastavnici [10, 33]. Jedno od mogućih objašnjenja je da manje veličine razreda povećavaju mogućnosti za interakciju nastavnika i učenika. Pored toga, uvjeti u kojima se procjena provodi mogu utjecati na rezultate. Na primjer, čini se da na postavljene rezultate utječe vrijeme i dan kada se tečaj podučava, kao i dan u tjednu kada je set dovršen (npr. Procjene završene vikendom imaju tendenciju da se više pozitivno ocjenjuju) od dovršenih procjena ranije u tjednu. [10].
Zanimljiva studija Hessler i ostali također dovodi u pitanje učinkovitost SET -a. [34]. U ovom istraživanju provedeno je nasumično kontrolirano ispitivanje na tečaju hitne medicine. Studenti medicine treće godine nasumično su dodijeljeni ili kontrolnoj skupini ili grupi koja je dobila besplatne kolačiće od čokoladnih čipsa (Cookie Group). Sve su skupine podučavali isti učitelji, a sadržaj obuke i materijala za tečajeve bili su identični za obje skupine. Nakon tečaja, svi su studenti zamoljeni da završe set. Rezultati su pokazali da je nastavnici ocijenili učitelje znatno boljim od kontrolne skupine, dovodeći u pitanje učinkovitost SET -a [34].
Dokazi u literaturi također podržavaju da spol može utjecati na postavljene rezultate [35,36,37,38,39,40,41,42,43,444,45,46]. Na primjer, neke su studije pokazale odnos između rezultata spola i procjene učenika: studentice su postigle više od muških studenata [27]. Većina dokaza potvrđuje da učenike ocjenjuju učiteljice niže od muškaraca [37, 38, 39, 40]. Na primjer, Boring i sur. [38] pokazali su da su i muškarci i studenti vjerovali da su muškarci poznatiji i da imaju jače sposobnosti vodstva od žena. Činjenica da spol i stereotipi utječu na skup također je podržana proučavanjem MacNell i sur. [41], koji su izvijestili da su učenice u njegovoj studiji ocijenile učiteljice niže od muškaraca na različitim aspektima podučavanja [41]. Nadalje, Morgan i suradnici [42] pružili su dokaze da su liječnike dobivale niže ocjene nastave u četiri glavne kliničke rotacije (kirurgija, pedijatrija, akušerija i ginekologija i interna medicina) u usporedbi s muškim liječnicima.
U studiji Murray i sur. (2020) [43], istraživači su izvijestili da su atraktivnost fakulteta i interes studenata za tečaj povezani s višim rezultatima. Suprotno tome, poteškoće s tečajem povezane su s nižim rezultatima. Uz to, studenti su dali više postavljene ocjene mladim učiteljima bijelih muških humanističkih znanosti i fakultetima koji drže pune profesore. Nije bilo korelacija između zadanih evaluacija nastavnih i rezultata anketiranja nastavnika. Ostale studije također potvrđuju pozitivan utjecaj fizičke privlačnosti nastavnika na rezultate procjene [44].
Clayson i sur. (2017) [45] izvijestili su da iako postoji opći sporazum koji set daje pouzdane rezultate i da su prosjeci razreda i nastavnika dosljedni, nedosljednosti i dalje postoje u pojedinim odgovorima učenika. Ukratko, rezultati ovog izvještaja o procjeni pokazuju da se studenti nisu složili s onim što su zamoljeni da procijene. Mjere pouzdanosti izvedene iz studentskih evaluacija nastave nisu dovoljne za pružanje osnova za utvrđivanje valjanosti. Stoga set ponekad može pružiti informacije o učenicima, a ne učiteljima.
Skup zdravstvenog obrazovanja razlikuje se od tradicionalnog skupa, ali odgajatelji često koriste set dostupan u općem visokom obrazovanju, a ne postavljen specifičan za programe zdravstvenih profesija izviještenih u literaturi. Međutim, studije provedene tijekom godina utvrdile su nekoliko problema.
Jones i sur. (1994). [46] proveo je studiju kako bi utvrdio pitanje kako procijeniti fakultet medicinskih škola iz perspektive fakulteta i administratora. Sve u svemu, najčešće spomenuta pitanja koja se odnose na evaluaciju nastave. Najčešće su bile opće pritužbe na neadekvatnost trenutnih metoda procjene uspješnosti, a ispitanici također podnose posebne pritužbe na set i nedostatak prepoznavanja nastave u akademskim sustavima nagrađivanja. Ostali izviješteni problemi uključuju nedosljedne postupke evaluacije i kriterije promocije u odjelima, nedostatak redovitih procjena i neuspjeh u povezivanju rezultata evaluacije s plaćama.
Royal i suradnici (2018) [11] nacrtaju neka ograničenja korištenja skupa za procjenu nastavnog plana i programa u zdravstvenim profesionalnim programima u općem visokom obrazovanju. Istraživači navode da se postavljeno u visokom obrazovanju suočava s različitim izazovima jer se to ne može izravno primijeniti na dizajn nastavnog plana i programa u medicinskim školama. Često postavljana pitanja, uključujući pitanja o instruktoru i tečaju, često se kombiniraju u jedan upitnik, tako da studenti često imaju problema s razlikovanjem između njih. Pored toga, tečajeve medicinskih programa često podučavaju više članova fakulteta. To postavlja pitanja valjanosti s obzirom na potencijalno ograničen broj interakcija između učenika i nastavnika koje su procijenili Royal i sur. (2018) [11]. U studiji Hwang i sur. (2017) [14], istraživači su ispitali koncept kako retrospektivne procjene tečaja sveobuhvatno odražavaju percepciju učenika različitih tečajeva instruktora. Njihovi rezultati sugeriraju da je individualizirana procjena razreda potrebna za upravljanje multidepartmentalnim tečajevima unutar integriranog nastavnog plana i programa.
Uitdehaage i O'Neill (2015) [5] ispitali su u kojoj je mjeri studenti medicine namjerno postavili postavljenu na više fakultetskog tečaja u učionici. Svaki od dva pretklinička tečaja sadržavao je izmišljeni instruktor. Studenti moraju pružiti anonimne ocjene svim instruktorima (uključujući fiktivne instruktore) u roku od dva tjedna od završetka tečaja, ali mogu odbiti za procjenu instruktora. Sljedeće godine se ponovilo, ali uključen je portret izmišljenog predavača. Šezdeset i šest posto učenika ocijenilo je virtualni instruktor bez sličnosti, ali manje učenika (49%) ocijenilo je virtualni instruktor s prisutnom sličnošću. Ovi nalazi sugeriraju da mnogi studenti medicine slijepo dovršavaju setove, čak i kad su u pratnji fotografija, bez pažljivog razmatranja o kome se procjenjuju, a kamoli izvedbu instruktora. To ometa poboljšanje kvalitete programa i može biti štetno za akademski napredak nastavnika. Istraživači predlažu okvir koji nudi radikalno drugačiji pristup koji aktivno i aktivno uključuje studente.
Postoje mnoge druge razlike u obrazovnom kurikulumu medicinskih programa u usporedbi s drugim općim programima visokog obrazovanja [11]. Medicinsko obrazovanje, poput profesionalnog zdravstvenog obrazovanja, očito je usredotočeno na razvoj jasno definiranih profesionalnih uloga (klinička praksa). Kao rezultat toga, nastavni plan i program medicinskog i zdravstvenog programa postaju statičniji, s ograničenim izborima tečaja i fakulteta. Zanimljivo je da se tečajevi za medicinsko obrazovanje često nude u kohortnom formatu, a svi studenti istodobno polažu isti tečaj u isto vrijeme. Stoga, upis velikog broja učenika (obično n = 100 ili više) može utjecati na nastavni format kao i odnos učitelja-učenika. Nadalje, u mnogim medicinskim školama psihometrijska svojstva većine instrumenata ne procjenjuju se nakon početne uporabe, a svojstva većine instrumenata mogu ostati nepoznata [11].
Nekoliko studija u posljednjih nekoliko godina pružilo je dokaze da se skup može poboljšati rješavanjem nekih važnih čimbenika koji mogu utjecati na učinkovitost skupa na instrumentalnoj, administrativnoj i interpretacijskoj razini. Na slici 3 prikazani su neki koraci koji se mogu koristiti za stvaranje učinkovitog skupa. Sljedeći odjeljci pružaju detaljniji opis.
Poboljšajte set na instrumentalnoj, upravljačkoj i interpretacijskoj razini za razvoj učinkovitih postavljenih modela.
Kao što je spomenuto ranije, literatura potvrđuje da rodna pristranost može utjecati na evaluacije učitelja [35, 36, 37, 38, 39, 40, 41, 42, 43, 44, 45, 46]. Peterson i sur. (2019) [40] proveo je studiju koja je ispitala utječe li studentski spol na odgovore učenika na napore ublažavanja pristranosti. U ovom istraživanju, set je upravljao u četiri razreda (dva su podučavala učiteljice i dva učitelja). Unutar svakog tečaja, studenti su nasumično dodijeljeni da dobiju standardni alat za procjenu ili isti alat, ali koristeći jezik dizajniran za smanjenje rodne pristranosti. Studija je utvrdila da su učenici koji su koristili alate za procjenu antirasa dali učiteljima znatno većim rezultatima od učenika koji su koristili standardne alate za procjenu. Nadalje, nije bilo razlika u ocjenama muškaraca između dviju skupina. Rezultati ove studije su značajni i pokazuju kako relativno jednostavna jezična intervencija može smanjiti rodnu pristranost u evaluacijama učenika. Stoga je dobra praksa pažljivo razmotriti sve skupove i koristiti jezik za smanjenje rodne pristranosti u njihovom razvoju [40].
Da biste dobili korisne rezultate iz bilo kojeg skupa, važno je pažljivo razmotriti svrhu procjene i izradu pitanja unaprijed. Iako većina postavljenih anketa jasno ukazuje na odjeljak o organizacijskim aspektima tečaja, tj. "Procjena tečaja" i odjeljak o fakultetu, tj. "Procjena učitelja", u nekim anketama razlika možda neće biti očita, ili može postojati zbunjenost među učenicima o tome kako pojedinačno procijeniti svako od ovih područja. Stoga, dizajn upitnika mora biti prikladan, razjasniti dva različita dijela upitnika i osvijestiti studente što treba procijeniti u svakom području. Pored toga, preporučuje se pilot testiranje kako bi se utvrdilo da li studenti tumače pitanja na predviđeni način [24]. U studiji Oermann i sur. (2018) [26], istraživači su pretraživali i sintetizirali literaturu koja je opisivala uporabu skupa u širokom rasponu disciplina u dodiplomskom i diplomskom obrazovanju kako bi nastavnicima pružili smjernice o korištenju skupa u sestrinstvu i drugim zdravstvenim stručnim programima. Rezultati sugeriraju da se postavljene instrumente trebaju procijeniti prije upotrebe, uključujući pilot testiranje instrumenata sa studentima koji možda neće moći protumačiti postavljene predmete ili pitanja ili pitanja kako je to namijenio instruktor.
Nekoliko studija ispitalo je utječe li model postavljenog upravljanja studentima.
Daumier i sur. (2004) [47] uspoređivali su ocjene učenika u obuci instruktora dovršene u razredu sa ocjenama prikupljenim putem interneta uspoređujući broj odgovora i ocjena. Istraživanja pokazuju da internetske ankete obično imaju niže stope odgovora od istraživanja u klasi. Međutim, studija je utvrdila da internetske procjene nisu proizvele značajno različite prosječne ocjene od tradicionalnih procjena u učionici.
Završio je nedostatak dvosmjerne komunikacije između učenika i nastavnika tijekom završetka internetskih (ali često tiskanih) setova, što je rezultiralo nedostatkom mogućnosti za pojašnjenje. Stoga značenje postavljenih pitanja, komentara ili evaluacija učenika možda nije uvijek jasno [48]. Neke su institucije riješile ovo pitanje okupljajući studente na sat vremena i dodijelivši određeno vrijeme za dovršavanje seta na mreži (anonimno) [49]. U svojoj studiji, Malone i sur. (2018) [49] održali su nekoliko sastanaka kako bi razgovarali sa studentima svrhu postavljenog, koji bi vidjeli postavljene rezultate i kako će se rezultati koristiti i bilo koja druga pitanja koja su postavili studenti. Set se provodi slično kao fokusna skupina: Kolektivna skupina odgovara na otvorena pitanja kroz neformalno glasanje, raspravu i pojašnjenje. Stopa odgovora bila je preko 70–80%, pružajući nastavnicima, administratorima i odborima za kurikulum s opsežnim informacijama [49].
Kao što je gore spomenuto, u studiji Uitdehaage i O'Neill [5], istraživači su izvijestili da su studenti u njihovoj studiji ocijenili nepostojećim učiteljima. Kao što je spomenuto ranije, to je čest problem na tečajevima medicinskih škola, gdje svaki tečaj mogu podučavati mnogi članovi fakulteta, ali studenti se možda ne sjećaju tko je doprinio svakom tečaju ili što je svaki član fakulteta učinio. Neke su institucije riješile ovo pitanje pružajući fotografiju svakog predavača, njegovo ime i temu/datum predstavljeni za osvježavanje sjećanja učenika i izbjegavanje problema koji ugrožavaju učinkovitost SET -a [49].
Možda je najvažniji problem povezan sa setom taj što nastavnici nisu u stanju ispravno protumačiti kvantitativne i kvalitativne skupove rezultata. Neki nastavnici možda žele napraviti statističke usporedbe tijekom godina, neki mogu smatrati manje povećanje/smanjenje srednjih rezultata kao značajne promjene, neki žele vjerovati svakoj anketi, a drugi su potpuno skeptični prema bilo kojem istraživanju [45,50, 51].
Neuspjeh u ispravnom tumačenju rezultata ili obrade povratnih informacija učenika može utjecati na stavove nastavnika prema nastavi. Rezultati Lutovac i sur. (2017) [52] Podržavajuća obuka nastavnika potrebna je i korisna za pružanje povratnih informacija učenicima. Medicinsko obrazovanje hitno treba obuku u ispravnom tumačenju zadanih rezultata. Stoga bi fakultet medicinskog fakulteta trebao proći obuku o tome kako procijeniti ishode i važna područja na kojima bi se trebali usredotočiti [50, 51].
Dakle, opisani rezultati sugeriraju da setove treba pažljivo dizajnirati, upravljati i tumačiti kako bi se osiguralo da se postavljeni rezultati značajan utjecaj na sve relevantne dionike, uključujući fakultete, administratore medicinskih škola i učenika.
Zbog nekih ograničenja SET -a, trebali bismo i dalje nastojati stvoriti sveobuhvatni sustav evaluacije kako bismo smanjili pristranost u učinkovitosti nastavne nastavne i podrške profesionalnom razvoju medicinskih odgajatelja.
Potpunije razumijevanje kvalitete podučavanja kliničkih fakulteta može se dobiti prikupljanjem i trokutama podataka iz više izvora, uključujući studente, kolege, administratore programa i samoprocjene fakulteta [53, 54, 55, 56, 57]. Sljedeći odjeljci opisuju moguće druge alate/metode koji se mogu upotrijebiti uz učinkovit skup kako bi se razvio prikladniji i potpuniji razumijevanje učinkovitosti treninga (Slika 4).
Metode koje se mogu koristiti za razvoj sveobuhvatnog modela sustava za procjenu učinkovitosti poučavanja u medicinskoj školi.
Fokusna skupina definirana je kao "grupna rasprava organizirana za istraživanje određenog skupa pitanja" [58]. U posljednjih nekoliko godina, medicinske škole su stvorile fokusne skupine kako bi dobile kvalitetne povratne informacije od učenika i riješile neke od zamki internetskog seta. Ove studije pokazuju da su fokusne skupine učinkovite u pružanju povratnih informacija o kvaliteti i povećanju zadovoljstva učenika [59, 60, 61].
U studiji Brundle i sur. [59] Istraživači su proveli postupak grupe za ocjenjivanje studenata koji je omogućio direktorima tečaja i studentima da razgovaraju o tečajevima u fokusnim skupinama. Rezultati pokazuju da rasprave fokus grupa nadopunjuju internetske procjene i povećavaju zadovoljstvo učenika cjelokupnim postupkom procjene tečaja. Studenti cijene priliku da izravno komuniciraju s direktorima tečaja i vjeruju da ovaj proces može pridonijeti poboljšanju obrazovanja. Također su osjećali da su mogli razumjeti stajalište redatelja tečaja. Osim studenata, direktori tečaja ocijenili su i da su fokusne skupine olakšale učinkovitiju komunikaciju sa studentima [59]. Stoga, upotreba fokusnih skupina može medicinskim školama pružiti cjelovitije razumijevanje kvalitete svakog tečaja i učinkovitosti nastave odgovarajućeg fakulteta. Međutim, treba napomenuti da same fokusne skupine imaju određena ograničenja, kao što je samo mali broj učenika koji su sudjelovali u njima u usporedbi s internetskim programom, koji je dostupan svim studentima. Uz to, provođenje fokus grupa za razne tečajeve može biti dugotrajan proces za savjetnike i studente. To predstavlja značajna ograničenja, posebno za studente medicine koji imaju vrlo zauzet raspored i mogu poduzeti kliničke položaje na različitim geografskim mjestima. Pored toga, fokusne skupine zahtijevaju veliki broj iskusnih pomagača. Međutim, uključivanje fokusnih skupina u postupak evaluacije može pružiti detaljnije i specifične informacije o učinkovitosti treninga [48, 59, 60, 61].
Schiekierka-Schwacke i sur. (2018) [62] ispitali su percepciju učenika i fakulteta o novom alatu za procjenu uspješnosti fakulteta i rezultata učenja učenika u dvije njemačke medicinske škole. Rasprave u fokusnoj grupi i pojedinačni intervjui provedeni su sa studentima fakulteta i medicine. Učitelji su cijenili osobne povratne informacije koje je pružio alat za procjenu, a učenici su izvijestili da bi se trebala stvoriti petlja povratnih informacija, uključujući ciljeve i posljedice kako bi potaknula izvještavanje o podacima o procjeni. Dakle, rezultati ove studije podržavaju važnost zatvaranja petlje komunikacije sa studentima i informiranja o rezultatima procjene.
Programi za recenziju nastave (PRT) vrlo su važni i provedeni su u visokom obrazovanju dugi niz godina. PRT uključuje suradnički proces promatranja podučavanja i pružanja povratnih informacija promatraču za poboljšanje učinkovitosti nastave [63]. Osim toga, vježbe samorefleksije, strukturirane praćenja i sustavno dodjeljivanje obučenih kolega mogu pomoći u poboljšanju učinkovitosti PRT-a i kulture nastave Odjela [64]. Navodi se da ovi programi imaju mnogo prednosti jer mogu pomoći nastavnicima da dobiju konstruktivne povratne informacije od vršnjačkih učitelja koji su se u prošlosti suočili s sličnim poteškoćama i mogu pružiti veću podršku pružanjem korisnih prijedloga za poboljšanje [63]. Nadalje, kada se konstruktivno koristi, Peer Review može poboljšati metode sadržaja tečaja i metode isporuke i podržati medicinske odgajatelje u poboljšanju kvalitete njihove nastave [65, 66].
Nedavna studija Campbell i sur. (2019) [67] pružaju dokaze da je model vršnjačke podrške na radnom mjestu prihvatljiva i učinkovita strategija razvoja učitelja za odgajatelje kliničkog zdravlja. U drugoj studiji, Caygill i sur. [68] proveo je studiju u kojoj je posebno dizajnirani upitnik poslan zdravstvenim odgajateljima na Sveučilištu u Melbourneu kako bi im omogućio da podijele svoja iskustva o korištenju PRT -a. Rezultati pokazuju da postoji zainteresiran za PRT među medicinskim odgajateljima i da se dobrovoljni i informativni format recenzija smatra važnom i vrijednom prilikom profesionalnog razvoja.
Vrijedno je napomenuti da PRT programi moraju biti pažljivo osmišljeni kako bi se izbjeglo stvaranje prosudbenog, „upravljačkog“ okruženja koje često dovodi do povećane anksioznosti među promatranim učiteljima [69]. Stoga bi cilj trebao biti pažljivo razvijanje PRT planova koji će nadopuniti i olakšati stvaranje sigurnog okruženja i pružiti konstruktivne povratne informacije. Stoga je potrebna posebna obuka za osposobljavanje recenzenata, a PRT programi bi trebali uključivati ​​samo zainteresirane i iskusne učitelje. To je posebno važno ako se informacije dobivene iz PRT -a koriste u odlukama fakulteta kao što su promocije na više razine, povećanje plaće i promocija u važne administrativne položaje. Treba napomenuti da PRT zahtijeva dugotrajnu i, poput fokusnih skupina, zahtijeva sudjelovanje velikog broja iskusnih članova fakulteta, što otežava ovaj pristup u medicinskim školama s niskim resursima.
Newman i sur. (2019) [70] opisuju strategije korištene prije, za vrijeme i nakon treninga, opažanja koja ističu najbolje prakse i identificiraju rješenja za probleme učenja. Istraživači su recenzentima dali 12 prijedloga, uključujući: (1) mudro odabrati svoje riječi; (2) dopustiti promatraču da utvrdi smjer rasprave; (3) držati povratne informacije povjerljivim i formatiranim; (4) držati povratne informacije povjerljivim i formatiranim; Povratne informacije usredotočene su na nastavničko vještine, a ne na pojedinog učitelja; (5) Upoznajte svoje kolege (6) Budite pažljivi prema sebi i drugima (7) Sjetite se da zamjenice igraju važnu ulogu u pružanju povratnih informacija, (8) koriste pitanja kako bi rasvijetlili perspektivu nastave, (10) Uspostavite Povjerenje procesa povjerenja i povratne informacije u vršnjačkim opažanjima, (11) čine promatranje učenja dobitka, (12) stvoriti akcijski plan. Istraživači također istražuju utjecaj pristranosti na opažanja i kako proces učenja, promatranja i rasprave o povratnim informacijama može pružiti vrijedna iskustva učenja obje strane, što dovodi do dugoročnih partnerstava i poboljšane kvalitete obrazovanja. Gomaly i sur. (2014) [71] izvijestili su da bi kvaliteta učinkovite povratne informacije trebala uključivati ​​(1) pojašnjenje zadatka pružanjem uputa, (2) povećanom motivacijom za poticanje većeg napora i (3) primateljeva percepcija o njemu kao vrijednom procesu. Omogućen ugledni izvor.
Iako fakultet medicinskih škola dobiva povratne informacije o PRT -u, važno je osposobiti fakultet o tome kako protumačiti povratne informacije (slično preporuci za proći obuku u postavljenom interpretaciji) i omogućiti fakultetu dovoljno vremena da se konstruktivno razmisli o primljenim povratnim informacijama.


Post Vrijeme: studeni-24-2023