Artikel 4 Die Kies Van 'N Geskikte Ontwerp Vir Die Evaluering

Hoofstuk 37 Artikels Hoekom moet jy 'n ontwerp vir jou evaluering te kies? Wanneer moet jy dit te doen? Wie moet betrokke wees by die keuse van 'n model? Hoe kan jy 'n geskikte ontwerp vir jou evaluering kies? As jy die woord "eksperiment" hoor dit kan roep beelde van mense in 'n lang wit lab coats loer deur mikroskope. In werklikheid, is 'n eksperiment net probeer iets uit om te sien hoe of waarom en of dit werk. Dit kan so eenvoudig wees soos om 'n ander speserye in jou gunsteling gereg, of so kompleks as die ontwikkeling en toetsing van 'n omvattende poging om kindergesondheid uitkomste in 'n stad of 'n staat te verbeter. Akademici en ander navorsers in openbare gesondheid en die sosiale wetenskappe te voer eksperimente te verstaan ​​hoe omgewings beïnvloed gedrag en uitkomste, sodat hulle eksperimente gewoonlik mense en aspekte van die omgewing betrek. 'N Nuwe gemeenskap program of intervensie is 'n eksperiment, ook die een wat 'n owerheid of gemeenskap organisasie betrokke is by om uit te vind 'n beter manier om 'n gemeenskap aan te spreek. Dit begin gewoonlik met 'n aanname oor wat sal werk - soms 'n teorie van verandering genoem - maar hierdie aanname is geen waarborg. Soos enige eksperiment, 'n program of intervensie moet geëvalueer word om vas te stel of dit werk en onder watter omstandighede. In hierdie artikel, sal ons kyk na 'n paar van die maniere waarop jy kan 'n evaluering te struktureer om te ondersoek of jou program werk, en ontdek hoe om die een wat die beste aan jou behoeftes te kies. Hierdie reëlings vir ontdekking staan ​​bekend as eksperimentele (of evaluering) ontwerpe. Wat bedoel ons met 'n ontwerp vir die evaluering? Elke evaluering is in wese 'n navorsingsprojek of ontdekking projek. Jou navorsing kan wees oor die bepaling van hoe doeltreffend jou program of poging is algehele, wat dele van dit goed werk en wat nodig aanpassing, of 'n paar deelnemers reageer op sekere metodes of toestande anders as ander. As jou resultate is betroubaar te wees, moet jy die evaluering gee 'n struktuur wat jou sal vertel wat jy wil weet. Dit struktuur - die reëling van discovery - is ontwerp die evaluering van. Die ontwerp is afhanklik van watter soort vrae jou evaluering is bedoel om te beantwoord. Sommige van die mees algemene evaluering (navorsing) vrae: Is 'n bepaalde program of intervensie - hetsy 'n instruksionele of motiverende program, die verbetering van toegang en geleenthede, of 'n verandering in beleid - veroorsaak 'n bepaalde verandering in die deelnemers se of ander se gedrag, in fisiese of sosiale omstandighede, gesondheid of ontwikkeling uitkomste, of ander aanwysers van sukses? Watter komponent (e) en element (e) van die program of intervensie was verantwoordelik vir die verandering? Wat is die onbedoelde gevolge van 'n intervensie, en hoe het hulle beïnvloed die uitkomste? As jy probeer om 'n nuwe metode of aktiwiteit, wat gebeur? Sal die program wat gewerk het in 'n ander konteks, of die een wat jy lees in 'n vaktydskrif, werk in jou gemeenskap, of met jou bevolking, of met jou probleem? As jy betroubare antwoorde op evalueringsvrae soos hierdie wil, moet jy hulle vra op 'n manier wat jou sal wys of jy het resultate, en of die resultate was in werklikheid te danke aan jou optrede of die omstandighede wat jy geskep het, of om ander faktore . Met ander woorde, jy moet 'n ontwerp vir jou navorsing te skep - of evaluasie - om jou duidelike antwoorde gee op jou vrae. Ons sal bespreek hoe om dit later in die artikel te doen. Hoekom moet jy 'n ontwerp vir jou evaluering te kies? 'N Evaluering kan eenvoudig lyk: as jy vordering in die rigting van jou doel teen die einde van die evaluering tydperk kan sien, jy doen OK; As jy kan nie, moet jy om te verander. Ongelukkig is dit nie so eenvoudig nie. Eerstens, hoe kan jy vordering te meet? Tweedens, as dit lyk asof daar nie wees nie, hoe kan jy weet wat jy moet verander om jou doeltreffendheid te verhoog? Derdens, as daar is vordering, hoe weet jy dit is veroorsaak deur (of bygedra het tot) jou program, en nie deur iets anders? En ten slotte, selfs as jy goed doen nie, hoe sal jy besluit wat jy beter kan doen, en wat elemente van jou program kan verander of uitgeskakel sonder dat sukses? 'N Goeie ontwerp vir jou evaluering sal jou help om belangrike vrae soos hierdie te beantwoord. Sommige spesifieke redes vir die tyd spandeer om jou evaluering noukeurig ontwerp sluit in: So jou evaluering sal betroubaar wees. 'N Goeie ontwerp sal jy akkurate resultate te gee. As jy jou evaluering goed ontwerp is, kan jy dit vertrou om jou te vertel of jy eintlik is 'n effek, en waarom. Verstaan ​​jou program om hierdie mate maak dit makliker om te bereik en te handhaaf sukses. So jy gebiede kan identifiseer wat jy nodig het om op te werk, sowel as diegene wat suksesvol is. 'N Goeie ontwerp kan jou help om presies te verstaan ​​waar die sterk - en swakpunte van jou program of intervensie is, en gee jou leidrade oor hoe hulle verder kan versterk of verander vir die grootste impak. Sodat jou resultate geloofwaardig. As jou evaluering behoorlik ontwerp is, sal ander jou resultate ernstig op te neem. As 'n goed ontwerpte evaluering toon dat jou program effektief is, jy is baie meer geneig om in staat wees om ander te oortuig om soortgelyke metodes gebruik, en om befondsers wat jou organisasie is 'n goeie belegging te oortuig. positief of negatief - - sodat jy kan faktore wat niks met wat jy doen wat 'n uitwerking het te identifiseer op jou resultate en op die lewens van die deelnemers. Deelnemers se geskiedenis, belangrike plaaslike of nasionale gebeure, die verloop van tyd, persoonlike krisisse, en baie ander faktore kan die uitslag van 'n program of intervensie beïnvloed vir 'n beter of slegter. 'N Goeie evaluering ontwerp kan jou help om dit te identifiseer, en óf korrek vir hulle as jy kan, of bedink maniere om te gaan met of inkorporeer hulle. So jy kan onbedoelde gevolge (beide positief en negatief) en korrek vir hulle te identifiseer. 'N Goeie ontwerp kan jou wys al wat spruit uit jou program of intervensie, nie net wat jy verwag. As jy verstaan ​​dat jou werk het gevolge wat negatiewe sowel as positiewe is, of dat dit meer en / of verskillende positiewe gevolge as jy verwag, kan jy dienooreenkomstig aan te pas. Sodat jy 'n samehangende plan en organisering van struktuur vir jou evaluering het. Dit sal baie makliker wees om jou evaluering uit te voer as dit 'n gepaste ontwerp. Jy sal beter weet wat jy hoef te doen ten einde die inligting wat jy nodig het. die tyd om te kies en te organiseer 'n evaluering ontwerp sal betaal in die tyd wat jy later en in die kwaliteit van die inligting wat jy kry bespaar spandeer. Wanneer moet jy 'n ontwerp vir jou evaluering te kies? Sodra jy jou evalueringsvrae het bepaal en versamel en georganiseer al die inligting wat jy kan oor die kwessie en maniere om dit te benader, is die volgende stap die keuse van 'n ontwerp vir die evaluering. Die ideaal is, dit neem al aan die begin van die proses van om saam 'n program of intervensie. Jou evaluering moet 'n integrale deel van jou program, en sy beplanning moet dus 'n integrale deel van die program beplanning wees. Dit is die ideale; nou kom ons praat oor die werklikheid. As jy dit lees, is die kanse waarskynlik ten minste 50-50 wat jy gekoppel is aan 'n onderbefonds regering agentskap of 'n gemeenskapsgebaseerde of nie-regeringsorganisasie, en dat jy van plan is 'n evaluering van 'n program of ingryping dit is reeds vir 'n geruime tyd - maande of selfs jare. Selfs as dit waar is, dieselfde riglyne geld. Kies jou vrae, inligting te versamel, kies 'n ontwerp, en dan gaan jy op deur die stappe wat in hierdie hoofstuk. Evaluering is belangrik genoeg dat jy nie regtig iets te vervul deur die neem van kortpaaie in die beplanning nie. As jou program het 'n siklus, dan maak dit waarskynlik sin om jou evaluering begin by die begin van dit - die begin van 'n jaar of 'n program fase, waar al die deelnemers is vanaf dieselfde plek, of vanaf die begin van hul betrokkenheid. As dit nie moontlik is - as jou program het 'n rollende toelatingsbeleid, of 'n diens wanneer mense dit nodig het - en deelnemers is almal op verskillende punte, wat kan soms teenwoordig navorsingsprobleme. Wil jy dalk gevolge van die program te evalueer net met nuwe deelnemers, of met 'n ander spesifieke groep. Aan die ander kant, as jou program werk sonder 'n spesifieke begin en einde, jy kan die beste foto van die doeltreffendheid daarvan te kry deur die evaluering is dit soos dit is, begin wanneer jy klaar is. Wat ook al die geval is, moet jou ontwerp jou inligting versamel en sintese volg. Wie moet betrokke wees by die keuse van 'n model? As jy 'n gereelde Tool Box gebruiker, en veral as jy is die lees van hierdie hoofstuk, moet jy weet dat die Tool Box span oor die algemeen beveel 'n deelnemende proses - wat beide navorsing en gemeenskapsdiens vennote, insluitend almal met 'n belangstelling in of wat geraak met die program in die beplanning en implementering. Die keuse van 'n ontwerp vir evaluering bied 'n bietjie van 'n uitsondering op hierdie beleid, aangesien wetenskaplike of evaluering vennote kan 'n veel beter begrip van wat nodig is om navorsing te doen het, en van die faktore wat kan inmeng met dit. Soos ons sal sien in die "hoe-om-" deel van hierdie afdeling, is daar 'n aantal oorwegings wat in ag geneem moet word om akkurate inligting wat jy eintlik sê wat jy wil weet kry. Nagraadse studente kursusse te neem oor die algemeen om die kennis wat hulle nodig het om navorsing goed te doen kry, en selfs 'n paar veteraan navorsers sukkel oprigting van 'n gepaste navorsingsontwerp. Dit beteken nie dat 'n gemeenskap groep kan nie leer om dit te doen nie, maar eerder dat die tyd wat hulle wil hê om te spandeer op die verkryging van agtergrondkennis te groot sou wees. So, dit maak die meeste sin om hierdie taak toewys (of ten minste sy koördinasie) aan 'n individu of klein groep met ondervinding in navorsing en evaluering ontwerp. So 'n persoon kan nie help om net jy kies tussen moontlike ontwerpe, maar verduidelik wat elke ontwerp behels, in die tyd, hulpbronne en vaardighede, sodat jy sy toepaslikheid en lewensvatbaarheid kan oordeel vir jou konteks. Hoe kan jy 'n ontwerp vir jou evaluering te kies? Hoe gaan jy te werk besluit watter soort navorsingsontwerp die beste dien die doel van jou evaluering? Die antwoord op die vraag behels 'n ondersoek van vier areas: Die aard van die navorsingsvrae wat jy probeer om te antwoord Die uitdagings vir die navorsing en die maniere waarop hulle kan opgelos word of verminder Die soorte navorsingsontwerpe wat algemeen gebruik word, en wat elke ontwerp behels Die moontlikheid van aanpassing 'n spesifieke navorsingsontwerp om jou program of situasie - wat die struktuur van jou program sal ondersteun, wat deelnemers sal instem om, en wat jou hulpbronne en tydsbeperkings is Ons sal begin hierdie deel van die artikel met 'n ondersoek van die bekommernisse navorsingsontwerpe moet aanspreek, gaan na die oorweging van 'n paar algemene ontwerpe en hoe goed hulle aan te spreek hierdie probleme, en eindig met 'n paar riglyne vir die keuse van 'n ontwerp wat beide moontlik sal wees om implementeer en gee jou die inligting wat jy nodig het oor jou program. Let. in hierdie deel van die artikel, ons kyk na evaluering as 'n navorsingsprojek. As gevolg hiervan, sal ons die term "navorsing" op baie plekke waar ons kon net so maklik het gesê te gebruik, vir die doeleindes van hierdie artikel beteken "evaluering." Navorsing is meer algemeen, en 'n paar gebruikers van hierdie artikel kan meer wees gemoeid met navorsing in die algemeen as evaluering in die besonder. Kommer navorsingsontwerpe moet aanspreek Die belangrikste oorweging in die ontwerp van 'n navorsingsprojek - behalwe miskien vir die waarde van die navorsing self - is of jou reëling sal u voorsien met 'n geldige inligting. As jy nie ontwerp en die opstel van jou navorsingsprojek behoorlik, jou bevindings sal nie jou inligting wat akkuraat en waarskynlik ware hou met ander situasies te gee. In die geval van 'n evaluering, wat beteken dat jy 'n basis vir die aanpassing van wat jy doen om te versterk en verbeter dit nie sal hê. Hier is 'n vergesogte voorbeeld wat hierdie punt illustreer. As jy hoogtes se kinders het op die ouderdom van ses, dan wagters groot hoeveelhede van 'n spesifieke kos vir drie jaar - sê wortels - en hulle gemeet weer aan die einde van die tydperk, sal jy waarskynlik vind dat die meeste van hulle was aansienlik langer op nege jaar as sesuur. Jy kan aflei dat dit eet wortels wat die kinders langer omdat jou navorsingsontwerp het jy geen basis vir die vergelyking van groei hierdie kinders se aan dié van ander kinders. Daar is twee soorte bedreigings vir die geldigheid van 'n stukkie van die navorsing. Hulle word gewoonlik na verwys as bedreigings vir interne geldigheid (of die ingryping geproduseer die verandering) en bedreigings vir eksterne geldigheid (of die resultate is geneig om aansoek te doen om ander mense en situasies). Bedreigings vir interne geldigheid Dit is bedreigings (of alternatiewe verduidelikings) om u eis dat dit wat jy het veroorsaak veranderinge in die rigting wat jy is om te doen. Hulle is oor die algemeen gestel word deur faktore bedryf op dieselfde tyd as jou program of intervensie wat 'n invloed op die probleem wat jy probeer om aan te spreek kan hê. As jy nie 'n manier om die gevolge daarvan te skei van dié van jou program, kan jy nie sê of die waargenome veranderinge wat veroorsaak word deur jou werk, of deur een of meer van die ander factors. They're bedreigings geroep om interne geldigheid, want hulle is interne tot die studie - hulle het te doen met die vraag of jou ingryping - en nie iets anders - verantwoordelik vir die verskil. Daar is verskeie vorme van bedreigings vir interne geldigheid: Geskiedenis. Beide deelnemers se persoonlike geskiedenis - hul agtergronde, kulture, ervarings, opvoeding, ens - en eksterne gebeure wat tydens die navorsing tydperk - 'n ramp, 'n verkiesing, konflik in die gemeenskap, 'n nuwe wet - kan beïnvloed of daar enige verandering in die uitkomste wat u oorweeg is. Veroudering. Dit verwys na die natuurlike fisiese, sielkundige en sosiale prosesse wat plaasvind met verloop van tyd. Die groei van die wortel eet kinders in die voorbeeld hierbo is 'n gevolg van veroudering, byvoorbeeld, as 'n afname in riskante gedrag soos iemand oorgegaan het uit die adolessensie, asook volwassenheid kan wees, die ontwikkeling van artritis in ouer mense, of deelnemers besig om moeg tydens leeraktiwiteite teen die einde van die dag. Die gevolge van die toets of waarneming op deelnemers. Die blote feit van die bestaan, of van hul deelname aan dit, 'n program se mag gedrag of houdings deelnemers se invloed, soos die ervaring van getoets, videoband, of anders waargeneem of gemeet. Veranderinge in meting. 'N instrument - 'n bloeddruk cuff of 'n skaal, byvoorbeeld - kan verander met verloop van tyd, of verskillende mense kan nie dieselfde resultate gee. Op dieselfde wyse, waarnemers - diegene inligtingversameling - kan hulle vaandels met verloop van tyd verander, of twee of meer waarnemers kan saamstem oor die waarnemings. Regressie na die gemiddelde. Dit is 'n statistiese term wat verwys na die feit dat, met verloop van tyd, die baie hoë en baie lae tellings op 'n maatstaf ( 'n toets, byvoorbeeld) is dikwels geneig om terug in die rigting van die gemiddelde vir die groep dryf. As jy 'n program met die deelnemers begin wat per definisie het 'n baie lae of hoë vlakke van alles wat jy meet - leesvaardigheid, blootstelling aan gesinsgeweld, veral gedrag teenoor mense van ander rasse of agtergronde, ens - hul tellings kan eindig nader aan die gemiddelde in die loop van die evaluering tydperk, selfs sonder 'n program. Die keuse van deelnemers. Diegene wat deelnemers kies kan hul keuse in die rigting van 'n bepaalde groep wat meer of minder geneig om te verander as 'n deursnit van die bevolking waaruit die groep gekies inslag. ( 'N Goeie voorbeeld is dié van indiensneming opleidingsprogramme wat betaal volgens die aantal mense wat hulle plaas in werksgeleenthede. Hulle is meer geneig om deelnemers wat reeds almal of die meeste van die vaardighede wat hulle nodig het om in diens geneem te word kies, en verwaarlosing diegene wat minder vaardighede. en wat dus die meeste nodig het die diens.) seleksie kan 'n rol speel wanneer die deelnemers hulself kies om in te skryf in 'n program (self-seleksie), aangesien diegene wat besluit om deel te neem is waarskynlik reeds gemotiveer om veranderinge aan te bring. Dit kan ook 'n kwessie van kans wees: lede van 'n bepaalde groep kan net toevallig, deel 'n eienskap wat hul uitslae uitmekaar sal stel op jou toegemeet die norm van die bevolking wat jy teken is van. Seleksie kan ook 'n probleem wees as twee groepe vergelyk word gekies deur verskillende standaarde. Ons sal dit verder onder toe gaan ons voort met beheer of vergelyking groepe bespreek. Die verlies van data of deelnemers. As te min inligting is ingesamel oor deelnemers, of indien te veel uitsak goed voor die navorsing tydperk verby is, die resultate kan gebaseer wees op te min data betroubaar te wees. Dit spruit ook toe twee groepe vergelyk word. As hul verliese van data of deelnemers is beduidend anders, hulle vergelyk kan nie meer geldig inligting gee jou. Die aard van verandering. Dikwels, verandering is nie bestendige en selfs. Dit kan spronge vorentoe betrek en spring agteruit voordat dit na 'n stabiele plek - as dit ooit doen. (Dink aan te kyk na die prestasie van 'n sportspan halfpad deur die seisoen. Maak nie saak wat sy rekord is op daardie oomblik, sal jy nie weet hoe goed dit sal eindig tot die seisoen verby is.) Jou metings kan plaasvind oor te kort 'n tydperk of kom op die verkeerde tye om die ware verloop van die verandering of 'n gebrek aan verandering wat is wat plaasvind op te spoor. 'N Kombinasie van die gevolge van twee of meer van hierdie. Twee of meer van hierdie faktore kan kombineer om te produseer of die veranderinge jou program het ten doel om die produk te verhoed. 'N Taal-studie kurrikulum wat getoets net op studente wat reeds twee of meer tale praat loop in die moeilikheid met die geskiedenis beide deelnemers se - al die studente het behalwe hul eie ervaring leer van tale - en seleksie - wat jy gekies het studente wat baie kans op sukses by die aanleer van taal te wees. Bedreigings vir eksterne geldigheid Dit is faktore wat jou vermoë om jou navorsingsresultate van toepassing in ander omstandighede beïnvloed - die kanse dat jou program en die gevolge daarvan elders of met ander bevolkings weergegee kan word verhoog. As, byvoorbeeld, jy ouerskap klasse bied net om enkelma's, kan jy nie aanvaar, maak nie saak hoe suksesvol hulle blyk te wees, wat dieselfde klasse sowel sal saam met mans. Bedreigings vir eksterne geldigheid (of veralgemeenbaarheid) kan die gevolg van die interaksie van ander faktore met die program of intervensie self, of dalk as gevolg van spesifieke omstandighede van die program wees. Interaksie van die toets of data-insameling en die program of intervensie. 'N Aanvanklike toets of waarneming dalk die manier deelnemers reageer op die program te verander, maak 'n verskil in die finale uitkomste. Aangesien jy nie kan aanvaar dat 'n ander groep dieselfde reaksie sal hê of te bereik soortgelyke finale uitkomste as gevolg daarvan, eksterne geldigheid of veralgemeenbaarheid van die bevindinge word bevraagteken. Interaksie van keuringsprosedures en die program of intervensie. As die deelnemers gekies of self gekies is besonder sensitief vir die metodes of doel van die program, kan dit nie aanvaar word effektief met deelnemers wat minder sensitief of gereed vir die program te wees. Ouers wat deur die regering het gedreig met die verlies van hul kinders as gevolg van kindermishandeling kan meer ontvanklik vir leer tegnieke vir die verbetering van hul ouerskap, byvoorbeeld, as ouers wat onder geen sodanige druk. Die gevolge van die navorsing reëlings. Deelnemers mag gedrag te verander as gevolg van wat waargeneem word, of kan reageer op spesifieke individue op 'n manier wat hulle dit onwaarskynlik om te reageer op ander sou wees. 'N Klassieke voorbeeld hier is dié van 'n bekende bobbejaan navorser, Irven Big size, wat na jare van die waarneming van troepe van bobbejane, besef dat hulle anders opgetree het toe hy daar as wanneer hy nie was. Hoewel sy bedoeling was om hul natuurlike gedrag waarneem, sy teenwoordigheid self saamgestel 'n ingryping, wat die gedrag van die bobbejane hy verskil van dié van 'n geselskap wat nie waargeneem waarneem. Die inmenging van verskeie behandelings of ingrypings. Die gevolge van 'n bepaalde program kan verander wanneer die deelnemers vooraf blootgestel word aan dit in 'n ander konteks, of blootgestel word aan 'n ander voor of op dieselfde tyd as die een wat geëvalueer. Dit mag voorkom wanneer deelnemers ontvang dienste uit verskillende bronne, of gelyktydig behandel vir twee of meer gesondheidskwessies of ander toestande. Gegewe die omvang van gemeenskapsprogramme wat bestaan, is daar baie moontlikhede hier. Volwassenes kan lede van 'n hoërskool voltooi klas deel te neem in 'n dwelmmisbruik herstelprogram. 'N diabeet kan behandel word met 'n nuwe dwelm, terwyl op dieselfde tyd wat deelneem aan 'n voeding en fisieke aktiwiteit program om te gaan met vetsug. Soms, kan die volgorde van behandeling of dienste in 'n enkele program dieselfde effek hê, met een beïnvloed hoe deelnemers reageer op diegene wat volg, selfs al is elke behandeling word afsonderlik geëvalueer. Gemeenskaplike navorsingsontwerpe Baie boeke is geskryf oor die onderwerp van navorsingsontwerp. Terwyl hulle te veel materiaal bevat om hier op te som, daar is 'n paar basiese ontwerpe wat ons kan stel. Die belangrikste verskille tussen hulle kom neer op hoeveel metings jy neem, wanneer jy dit sal neem, en hoeveel groepe van watter soort sal betrokke wees. Programevaluerings algemeen kyk vir die antwoorde op drie basiese vrae: Was daar enige verandering - in deelnemers se of ander se gedrag, in fisiese of sosiale omstandighede, of in uitkomste of aanwysers van suk - tydens die evaluering tydperk? Is alles wat verandering plaasgevind het - of die gebrek aan verandering - wat veroorsaak word deur jou program, ingryping, of poging? Wat, in jou program of daarbuite, eintlik veroorsaak of verhinder die verandering? Soos ons bespreek het, kan veranderinge en verbetering in uitkomste gewees het wat veroorsaak word deur sommige of al jou ingryping, of deur eksterne faktore. Deelnemers se of die geskiedenis van die gemeenskap se mag noodsaaklik wees. dikwels 'n probleem by die werk met kinders of tieners - Deelnemers kan as gevolg van net ouer en meer volwasse of meer ervare in die wêreld het verander. Omgewingsfaktore - gebeure, beleid verander, of toestande in lewens deelnemers se - kan dikwels fasiliteer of verandering te voorkom sowel. Verstaan ​​presies waar die verandering vandaan kom of waar die hindernisse tot verandering woon, gee jou die geleentheid om jou program om voordeel te trek of te bekamp dié faktore aan te pas. As alles wat jy moes doen, was om alles wat gedrag te meet of te kondisioneer jy wou beïnvloed aan die begin en einde van die evaluering, die keuse van 'n ontwerp sal 'n maklike taak wees. Ongelukkig, dit is nie heeltemal so eenvoudig nie - daar is die nare bedreigings vir geldigheid te bekommer nie. Ons moet hulle in gedagte hou as ons kyk na 'n paar algemene navorsingsontwerpe. Navorsingsontwerpe, in die algemeen, verskil in een of albei van twee maniere: die aantal en tydsberekening van die metings wat hulle gebruik; en of hulle kyk na enkele of veelvuldige groepe. Ons sal kyk na enkele-groep ontwerpe eerste, dan gaan jy na verskeie groepe. Voordat ons verder gaan, is dit nuttig om 'n begrip van 'n paar basiese navorsing terme wat ons gaan gebruik in ons bespreking het. Navorsers gewoonlik verwys na jou eerste meting (s) of waarneming (s) - die mense wat jy neem voordat jy begin jou program of intervensie - as 'n basislyn maatstaf of basislyn waarneming. 'n bekende vlak - - want dit sal 'n basislyn bepaal waaraan jy vergelyk toekoms metings of waarnemings. Sommige ander belangrike navorsing terme: Onafhanklike veranderlikes is die program self en / of die metodes of toestande wat die navorser - in hierdie geval, jy - wil evalueer. Hulle is geroep veranderlikes, want hulle kan verander nie - jy kan gekies (en dalk steeds kies) ander metodes. Hulle is onafhanklik, want hulle bestaan ​​is nie afhanklik van die vraag of iets anders gebeur: jy hulle gekies het, en hulle sal deurlopend konsekwent die evaluering tydperk bly. Afhanklike veranderlikes is ook al mag of mag nie verander as gevolg van die teenwoordigheid van die onafhanklike veranderlike (s). In 'n evaluering, jou program of intervensie is die onafhanklike veranderlike. (As jy die evaluering is 'n aantal verskillende metodes of toestande, elkeen van hulle is 'n onafhanklike veranderlike.) Wat jy probeer om te verander is die afhanklike veranderlike. (As jy mik is op verandering in meer as een gedrag of uitkoms, elke tipe van verandering is 'n ander afhanklike veranderlike.) Hulle is geroep afhanklike veranderlikes omdat veranderinge in hulle afhanklik is van die optrede van die onafhanklike veranderlike. of iets anders. Maatreëls is net dat - metings van die afhanklike veranderlikes. Hulle verwys gewoonlik na prosedures wat resultate wat in getalle kan vertaal, en kan die vorm van gemeenskap aanslae, waarnemings, opnames, onderhoude, of toetse te neem nie. Hulle kan ook voorvalle reken of te meet die bedrag van die afhanklike veranderlike (getal of persentasie van kinders wat oorgewig of vetsugtig is, geweldsmisdade per 100,000 bevolking, ens) Waarnemings kan meet betrek, of hulle kan eenvoudig aanteken wat gebeur in spesifieke omstandighede: die maniere waarop mense gebruik 'n ruimte, die soorte interaksies kinders het in 'n klaskamer, die karakter van die interaksies tydens 'n evaluering. Vir gerief, navorsers gebruik dikwels "waarneming" te verwys na enige vorm van meting en ons sal dieselfde konvensie hier gebruik. Voor en na enkel-groep ontwerp Die eenvoudigste ontwerp is ook waarskynlik die minste akkurate en wenslik: die pre (voor) en post (na) meting of waarneming. Dit bestaan ​​uit net meet alles wat jy doen met in een groep - die kindersterftesyfer, werkloosheid, waterbesoedeling - die toepassing van jou ingryping om die groep of gemeenskap, en dan weer die waarneming. Hierdie tipe ontwerp veronderstel dat 'n verskil in die twee waarnemings wat jy sal leer of daar 'n verandering in die tydperk tussen hulle, en aanvaar ook dat enige positiewe verandering veroorsaak is deur die ingryping. In die meeste gevalle, 'n pre-posontwerp sal jy nie veel vertel nie, want dit maak nie regtig enige van die navorsing kommer wat ons bespreek aan te spreek. Dit maak nie verantwoordelik vir die invloed van ander faktore op die afhanklike veranderlike, en dit maak nie vir jou sê niks oor tendense van verandering of die vordering van verandering tydens die evaluering tydperk - net waar deelnemers was aan die begin en waar hulle by die einde. Dit kan jou help om vas te stel of sekere vorme van dinge gebeur het - of is daar 'n afname in die vlak van opvoedkundige bereiking of die bedrag van omgewingsbesoedeling in 'n rivier, byvoorbeeld - maar dit sal nie vir jou sê waarom. Ten spyte van sy beperkinge, neem maatreëls voor en na die intervensie is baie beter as geen maatreëls. Selfs op soek na iets soos oënskynlik eenvoudige om te meet voor en na so bloeddruk (in 'n hartsiekte voorkoming program) is te betwyfel. Bloeddruk kan laer op die laaste opmerking gemaak as die eerste een wees, maar dit vertel jou niks oor hoeveel dit op en af ​​tussen mag gegaan het. As die lesings geneem is deur verskillende mense, kan die verandering wees deels te danke aan verskille in hul vaardigheid, of hoe ontspanne elke staat was om te maak deelnemers voel. Vertroudheid met die program kan ook verminder bloeddruk meeste deelnemers se van die voor - na die post-meting, soos kon 'n ander faktor wat nie spesifiek deel van die onafhanklike veranderlike is geëvalueer. Onderbreek tydreekse ontwerp met 'n enkele groep (eenvoudige tydreekse) 'N onderbroke tydreekse gebruik herhaalde maatreëls voor en na vertraagde implementering van die onafhanklike veranderlike (bv die program, ens) om jou te help uit ander verduidelikings. Hierdie relatief sterk ontwerp - met vergelykings binne die groep - adresse mees bedreigings vir interne geldigheid. Die eenvoudigste vorm van hierdie ontwerp is om herhaalde waarnemings te neem, te implementeer die program of intervensie, en 'n paar keer in ag te neem tydens die evaluering tydperk, insluitende aan die einde. Hierdie metode is 'n groot verbetering op die voor - en na-ontwerp in die sin dat dit volg die tendens van verandering, en kan dus help om te sien of dit werklik die onafhanklike veranderlike wat 'n verandering veroorsaak. Dit kan ook help om die invloed van eksterne faktore te identifiseer soos wanneer die afhanklike veranderlike toon beduidende verandering voor die intervensie geïmplementeer word. Nog 'n moontlikheid vir die ontwerp is om te implementeer meer as een onafhanklike veranderlike, óf deur te probeer twee of meer, een na die ander (dikwels met 'n onderbreking in tussen), of deur die byvoeging van elke oor wat gekom before. This gee 'n beeld nie net van die vordering van verandering, maar kan baie duidelik wys wat verandering veroorsaak. Dit gee 'n evalueerder die geleentheid nie net om die program aan te pas nie, maar om elemente wat geen uitwerking het laat val. Daar is 'n aantal variasies op die onderbreek tyd reeks tema, insluitend wisselende die waarneming keer; implementering herhaaldelik die onafhanklike veranderlike; en implementering van 'n onafhanklike veranderlike, en dan die ander, dan moet die twee saam om hul interaksie te evalueer. In elk verskeidenheid onderbreek tydreekse ontwerp, is dit belangrik om te weet wat jy soek. In 'n evaluering van 'n verkeersbeampte doodmaak beheer program in die Verenigde Koninkryk wat fokus op die vermindering van dronkbestuur, maandelikse metings gelyk aan slegs 'n klein afname in noodlottige ongelukke te wys. Wanneer die statistieke vir naweke, wanneer daar waarskynlik om dronkbestuurders op die pad wees, geskei het, maar hulle het getoon dat die naweek sterftesyfer skerp gedaal met die implementering van die program, en gebly lae daarna. Het die navorsers nie besef dat dit die geval sou wees, sou die program gewees het gestop, en die naweek ongeluksyfer sou gewees het nie verminder. Onderbreek tydreekse ontwerp met verskeie groepe (veelvuldige basislyn / tydreekse) Dit het dieselfde geleenthede as die enkele tydreekse ontwerp, met die bykomende rimpel van die gebruik van herhaalde maatreëls met een of meer ander groepe (sogenaamde verskeie basislyne). Deur die gebruik van verskeie basislyne (groepe), die eksterne geldigheid of algemeenheid van die bevindinge is versterk - ons kan sien of die effekte voorkom met verskillende groepe of onder verskillende toestande. in Opsomming