Koje su vrste provjere valjanosti? Što je? Odgovore na ova i druga pitanja naći ćete u članku. Valjanost je inherentno jedinstvena karakteristika koja uključuje, s jedne strane, podatke o tome je li tehnologija prikladna za mjerenje onoga za što je razvijena, a s druge strane, kolika je njezina učinkovitost, praktična korisnost, učinkovitost. Provjera valjanosti tehnologije naziva se validacija. U nastavku ćemo to detaljnije razmotriti.
Pregledi
Mnogi ljudi pitaju: "Što je validacija?" Kaže se da rafinirani um nema granica. Čini se da se metodolozi natječu jedni s drugima u tome tko će otkriti ili izmisliti više vrsta i vrsta valjanosti. Kakva samo imena u posljednje vrijeme nisu nastala! Ispostavilo se da postoji:
- vanjska i unutarnja valjanost;
- konvergentno;
- diskriminantno;
- očito;
- faktorski;
- predvidivo;
- konstruktivno;
- criterial;
- značajno i tako dalje.
Ne postoji način za razumijevanje, a još više za razumno razlikovanje jedne varijacije od druge. Zbrka u definicijama i klasifikacijama dovodi do činjenice da različiti autori istom obliku valjanosti pripisuju potpuno različite načine poboljšanja.
Vanjski kriteriji
Za provođenje pragmatične validacije metodologije, odnosno za procjenu njezine praktične važnosti, djelotvornosti, učinkovitosti, obično se koristi vanjski neovisni kriterij - pokazatelj pokazivanja kvalitete koja se proučava u svakodnevnom životu. Takav kriterij može biti i proizvodna postignuća (za tehnologije profesionalne orijentacije), i akademski uspjeh (za testove inteligencije, postignuća ili sposobnosti učenja), i učinkovitost stvarnih aktivnosti - modeliranje, crtanje i tako dalje (za testove posebne vještine), osobne procjene (za provjeru identiteta).
Vrste vanjskih kriterija validacije su sljedeće:
- mjere učinka (mogu uključivati kao što je količina provedenog rada, vrijeme provedeno na obuci, akademski uspjeh, stopa rasta kvalifikacija i slično);
- fiziološki znakovi (koriste se pri proučavanju utjecaja okoline i drugih situacijskih varijabli na ljudsku psihu i tijelo);
- mjere se krvni tlak, puls, simptomi umora, električni otpor kože i tako daljesljedeći;
- subjektivne mjere (uključuju različite vrste odgovora koji odražavaju stav osobe prema nekome ili nečemu, njezine stavove, mišljenja, sklonosti; u pravilu se takve mjere dobivaju upitnicima, upitnicima, intervjuima);
- znakovi nesreća (koriste se kada se svrha studije tiče, na primjer, problema odabira za posao ljudi koji su manje skloni nezgodama).
Empirijska valjanost. O čemu se radi?
Malo ljudi zna što je empirijska provjera. U slučaju valjanosti sadržaja, test ocjenjuju stručnjaci (utvrđivanje usklađenosti testnih zadataka sa sadržajem predmeta mjerenja). A empirijski se uvijek mjeri pomoću statističke korelacije: izračunava se korelacija dvije vrste vrijednosti - rezultati testa i indeksi za vanjski parametar odabran kao kriterij pouzdanosti.
Konstruktivno
Ne znaju svi vrste metoda provjere valjanosti. Što je konstruktivna valjanost? Ima veze sa samom teoretskom konstrukcijom, a sastoji se od traženja čimbenika koji objašnjavaju ponašanje izvedbe testa.
Kao specifičan tip, konstruktivna valjanost legitimirana je u članku Mil i Cronbach (1955). Koristeći ovaj oblik valjanosti, autori su evaluirali sva testna istraživanja koja nisu bila izravno usmjerena na predviđanje nekih značajnih kriterija. Istraživanje je sadržavalo informacije o psihološkim konstrukcijama.
Valjanost sadržaja
Još uvijekpitate: "Provjera valjanosti - što je to." Razmotrite valjanost sadržaja. Zahtijeva da svaki problem, pitanje ili zadatak koji pripada danom području ima identičnu šansu da postane testna stavka.
Valjadnost sadržaja procjenjuje prikladnost testnog entiteta za mjereno područje ponašanja. Provjere koje su kreirale dvije grupe programera provode se na uzorku onih koji se provjeravaju. Pouzdanost testova izračunava se dijeljenjem pitanja u dvije zone, što rezultira indeksom valjanosti sadržaja.
predvidljivo
Nastavljamo razmatrati metode provjere valjanosti. Prediktivna valjanost također se utvrđuje vanjskim, prilično pouzdanim kriterijem. Ali podaci o njemu prikupljaju se neko vrijeme nakon provjere.
Vanjsko mjerilo je obično poziv pojedinca, prikazan u bilo kojoj procjeni, za vrstu zanimanja za koje je odabran na temelju rezultata dijagnostičkih testova.
Iako je ova metoda najprikladnija za zadatak dijagnostičkih alata - predviđanje budućeg uspjeha, vrlo ju je teško primijeniti. Točnost prognoze obrnuto je ovisna o vremenu dodijeljenom takvom predviđanju. Što više vremena prođe nakon mjerenja, više čimbenika treba uzeti u obzir prilikom procjene prediktivne vrijednosti tehnologije. Međutim, gotovo je nemoguće uzeti u obzir sve čimbenike koji utječu na predviđanje.
Retrospektiva
Slažem se, validacija je vrlo zamršen proces. Poznato je da se retrospektivna valjanost otkriva na temelju kriterija,odražava stanje kakvoće ili događaja u prošlosti. Može se koristiti za trenutno dobivanje prediktivnih izvora tehnologije. Dakle, kako bi se revidirao stupanj u kojem dobri rezultati testa vještina odgovaraju brzom učenju, može se usporediti prijašnja mišljenja stručnjaka, procjene učinka i tako dalje kod osoba s niskim i visokim dijagnostičkim indeksima u ovom trenutku.
Diskriminantno i konvergentno
Vrste provjere valjanosti zanimaju mnoge. Otkrijmo što su diskriminantna i konvergentna valjanost. Strategija uvođenja utvrđenih stavki u test ovisi o tome kako psiholog otkriva dijagnostički konstrukt. Ako Eysenck kvalitetu "neuroticizma" definira kao neovisnu o introverziji-ekstroverciji, onda to znači da bi njegov upitnik trebao jednako predstavljati pozicije koje će odobriti neurotični ekstroverti i introverti..
Ako se u praksi pokaže da će stavke iz kvadranta "introverzija-neuroticizam" prevladati u zadatku, onda s pozicije Eysenckove teorije to znači da je pokazatelj "neuroticizam" opterećen nebitnim pokazateljem - "introverzija". Identičan učinak pojavljuje se kada postoji pristranost u uzorku - ako u njemu ima više neurotičnih introverta nego istih ekstraverta.
Kako bi izbjegli takve složenosti, psiholozi su spremni baviti se empirijskim stavkama koje informiraju samo o jednom faktoru. Ali u stvarnosti ovaj zahtjev nikada nije ispunjen: ispada da svaki empirijski indeks nije određensamo od faktora koji nam je potreban, ali i od drugih - nebitno za problem mjerenja.
Dakle, za čimbenike koji su konceptualno definirani kao ortogonalni na izmjereno (koji se s njim javljaju u svim kombinacijama), tvorac testa je dužan pri odabiru stavki koristiti strategiju neautentične ravnoteže.
Korespondencija bodova s izmjerenim pokazateljem jamči konvergentnu valjanost testa. Dosljednost stavki u odnosu na nebitne izvore daje diskriminirajuću valjanost. Empirijski se očituje u nedostatku značajne korelacije s testom, koji mjeri konceptualno jedinstvenu kvalitetu.
Komplet alata
U općem skupu metoda provjere, autori obično uključuju:
- neformalizirano (od jednostavnih trikova do pažljivog pregleda popisa alternativa u upitniku do sofisticiranijih postupaka za teorijsku analizu korak po korak);
- formalizirani, koji uključuju postupke i tehnologije matematičke statistike: testiranje statističkih hipoteza, izračunavanje procjena, korelacijske analize, konstrukcija intervala povjerenja, procjena odnosa između varijabli, disperzija, faktorijalna, regresijska i strukturna analiza, itd. na.
Izrada alata
A ipak, što je validacija? Sofisticirane alate za provjeru valjanosti prvi su stvorili psiholozi. Davne 1959. godine posebnu tehniku razvili su D. Fiske i D. Campbell (SAD). Dobila je potpuno prirodan za engleski, ali neprevodiv nanaš jezik, naziv: multi-method-multi-prokleta matrica (MTMM). Ova je matrica bila tablica korelacija. Sastojao se od dva vrlo atraktivna izuma, od kojih je jedan bio namijenjen otkrivanju konvergentne istine, a drugi diskriminirajućoj istini.
Njegovi autori su tvrdili da svatko može dokazati internu prihvatljivost ako:
- vrijednosti između kojih se pretpostavlja visoka razina teorijske povezanosti naći će identičnu razinu u empirijskoj (konvergencija);
- vrijednosti koje su teoretski nepovezane pokazat će se empirijski nepovezanima nakon izvršenja testa (diskriminacija).
Ugrubo govoreći, konvergentna valjanost trebala bi navesti da postoji mnogo više sličnosti između dva tima zaposlenika, na primjer, građevinskih radnika i radnika na montažnoj traci, u smislu šansi na tržištu rada nego između vlasnika i zaposlenika. Ako se teoretski namjeravani odnos pronađe empirijski, vaš je uzorak valjan.
Diskriminirajuća valjanost pokazuje stupanj identifikacije različitih pojava. Uzmimo li isti primjer tržišta rada, očekivalo bi se da dobro oblikovana teorija svojim sredstvima može razlikovati mogućnosti vlasnika i zaposlenika na tržištu rada. Ne možete ih zbuniti, a vaša teorija ih može razlikovati.
Ako ste stvorili ljestvicu koja mjeri matematičke sposobnosti, tada bi u slučaju valjanosti konvergentnih indeksa matematičkih talenata trebalo dobro korelirati s općim vještinama osobe, ako je na teorijskoj razini takav odnospostoji, i to loše - s estetskim sposobnostima koje od osobe zahtijevaju potpuno drugačije talente od sposobnosti brojanja, ako vaša teorija, naravno, proglašava nisku korelaciju.
Vrste
Validacija je proces ugađanja, poboljšanja stvorenih psihodijagnostičkih metoda. Njegova je osnovna zadaća osigurati da tehnologija dijagnosticira upravo ono što razvojni programer treba. Pravi se razlika između teorijske i pragmatične validacije.
Za prvu vrstu, kardinalni problem je odnos između mentalnih pojava i njihovih indeksa, uz pomoć kojih se te pojave pokušavaju spoznati. To pokazuje da su rezultati metodologije i apstraktna namjera autora isti.
Za utvrđivanje apstraktne valjanosti vrlo je teško pronaći bilo koji neovisni kriterij koji je izvan metodologije. Stoga se u povijesti psihodijagnostike u ranim fazama oslanjanje na instinktivni koncept koji test mjeri:
- Metoda se smatrala valjanom ako je jednostavno "očigledna".
- Dokaz valjanosti temeljio se na vjerovanju prospektora da njegova tehnologija može "razumjeti ispitanika".
- Šema se smatrala valjanom samo zato što je teorija iza tehnologije bila "prilično dobra".
Dalje je započela potraga za dokazima opravdanim od strane znanosti. Ovdje treba napomenuti da je neprimjetno gomilanje arsenala tehnologija s već potkrijepljenim i poznatimvaljanost. Ako psihodijagnostičar izradi shemu za procjenu kvalitete i poznato je da su druge, valjane tehnologije usmjerene na istu procjenu, onda možete proučavati korelaciju, usporediti rezultate prema tuđoj i vlastitoj metodi.
Ako je koeficijent korelacije previsok, tada generirana shema ima impresivnu apstraktnu valjanost. Ako ste u nedoumici što točno tehnologija procjenjuje, usporedite rezultate za nju s rezultatima za tuđe važeće sheme koje prepoznaju susjedna (sumnjiva) svojstva. Ako se vrijednosti korelacije pokažu neočekivano velike, može se zaključiti da metoda ne procjenjuje ono što se očekivalo.
Dakle, ako već postoje druge sheme koje imaju za cilj mjerenje potpuno istih normi ili srodnih, možemo odrediti diskriminantnu i konvergentnu valjanost.
Njanse
Dakle, što je validacija? Jednostavnim riječima, ovo je revizija proizvoda kako bi se vidjelo koliko odgovara deklariranim karakteristikama. Odnosno, nijedna provjera valjanosti pametnog telefona neće proći do tada. Dok se kupci ne uvjere da ima kameru i pohranu za koje su spremni platiti.
Kriterij validacije je mjera mentalne kvalitete koja je neovisna i izravna od testa koji se validira, a na koji je usmjerena psihodijagnostička shema.
Trenutna valjanost - značajka testa, koja odražava njegovu sposobnost razlikovanja između ispitanika na temelju dijagnostičke značajke koja je predmet proučavanja u ovommetoda.
Konkurentska valjanost procjenjuje se korelacijom kreiranog testa s ostalima, čija se valjanost u odnosu na izmjereni parametar utvrđuje. Diferencijalna valjanost može se objasniti primjerom testova interesa.
