Ha például diákok egy csoportja részt vesz egy teszten, akkor elvárható, hogy nagyon hasonló eredményeket mutassanak, ha néhány hónappal később ugyanazt a tesztet írják meg. Ez a meghatározás arra támaszkodik, hogy a közbeeső időintervallumban nincs zavaró tényező.
Az olyan eszközök, mint az IQ-tesztek és a felmérések kiválóan alkalmasak a teszt-reteszt módszer alkalmazására, mivel kicsi az esélye annak, hogy az emberek hirtelen megugrik az IQ-juk vagy hirtelen megváltozik a véleményük.
Az oktatási tesztek viszont gyakran nem alkalmasak, mivel a diákok sokkal több információt tanulnak a közbeeső időszakban, és a második tesztben jobb eredményeket mutatnak.
Teszt-teszt megbízhatósága és az idő múlása
Ha például a diákok egy csoportja közvetlenül a félév vége előtt ír egy földrajz tesztet, majd a következő félév elején, amikor visszatérnek az iskolába, a teszteknek nagyjából ugyanazokat az eredményeket kell produkálniuk.
Ha viszont a tesztet és a megismételt tesztet a félév elején és végén írják, akkor feltételezhető, hogy a közbeeső órák javították a tanulók képességeit. Így a teszt-reteszt megbízhatósága sérül, és más módszerek, például az osztott tesztelés jobb.
Még akkor is, ha a teszt-reteszt megbízhatósági eljárást úgy alkalmazzuk, hogy nincs jele a közbeeső tényezőknek, mindig lesz bizonyos fokú hiba. Nagy az esélye annak, hogy az alanyok emlékeznek néhány kérdésre az előző tesztből, és jobban teljesítenek.
Egyes alanyoknak lehet, hogy egyszerűen csak rossz napjuk volt az első alkalommal, vagy nem vették komolyan a tesztet. Ezen okok miatt a vizsgák megismétlése előtt álló tanulók számíthatnak arra, hogy más kérdésekkel kell szembenézniük, és ennek ellensúlyozására kissé keményebb színvonalú értékelésre számíthatnak.
A felmérések során is könnyen elképzelhető, hogy nagymértékben megváltozik a véleményük. Lehet, hogy az embereket a kedvenc kenyérfajtájukról kérdezték. A közbeeső időszakban, ha egy kenyérgyártó cég hosszú és kiterjedt reklámkampányt indít, az valószínűleg az adott márka javára befolyásolja a véleményt. Ez veszélyezteti a teszt-reteszt megbízhatóságát, így az elemzést óvatosan kell kezelni.
Teszt-visszaellenőrzési megbízhatóság és zavaró tényezők
A teszt-visszaellenőrzési megbízhatóság számszerűsítésének egy eleme, a statisztikai tesztek ezt figyelembe veszik az elemzésben, és egy nulla és egy közötti számot állítanak elő, ahol az 1 tökéletes korrelációt jelent a teszt és az ismételt teszt között.
A tökéletesség lehetetlen, és a legtöbb kutató elfogad egy alacsonyabb szintet, 0,7, 0,8 vagy 0,9-et, az adott kutatási területtől függően.
Ez azonban nem képes teljesen eltávolítani a zavaró tényezőket, és a kutatónak előre kell látnia és kezelni kell ezeket a kutatás tervezése során a teszt-reteszt megbízhatóság fenntartása érdekében.
Az esélyt, hogy néhány alany bármilyen okból kifolyólag torzítja az eredményeket, a korrelációs teszt sokkal pontosabb nagy alanycsoportok esetén, elnyomja a szélsőségeket, és pontosabb eredményt ad.