P rep - modszerek/statisztika GitHub Wiki
A P-rep a hagyományos szignifikanciaszint-számítás lehetséges alternatívája.
Bevezetés
A P-rep (Probability of Replicability, magyarul nincs még „hivatalos” megfelelője, javasolnánk a „megismételhetőségi valószínűség” vagy a „megismételhetőség valószínűsége” elnevezést, amik kicsit erőltetettnek tűnhetnek – ha tudsz jobbat, feltétlen oszd meg velünk!) lényege, hogy ellentétben a hagyományos kétoldali szignifikancia-tesztekkel („p”, „sig”) nem azt mondja meg, hogy mekkora annak a valószínűsége, hogy legfeljebb ilyen extrém értéket kapunk a teljes elméleti populáción elvégezve a kísérletet/mérést/adatfelvételt (más szóval: mekkora a nullhipotézis igaz voltának a valószínűsége, ha nem a mintán, hanem a teljes alapsokaság körében végeznénk el a kísérletet/mérést/adatfelvételt), és egy egyszeri alkalomból indul ki (statikus), hanem a hatás (effect) megismétlődésének valószínűségét adja meg.
Alkalmazása
Ebből már talán sejthető, hogy míg a „hagyományos” p-értéknél (szignifikancia-szint) az a „jó” számunkra, ha a kapott eredmény minél alacsonyabb (közelít a nullához), a P-rep mutatónál az 1,00 közeli (a megismételhetőség teljes bizonyosságára utaló) értékek a „nyerők”. A P-rep sosem éri el az 1,00000-t, mivel ha egy bármekkora elemszámú, bármennyire reprezentatív mintán végzünk el egy adatfelvételt, sohasem lehetünk egészen bizonyosak afelől, hogy az tökéletesen reprezentálja az alapsokaságot.
Általánosságban elmondható, hogy a P-rep (egyelőre?) nem túl elterjedt; magyar nyelven szinte semmi nincs róla. Angolul is viszonylag szűkös az információ; egyelőre csak a pszichológusok, közülük is elsősorban az amerikaiak használják ezt az eljárást.
Kiszámítása
A kétoldali szignifikanciához tartozó p-értékből a P-rep jó közelítéssel a következő képlettel számolható ki:
(forrás: http://en.wikipedia.org/wiki/P-rep)
Kritikák
Mivel ez tulajdonképpen egy egyértelmű megfeleltetés, a P-reppel kapcsolatos kritikák nagy része pont azt hangsúlyozza, hogy nem igazán hoz újat, mivel egy már létező, bevett és széles körben alkalmazott mutatónak az „új köntösbe történő öltöztetéséről” van szó. A P-rep esetében azonban általában nem állítanak fel olyan kritikus értékeket, mint a 0,05 vagy a 0,01 a hagyományos szignifikancia-tesztelésnél. Minél magasabb, annál jobb – szól az interpretációra vonatkozó irányelv. Bizonyos pszichológiai folyóiratok megkövetelnek egy előre megadott P-rep szinteket; legtöbbször, ezek 0,6 körül szoktak lenni, vagyis az ennél magasabb értékű eredményeket fogadják el „tudományosan igazoltnak”.
A mutató mellett érvelők az egyértelműbb interpretációt, a nem „valami vagy fekete, vagy fehér”-típusú megállapításban rejlő kifinomultabb, tudományosabb magyarázatot hangoztatják.
Szoftverek
Az SPSS szoftver (beleértve a 17.0-s, legújabb verziót is) nem tud P-repet számolni. Létezik azonban az Arisona State University (ott dolgozik Peter R. Kileen, aki azt a vitaindító cikket írta, amelyet a P-rep pszichológiai statisztikai alkalmazásának bevezetését javasolja) honlapján egy "P-rep Pack", amelyikben benne van az összes lényeges, a témával foglalkozó folyóiratcikk EndNote-os hivatkozás-könyvtárakkal együtt (Kileené is, mint „vitaindító”), valamint egy Excel-tábla, amelyik több féle inputból is képes kiszámolni a megfelelő P-rep értéket. A "csomag" szabadon használható, terjeszthető, lefordítható.
Külső hivatkozások
A vitaindító cikk: http://www.pubmedcentral.nih.gov/articlerender.fcgi?artid=1473027
Innen tölthető le a P-rep csomag (.zip fájl): http://psychology.clas.asu.edu/files/%20p-rep%20pack.zip
Az oldalt készítette: Kékesi Márk