Összetettvizsgálati tervek...

33
Összetett vizsgálati tervek és kiértékelésük Kettő és több szempontos variancia analizis modellek

Upload: trinhque

Post on 15-Mar-2019

231 views

Category:

Documents


0 download

TRANSCRIPT

Page 1: Összetettvizsgálati tervek éskiértékelésükxenia.sote.hu/hu/biosci/docs/biometr/ANOVA-tobbszempontos-2017-11... · ... (one way ANOVA, two way ... 2 szempontos ANOVA. Példa:

Összetett vizsgálati tervek és kiértékelésük

Kettő és több szempontos variancia analizis modellek

Page 2: Összetettvizsgálati tervek éskiértékelésükxenia.sote.hu/hu/biosci/docs/biometr/ANOVA-tobbszempontos-2017-11... · ... (one way ANOVA, two way ... 2 szempontos ANOVA. Példa:

A kezelések osztályozása

• Ha legalább két féle beavatkozást vizsgálunk és azokat egymással kombinálva is alkalmazzuk, akkor

• több szempontos vagy más néven• több utas elemzést végzünk (one way ANOVA, two way

ANOVA, stb.)

• Az egyes szempontoknak megfelelő kezeléseket minden vizsgálati alanyon úgy alkalmazzuk, hogy az alany kapjon

• egy kezelést az 1. szempont szerint és • egy kezelést a 2. szempont szerint• és így tovább, ha több szempont van• és minden kezelést kiosztunk

Page 3: Összetettvizsgálati tervek éskiértékelésükxenia.sote.hu/hu/biosci/docs/biometr/ANOVA-tobbszempontos-2017-11... · ... (one way ANOVA, two way ... 2 szempontos ANOVA. Példa:

Miért tervezzünk több szempontos elrendezést?

• Ha teljesülnek a feltételezések, akkor az optimális hatékonyságú eljárás több kérdés vizsgálatára

• Jobban véd a véletlen okozta tévedésektől, mint az egyszerűbb vizsgálatok sorozata

• Közös, nagyobb szabadságfokú becslés adható a véletlen hibára, a populáció varianciájára

• Közös elsőfajú hiba használható,

• Jó hatásfokú többes összehasonlító eljárásokállnak rendelkezésre

• Sokféle kérdés és összehasonlítás lehetséges,több, mint az egyszempontos ANOVA esetében

Page 4: Összetettvizsgálati tervek éskiértékelésükxenia.sote.hu/hu/biosci/docs/biometr/ANOVA-tobbszempontos-2017-11... · ... (one way ANOVA, two way ... 2 szempontos ANOVA. Példa:

ANOVA modellek

• Ahol: i, j, k, l jelöli azt, hogy a többes előfordulásból melyikről beszélünk

• xijkl = Az egyes megfigyelések értéke (például x2,5 a második csoportban az 5. megfigyelés

• Az utolsó index a csoporton belüli mintaelemeken fut végig

• M = nagyátlag

• A, B, C = a kezelések szempontjai, amin belül 2, vagy több kezelés lehet (i darab, j darab, k darab)

• A x B jelöli az A és B szempontba sorolt kezelések kölcsönhatásait

• jelzi a véletlennek tulajdonítható, normál eloszlású szóródás változóját(hibavariancia)

ijiij AMx

ijkijjiijk AxBBAMx

ijklijkjkikijkjiijkl AxBxCBxCAxCAxBCBAMx

Page 5: Összetettvizsgálati tervek éskiértékelésükxenia.sote.hu/hu/biosci/docs/biometr/ANOVA-tobbszempontos-2017-11... · ... (one way ANOVA, two way ... 2 szempontos ANOVA. Példa:

Illusztráció a négyzetes összeg felbontásához

véletlen komponens

csoportosítási komponens

rögzített érték

=Adat

Átlag

Nagy átlag

Page 6: Összetettvizsgálati tervek éskiértékelésükxenia.sote.hu/hu/biosci/docs/biometr/ANOVA-tobbszempontos-2017-11... · ... (one way ANOVA, two way ... 2 szempontos ANOVA. Példa:

A négyzetes összeg és annak felbontása

• A minta elemek szórásának vizsgálata során először a négyzetes eltéréseket, majd az összegzett négyzetes eltéréseket vizsgáljuk. Az "átlagos" négyzetes eltérés a variancia, ennek négyzetgyöke a szórás (standard deviáció).

• A mintaelemekből számított teljes négyzetes összeg olyan összeadandókból áll, amelyek egyes tagjai a szóródást létrehozó különféle tényezőkről, "okokról" tájékoztatnak.

• A csoportosítási komponens négyzetes összege tovább particionálható, felbontható (additív) komponensekre.

• Az átlagolt négyzetes összegek (variancia = szórásnégyzet) nem additívak, hanem súlyozottan átlagoltak.

Page 7: Összetettvizsgálati tervek éskiértékelésükxenia.sote.hu/hu/biosci/docs/biometr/ANOVA-tobbszempontos-2017-11... · ... (one way ANOVA, two way ... 2 szempontos ANOVA. Példa:

A négyzetes összeg összetevőiegy szempont esetén

Az A szempont szóródása

A véletlen okozta szóródás

Page 8: Összetettvizsgálati tervek éskiértékelésükxenia.sote.hu/hu/biosci/docs/biometr/ANOVA-tobbszempontos-2017-11... · ... (one way ANOVA, two way ... 2 szempontos ANOVA. Példa:

A négyzetes összeg összetevőikét szempont esetén

Az A szempont szóródása

A véletlen okozta szóródás

A B szempont szóródása

Az A x B szempontok

kölcsönhatásának szóródása

Page 9: Összetettvizsgálati tervek éskiértékelésükxenia.sote.hu/hu/biosci/docs/biometr/ANOVA-tobbszempontos-2017-11... · ... (one way ANOVA, two way ... 2 szempontos ANOVA. Példa:

A négyzetes összeg összetevőihárom szempont esetén

Az A szempont szóródása

A véletlen okozta szóródás

A B szempont szóródása

A szempontok (A, B, C)

kölcsönhatásainak (4 db!)

szóródása

A C szempont szóródása

Page 10: Összetettvizsgálati tervek éskiértékelésükxenia.sote.hu/hu/biosci/docs/biometr/ANOVA-tobbszempontos-2017-11... · ... (one way ANOVA, two way ... 2 szempontos ANOVA. Példa:

Két szempontos ANOVA elrendezése(kezelések kiosztása 3x4-es esetben)

B szempont

A szempont

B1 B2 B3 B4

A1 A1B1

(n11)

A1B2

(n12)

A1B3

(n13)

A1B4

(n14)

A2 A2B1

(n21)

A2B2

(n22)

A2B3

(n23)

A2B4

(n24)

A3 A3B1

(n31)

A3B2

(n32)

A3B3

(n33)

A3B4

(n34)

Page 11: Összetettvizsgálati tervek éskiértékelésükxenia.sote.hu/hu/biosci/docs/biometr/ANOVA-tobbszempontos-2017-11... · ... (one way ANOVA, two way ... 2 szempontos ANOVA. Példa:

Két szempontos ANOVA modellje

xij=Nagyátlag+Ai+Bj+(AxB)ij+ij(ahol (AxB)ij az Ai és Bj kezelések interakciója)

i darab kezelés az A szempont szerint,

(úgy mondjuk i -ik szintje A-nak)

j darab kezelés a B szempont szerint,

kezelésenként (celllánként ugyanannyi eset) n megfigyelés esete

Feltételezések

1. A mérések populációi normális eloszlásúak

2. A mérések populációinak eloszlásai homogének

3. A megfigyelések egymástól függetlenek.

4. A szórások nem különbözőek (homoscedascitás)

Hipotézis(ek)

A nullhipotézis Ai=Bj=(AiBj)=0, (ij) =0, minden i-re és j-re

Az alternativ hipotézis Ai, Bj, (AiBj) <>0, (ij) =0, legalább egy i-re vagy j-re

Itt a két szempontú kezelést egymástól függetlenül valósítjuk meg.

Minden lehetséges kombinációt alkalmazunk.

Page 12: Összetettvizsgálati tervek éskiértékelésükxenia.sote.hu/hu/biosci/docs/biometr/ANOVA-tobbszempontos-2017-11... · ... (one way ANOVA, two way ... 2 szempontos ANOVA. Példa:

Két szempontos ANOVA tábla

Forrás sz.fok(df) Négyzetes

összeg

variancia F P

A kezelés i-1 QA

(SSA)

s2A

(MSA)

s2A/s2

b

B kezelés j-1 QB

(SSB)

s2B

(MSB)

s2B/s2b

AxB

interakció

(i-1)*(j-1) QAB

(SSAB)

s2AB

( MSAB )

s2AB/s2

b

Mintákon

belül

ij(n-1) QB

(SSwithin)

s2b

(Mswithin )

Összes ijn-1 Qösszes

(SStotal)

S2összes

Négyzetes összeg= Sum of Squares (SS)

Variancia=Mean Squares (MS), (SSwithin) másképpen (SSerror),

(MSwithin) másképpen (MSerror)

Page 13: Összetettvizsgálati tervek éskiértékelésükxenia.sote.hu/hu/biosci/docs/biometr/ANOVA-tobbszempontos-2017-11... · ... (one way ANOVA, two way ... 2 szempontos ANOVA. Példa:

Egyszerű példa a két szempontos ANOVA-ra

• Vizsgálat célja: stressz hatás és nyugtató kölcsönhatásának vizsgálata

• Két féle kezelés, két szempont:• Stressz és kontroll (két csoport)• Nyugtató és kontroll (két csoport)

• 2x2-es elrendezés - 4 csoport

• A mérendő változó: plazma kortikoszteron szint 60 perccel a stressz után

• Statisztikai elrendezés: 2 szempontos ANOVA

Page 14: Összetettvizsgálati tervek éskiértékelésükxenia.sote.hu/hu/biosci/docs/biometr/ANOVA-tobbszempontos-2017-11... · ... (one way ANOVA, two way ... 2 szempontos ANOVA. Példa:

Példa: plazma kortikoszteron (μg/dl) stresszben

Kontroll Stressz

Kontroll (oldószer)

9,6 27,5 5,8 12,8 6,3 32,7 7,3 8,7

58,0 53,0 65,5 58,3 60,3 49,8 31,5 68,0

Nyugtató 12,7 27,7 19,0 8,7 16,0 13,1 5,4 13,1

30,4 20,9 39,0 27,0 67,5 38,2 17,6 56,0

Page 15: Összetettvizsgálati tervek éskiértékelésükxenia.sote.hu/hu/biosci/docs/biometr/ANOVA-tobbszempontos-2017-11... · ... (one way ANOVA, two way ... 2 szempontos ANOVA. Példa:

A példát elemezzük

Page 16: Összetettvizsgálati tervek éskiértékelésükxenia.sote.hu/hu/biosci/docs/biometr/ANOVA-tobbszempontos-2017-11... · ... (one way ANOVA, two way ... 2 szempontos ANOVA. Példa:
Page 17: Összetettvizsgálati tervek éskiértékelésükxenia.sote.hu/hu/biosci/docs/biometr/ANOVA-tobbszempontos-2017-11... · ... (one way ANOVA, two way ... 2 szempontos ANOVA. Példa:
Page 18: Összetettvizsgálati tervek éskiértékelésükxenia.sote.hu/hu/biosci/docs/biometr/ANOVA-tobbszempontos-2017-11... · ... (one way ANOVA, two way ... 2 szempontos ANOVA. Példa:
Page 19: Összetettvizsgálati tervek éskiértékelésükxenia.sote.hu/hu/biosci/docs/biometr/ANOVA-tobbszempontos-2017-11... · ... (one way ANOVA, two way ... 2 szempontos ANOVA. Példa:
Page 20: Összetettvizsgálati tervek éskiértékelésükxenia.sote.hu/hu/biosci/docs/biometr/ANOVA-tobbszempontos-2017-11... · ... (one way ANOVA, two way ... 2 szempontos ANOVA. Példa:

Egy szempontos ANOVA - randomizált blokkban

• Értelmezés, az interakció kezelése• Két kezelés esetében az egymintás t próbával ekvivalens.• Az analízis célja az A kezelés vizsgálata, azon belül, szignifikáns

F érték esetében a többszörös összehasonlítás. • Az esetleges interakció problémás, mert

akkor jó az ilyen elrendezés, ha a blokkokban csoportosítotttulajdonság nincs interakcióban a kezelésekkel.

• Interakció észlelésekor annak okát fel kell deríteni, ésa teljesen randomizált, nem blokk elrendezés szerintértékelni.

• Javaslatok, ajánlások• Az elemzés során, ha az interakció nem szignifikáns, akkor

annak szabadságfokát, és négyzetes összegét a véletlennektulajdonítható particióba vonhatjuk be ( angolul pool, pooling), ezzel is javitjuk a véletlen ingadozás becslését. A STATISTICA program erre ad lehetőséget.

Page 21: Összetettvizsgálati tervek éskiértékelésükxenia.sote.hu/hu/biosci/docs/biometr/ANOVA-tobbszempontos-2017-11... · ... (one way ANOVA, two way ... 2 szempontos ANOVA. Példa:

Randomizált blokk ANOVA elrendezés

Kezelés (A)

Blokk (B)

B1 A1 A3 A4 A2

B2 A2 A3 A1 A4

B3 A3 A2 A4 A1

Valamilyen ismert tényező szerint homogén blokkokat képezünk, a blokkokon belül a kezeléseket (mindegyikből azonos számút) randomizáltan osztjuk el.

Példa: 4 kezelés (A1,..,A4) elrendezése 3 blokkban (B1, B2, B3), ahol minden blokkon belül több (4xnj)megfigyelést végzünk.

Page 22: Összetettvizsgálati tervek éskiértékelésükxenia.sote.hu/hu/biosci/docs/biometr/ANOVA-tobbszempontos-2017-11... · ... (one way ANOVA, two way ... 2 szempontos ANOVA. Példa:

Randomizált blokk elrendezés

Jelölés: Blokk=B, véletlen változó, ami szóródást okoz az elemzésben

A modell

Az xij megfigyelés additív összetevői:

Xij=Nagyátlag+Ai+Blokkj+(AxBlokk)ij+ij (ahol AxBlokk az Ai és Bj interakciója)

Feltételezések

1. A mérések populációi normális eloszlásúak

2. a mérések populációinak eloszlásai homogének

3. A megfigyelések egymástól függetlenek.

Hipotézis(ek)

A null hipotézis Ai=Bj=(AiBj)=0, (ij) =0, minden i-re és j-re

Az alternativ hipotézis Ai, Bj, (AiBj) <>0, (ij) =0, legalább egy i-re vagy j-re

Page 23: Összetettvizsgálati tervek éskiértékelésükxenia.sote.hu/hu/biosci/docs/biometr/ANOVA-tobbszempontos-2017-11... · ... (one way ANOVA, two way ... 2 szempontos ANOVA. Példa:

Egy szempontos, randomizált blokk ANOVA:"Rejtett" két szempontú ANOVA

Forrás sz.fok. (df) Négyzetes összeg

variancia F P

A kezelés i-1 QA (SSA)

s2A

(MSA) S

2

A/ s

2

b

Blokk j-1 QB (SSBlokk)

s2

B (MSBlokk)

s2

B/ s

2

b

AxBlokk interakció

(i-1)*(j-1) QAB (SSAxBlokk)

s2

AB (MSAxBlokk)

s2

AB/ s

2

b

Mintákon belül

ij(n-1) Qb (SSwithin)

s2

b (MSwithin)

Összes ijn-1 Qö (SStotal)

s2

ö

i darab kezelés, j darab randomizált blokkban vizsgálva, kezelésenként és blokkonként (cellánként) n darab megfigyeléssel..

Page 24: Összetettvizsgálati tervek éskiértékelésükxenia.sote.hu/hu/biosci/docs/biometr/ANOVA-tobbszempontos-2017-11... · ... (one way ANOVA, two way ... 2 szempontos ANOVA. Példa:

"Repeated measures" ANOVA (within subjects)

• Az önkontrollos kisérletezésnek esete is ide tartozik, egyszerű példa a párosított minták t próbája.Amikor minden egyes vizsgálati alanyon több mérést végeznek, és a kezelések (szempontok) egy része az egyes alanyokon végzett több mérésre vonatkozik.

• A randomizált blokk elrendezés is egy ide tartozó sajátos eset: a megfeleltetés a blokkon belüli, a blokkok véletlentől függenek

• Keveredhet az alanyok közötti és az alanyokon/blokkon belüli kezelés

• Fontos, hogy az ebbe a csoportba tartozó elrendezések nem kezelhetők úgy, mintha az egyes mért változók egymással nem lennének kapcsolatban. Nem függetlenek az időben ismételt megfigyelések.

• A mért változók közötti összefüggések lehetősége miatt külön eljáráscsoport alkalmazandó, vagy olyan általános ANOVA modellt megvalósító program, amely a repeated measures szempontokat tartalmazó feladatokat a ANOVA/MANOVA (multivariate analysis of variance) eljárással oldja meg.

Page 25: Összetettvizsgálati tervek éskiértékelésükxenia.sote.hu/hu/biosci/docs/biometr/ANOVA-tobbszempontos-2017-11... · ... (one way ANOVA, two way ... 2 szempontos ANOVA. Példa:

Faktoriális ANOVA• Célja

• Számos faktor hatásainak és interakciójának szimultán vizsgálata. A legegyszerübb elrendezésben k darab faktort, mindegyiket 2 szintenvizsgálunk

• Feltételezések• Az xijkl megfigyelés additív összetevői:• Pl. k=3 esetén: xijkl=Nagyátlag+Ai+Bj+Ci+(AxB)ij+(AxC)ik+(BxC)jk+(AxBxC)ijk+ijkl

(ahol AxB stb. a faktorok interakciója)Feltételek: A megfigyelések egymástól függetlenek, a mérések populációi

normális eloszlásúak stb.

• Hipotézisek• A nullhipotézisek: a vizsgált faktor szintjeinek hatásában nincs különbség,

illetve a vizsgált kölcsönhatás nem lép fel (Ai=0 stb.) • Az alternativ hipotézis ezek tagadásai: van legalább egy nem 0 (kölcsön)hatás

• Megjegyzések• Sok csoport, sok mérés kell hozzá.

Minél több a faktor, annál nehezebb az egyöntetûség biztosítása.• Többszintû interakciók vannak a kísérleti elrendezésben,

ezek néha nehezen értelmezhetőek.

Page 26: Összetettvizsgálati tervek éskiértékelésükxenia.sote.hu/hu/biosci/docs/biometr/ANOVA-tobbszempontos-2017-11... · ... (one way ANOVA, two way ... 2 szempontos ANOVA. Példa:

Három szempontos ANOVA tábla

Forrás sz.fok.(df) Négyzetes összeg variancia F P

A kezelés a-1 QA (SSA)

s2A

(MSA)

s2A/s2b

B kezelés b-1 QB (SSB)

s2B (MSB)

s2B/s2b

C kezelés c-1 QC (SSC)

s2C (MSC)

s2C/s2b

AxB interakció (a-1)*(b-1) QAB (SSAB)

s2AB (MSAB)

s2AB/s2b

AxC interakció (a-1)*(c-1) QAC (SSAC)

s2AC (MSAC)

s2AC/s2b

BxC interakció (b-1)*(c-1) QBC

(SSBC)

s2BC (MSBC)

s2BC/s2b

AxBxC

interakció

(a-1)*(b-1)*

*(c-1)

QABC (SSABC)

s2ABC (MSABC)

s2ABC/s2b

Mintákon belül abc(n-1) Qbelső (SSwithin)

s2belső

(MSwithin)

Összes abcn-1 Qösszes (SStotal)

s2összes

Angol terminológia: SS= sum of sqares, MS=mean sqares

Page 27: Összetettvizsgálati tervek éskiértékelésükxenia.sote.hu/hu/biosci/docs/biometr/ANOVA-tobbszempontos-2017-11... · ... (one way ANOVA, two way ... 2 szempontos ANOVA. Példa:

A reprodukálhatóság függ a H0 és H1 valószínűségétől

H0 igaz H1 igaz

Szignifikáns kimenetel Fals pozitív(α)

Igaz pozitív(1 – β)

Nem-szignifikáns kimenetel

Igaz negatív(1 – α)

Fals negatív(β)

H0 igaz(50%)

H1 igaz(50%)

Szignifikáns kimenetelα = 5%, 1-β = 80%

Fals pozitív5%*50%=2,5%

Igaz pozitív80%*50%=40%

Nem-szignifikáns kimenetel1-α = 95%, β = 20%

Igaz negatív95%*50%=47,5%

Fals negatív20%*50%=10%

Ha a H0 igaz voltának valószínűsége 50%

CC-BY Daniel Lakens, Improving your statistical inferences, by Eindhoven University of Technology

Page 28: Összetettvizsgálati tervek éskiértékelésükxenia.sote.hu/hu/biosci/docs/biometr/ANOVA-tobbszempontos-2017-11... · ... (one way ANOVA, two way ... 2 szempontos ANOVA. Példa:

A reprodukálhatóság függ a H0 és H1 valószínűségétől

H0 igaz(50%)

H1 igaz(50%)

Szignifikáns kimenetelα = 5%, 1-β = 80%

Fals pozitív5%*50%=2,5%

Igaz pozitív80%*50%=40%

Nem-szignifikáns kimenetel1-α = 95%, β = 20%

Igaz negatív95%*50%=47,5%

Fals negatív20%*50%=10%

H0 igaz(50%)

H1 igaz(50%)

Szignifikáns kimenetelα = 5%, 1-β = 99%

Fals pozitív5%*50%=2,5%

Igaz pozitív99%*50%=49,5%

Nem-szignifikáns kimenetel1-α = 95%, β = 1%

Igaz negatív95%*50%=47,5%

Fals negatív1%*50%=0,5%

Ha β = 1% ot választunk

CC-BY Daniel Lakens, Improving your statistical inferences, by Eindhoven University of Technology

Page 29: Összetettvizsgálati tervek éskiértékelésükxenia.sote.hu/hu/biosci/docs/biometr/ANOVA-tobbszempontos-2017-11... · ... (one way ANOVA, two way ... 2 szempontos ANOVA. Példa:

A reprodukálhatóság függ a H0 és H1 valószínűségétől

H0 igaz(50%)

H1 igaz(50%)

Szignifikáns kimenetelα = 5%, 1-β = 80%

Fals pozitív5%*50%=2,5%

Igaz pozitív80%*50%=40%

Nem-szignifikáns kimenetel1-α = 95%, β = 20%

Igaz negatív95%*50%=47,5%

Fals negatív20%*50%=10%

H0 igaz(50%)

H1 igaz(50%)

Szignifikáns kimenetelα = 1%, 1-β = 80%

Fals pozitív1%*50%=0,5%

Igaz pozitív80*50%=40%

Nem-szignifikáns kimenetel1-α = 99%, β = 20%

Igaz negatív99%*50%=49,5%

Fals negatív20%*50%=10%

Ha α = 1%-ot választunk

CC-BY Daniel Lakens, Improving your statistical inferences, by Eindhoven University of Technology

Page 30: Összetettvizsgálati tervek éskiértékelésükxenia.sote.hu/hu/biosci/docs/biometr/ANOVA-tobbszempontos-2017-11... · ... (one way ANOVA, two way ... 2 szempontos ANOVA. Példa:

A reprodukálhatóság függ a H0 és H1 valószínűségétől

H0 igaz(50%)

H1 igaz(50%)

Szignifikáns kimenetelα = 5%, 1-β = 80%

Fals pozitív5%*50%=2,5%

Igaz pozitív80%*50%=40%

Nem-szignifikáns kimenetel1-α = 95%, β = 20%

Igaz negatív95%*50%=47,5%

Fals negatív20%*50%=10%

H0 igaz(10%)

H1 igaz(90%)

Szignifikáns kimenetelα = 5%, 1-β = 80%

Fals pozitív5%*10%=0,5%

Igaz pozitív80*90%=72%

Nem-szignifikáns kimenetel1-α = 95%, β = 20%

Igaz negatív95%*10%=9,5%

Fals negatív20%*90%=18%

Ha a H0 igaz voltának valószínűsége 10%

CC-BY Daniel Lakens, Improving your statistical inferences, by Eindhoven University of Technology

Page 31: Összetettvizsgálati tervek éskiértékelésükxenia.sote.hu/hu/biosci/docs/biometr/ANOVA-tobbszempontos-2017-11... · ... (one way ANOVA, two way ... 2 szempontos ANOVA. Példa:

A reprodukálhatóság függ a H0 és H1 valószínűségétől

H0 igaz(50%)

H1 igaz(50%)

Szignifikáns kimenetelα = 5%, 1-β = 80%

Fals pozitív5%*50%=2,5%

Igaz pozitív80%*50%=40%

Nem-szignifikáns kimenetel1-α = 95%, β = 20%

Igaz negatív95%*50%=47,5%

Fals negatív20%*50%=10%

H0 igaz(90%)

H1 igaz(10%)

Szignifikáns kimenetelα = 5%, 1-β = 80%

Fals pozitív5%*90%=4,5%

Igaz pozitív80*10%=8%

Nem-szignifikáns kimenetel1-α = 95%, β = 20%

Igaz negatív95%*90%=85,5%

Fals negatív20%*10%=2%

Ha a H0 igaz voltának valószínűsége 90%

CC-BY Daniel Lakens, Improving your statistical inferences, by Eindhoven University of Technology

Page 32: Összetettvizsgálati tervek éskiértékelésükxenia.sote.hu/hu/biosci/docs/biometr/ANOVA-tobbszempontos-2017-11... · ... (one way ANOVA, two way ... 2 szempontos ANOVA. Példa:

A reprodukálhatóság krízise a tudományos szakirodalomban

• A jelenséga tudományos szakcikkeknek töredékét sikerült utánvizsgálatokban reprodukálni.

• Az okok• Tervezési hibák, alacsony elemszám és az ismeretlen „statisztikai erő”• Értelmezési hibák: a null hipotézis, p érték és a konfidencia intervallum

fogalmában• Eredmények szelekciója, a negatív kutatási eredmények nem nyilvánosak• Rejtett (vagy eltitkolt) többszörös összehasonlítások• Adatok manipulálása „szignifikancia” elérésére

• A javítás módszerei• A biostatisztikai oktatása színvonalának javítása• Hatásméret, elemszám, reprodukálhatóság szintjének tervezése• Adatmanipulálási szokások tárgyalása• Megbízható negatív eredmények számára közlési lehetőség• Biostatisztikai módszertani leírás, biostatisztikai lektorálás• Tervezés lektorálása, nyilvánosan regisztrált kutatások elterjesztése• A reprodukálhatóság vizsgálatának tudományos értékként elismerése• Open Data közlés

Page 33: Összetettvizsgálati tervek éskiértékelésükxenia.sote.hu/hu/biosci/docs/biometr/ANOVA-tobbszempontos-2017-11... · ... (one way ANOVA, two way ... 2 szempontos ANOVA. Példa:

(Bio)statisztikai hibák és orvoslásuk a jobb reprodukálhatóságért

• Tervezés• Hatásméret, megfelelő elemszám és a „statisztikai erő” (power)• A tervezési folyamatban szerepeljen a reprodukálhatóság becslése• A szórás és a hatás méret szerepeljen a paraméterek között• A feltáró és a megerősítő vizsgálatok megkülönböztetése• Adattisztítás szabályainak rögzítése

• Biostatisztikai szemlélet• A hipotézis vizsgálat, a p érték és a konfidencia intervallum gondos értelmezése• A fals pozitivitási esély becslése, értelmezése• A szignifikancia szó használatának mellőzése

• Többszörös összehasonlítás a kutatási folyamatban:• Adathalászat sok mérés között• a „szignifikáns” esetek feltüntetése tervezett vizsgálatként

• Adat manipulálás módszerei „szignifikancia” elérésére• Kedvezőtlen adatok kihagyása a szórás csökkentésére• Menet közbeni esetszán növelés a p<0,05 eléréséig

• A negatív kimenetelű kutatási eredmények kezelése• A pozitív eredmények közlésében a negatív vizsgálatok is megjelenítendőek• A kutatási hipotézisek negatív eredményű tesztelésének közlése