20 otázek o 20 otázek o výzkumech, výzkumech,

na které by se na které by se novináři měli ptátnovináři měli ptát

National Council of Public Polls, National Council of Public Polls, USAUSA

S. R. Gawiser, G. E. Witt (3. S. R. Gawiser, G. E. Witt (3. vydání)vydání)

http://www.ncpp.org/?http://www.ncpp.org/?q=node/4q=node/4

2

The National Council of The National Council of Public PollsPublic Polls

Založen 1969 s cílem:Založen 1969 s cílem:1.1. Pro pracovníky ve výzkumu: Pro pracovníky ve výzkumu:

stanovit nejvyšší profesionální stanovit nejvyšší profesionální standardystandardy

2.2. Pro politiky, média a veřejnost: Pro politiky, média a veřejnost: prosazovat povědomí o tom, jak se prosazovat povědomí o tom, jak se výzkumy dělají a jak interpretovat výzkumy dělají a jak interpretovat jejich výsledkyjejich výsledky

3

1. Kdo provedl výzkum?1. Kdo provedl výzkum?

Jaká firma, výzkumná instituce, Jaká firma, výzkumná instituce, politická či jiná skupina?politická či jiná skupina?

Bez této informace nelze odpovědět Bez této informace nelze odpovědět na další otázkyna další otázky

Pokud informace nemůžete získat, Pokud informace nemůžete získat, neměli byste o výzkumu vůbec psátneměli byste o výzkumu vůbec psát

4

2. 2. Kdo výzkum platil a Kdo výzkum platil a proč byl proveden?proč byl proveden?

Mohou motivy pro provedení výzkumu Mohou motivy pro provedení výzkumu zavdat tak silné obavy o validitu výsledků, zavdat tak silné obavy o validitu výsledků, že by výsledky neměly být publikovány?že by výsledky neměly být publikovány?

Zvažovat zejména výzkumy prováděné pro Zvažovat zejména výzkumy prováděné pro určitý politický tábor nebo pro zájmové určitý politický tábor nebo pro zájmové skupiny.skupiny.

Zkoumat, zda výzkum skutečně odráží Zkoumat, zda výzkum skutečně odráží názory veřejnosti a nepropaguje jednoduše názory veřejnosti a nepropaguje jednoduše jeden názor.jeden názor.

5

33. Kolik osob bylo . Kolik osob bylo dotazováno?dotazováno?

Čím více lidí se výzkumu účastní, tím Čím více lidí se výzkumu účastní, tím menší je výběrová chybamenší je výběrová chyba

Při posuzování kvality výzkumu Při posuzování kvality výzkumu mohou hrát roli i další faktorymohou hrát roli i další faktory

6

44. Jak byli dotázaní . Jak byli dotázaní vybráni?vybráni?

Zaručuje výběr dotázaných Zaručuje výběr dotázaných reprezentativitu výzkumu?reprezentativitu výzkumu?

Nebo se jedná o samovýběr?Nebo se jedná o samovýběr? Není ve způsobu Není ve způsobu

pravděpodobnostního výběru skryto pravděpodobnostního výběru skryto riziko, že vylučuje některou skupinu riziko, že vylučuje některou skupinu dotázaných? dotázaných?

7

5. Z jaké oblasti či z jaké 5. Z jaké oblasti či z jaké skupiny byli tito lidé skupiny byli tito lidé

vybráni?vybráni?

Jak byl definován základní soubor, Jak byl definován základní soubor, pro nějž lze výsledky zobecnit?pro nějž lze výsledky zobecnit?

8

6. 6. Jsou výsledky založeny Jsou výsledky založeny na odpovědích všech na odpovědích všech

dotázanýchdotázaných??

Nebo se jedná o názor jedné z Nebo se jedná o názor jedné z podskupin a výsledky tudíž nelze podskupin a výsledky tudíž nelze zobecnit na jiné skupiny?zobecnit na jiné skupiny?

9

7. Kdo měl být dotázán a 7. Kdo měl být dotázán a nebyl? A záleží vůbec na nebyl? A záleží vůbec na

míře návratnosti?míře návratnosti?

Pokud byl výzkum proveden Pokud byl výzkum proveden pravděpodobnostním výběrem, jaký pravděpodobnostním výběrem, jaký byl podíl odmítnutí? byl podíl odmítnutí?

Samotná nižší míra návratnosti Samotná nižší míra návratnosti neznamená horší kvalitu výzkumuneznamená horší kvalitu výzkumu

10

8. Kdy byl výzkum 8. Kdy byl výzkum proveden?proveden?

Kdy bylo prováděno dotazování?Kdy bylo prováděno dotazování? Staly se v té době klíčové události, Staly se v té době klíčové události,

které mohly ovlivnit odpovědi které mohly ovlivnit odpovědi dotázaných?dotázaných?

11

9. Jak byly rozhovory 9. Jak byly rozhovory prováděny?prováděny?

Jednalo se o osobní rozhovor nebo za Jednalo se o osobní rozhovor nebo za pomoci telefonu, internetu, pošty? pomoci telefonu, internetu, pošty?

Jak se může vybraný způsob Jak se může vybraný způsob promítnout do věrohodnosti promítnout do věrohodnosti výsledků?výsledků?

12

10. Na co se ptát u výzkumů 10. Na co se ptát u výzkumů na internetu nebo webu?na internetu nebo webu?

Jak byl vzorek vybrán? Je reprezentativní Jak byl vzorek vybrán? Je reprezentativní pro internetovou populaci?pro internetovou populaci?

Nebo se jedná o samovýběr?Nebo se jedná o samovýběr? Nikdy se nenechte zmást počtem Nikdy se nenechte zmást počtem

dotázaných – o kvalitě výzkumu nic dotázaných – o kvalitě výzkumu nic nevypovídá. nevypovídá.

Není výzkum součástí nějaké další akce Není výzkum součástí nějaké další akce (marketing, získávání finančních (marketing, získávání finančních příspěvků)?příspěvků)?

13

11. Jaká je výběrová 11. Jaká je výběrová chyba? chyba?

Míra jistoty výsledků na základě Míra jistoty výsledků na základě vzorku – hladina významnosti, vzorku – hladina významnosti, zpravidla 95 %zpravidla 95 %

Jak se výběrová chyba promítá do Jak se výběrová chyba promítá do všech zjištěných výsledků?všech zjištěných výsledků?

14

12. Kdo je na prvním 12. Kdo je na prvním místě?místě?

Jak se výběrová chyba promítá do Jak se výběrová chyba promítá do zjištěného pořadí osobností či zjištěného pořadí osobností či politických subjektů?politických subjektů?

Nezapomeňte, že u výsledků za Nezapomeňte, že u výsledků za podskupiny je výběrová chyba podskupiny je výběrová chyba podstatně vyšší (v závislosti na podstatně vyšší (v závislosti na velikosti podskupiny)velikosti podskupiny)

15

13. Jaké další faktory 13. Jaké další faktory mohou zkreslit výsledky mohou zkreslit výsledky

výzkumu?výzkumu?

Formulace otázek a jejich pořadíFormulace otázek a jejich pořadí Nedostatečný trénink tazatelů a Nedostatečný trénink tazatelů a

jejich kontrolajejich kontrola Chyby ve zpracování výzkumuChyby ve zpracování výzkumu Problém „vážení“ výsledků výzkumu Problém „vážení“ výsledků výzkumu

u pravděpodobnostního výběruu pravděpodobnostního výběru

16

14. Jaké otázky byly 14. Jaké otázky byly kladeny?kladeny?

Musíte zjistit přesné znění otázek, protože Musíte zjistit přesné znění otázek, protože formulace může mít vliv na výsledkyformulace může mít vliv na výsledky

Jaká je Vaše bezprostřední reakce na formulaci Jaká je Vaše bezprostřední reakce na formulaci otázky? otázky?

Zdá se Vám přiměřená a nepředpojatá?Zdá se Vám přiměřená a nepředpojatá? Nabízí vyrovnaný výběr možných odpovědí?Nabízí vyrovnaný výběr možných odpovědí? U citlivých otázek doporučení uvádět celé znění U citlivých otázek doporučení uvádět celé znění

otázky ve zprávě. Dokonce srovnat výsledky i otázky ve zprávě. Dokonce srovnat výsledky i formulace citlivých otázek z více výzkumůformulace citlivých otázek z více výzkumů

17

15. V jakém pořadí byly 15. V jakém pořadí byly otázky kladeny? otázky kladeny?

Mohly otázky kladené před Mohly otázky kladené před sledovanou otázkou zkreslit sledovanou otázkou zkreslit výsledek? výsledek?

18

16. A co „push polls?“ 16. A co „push polls?“ (nátlaková šetření)(nátlaková šetření)

Cílem je rozšířit pomluvy či lži o Cílem je rozšířit pomluvy či lži o politických oponentechpolitických oponentech

Orientuje se na velké soubory Orientuje se na velké soubory oslovených oslovených

Nutno odlišit od legitimních Nutno odlišit od legitimních výzkumů v rámci volebních kampanívýzkumů v rámci volebních kampaní

19

17. Jaké další výzkumy byly 17. Jaké další výzkumy byly na dané téma provedeny?na dané téma provedeny?

Sdělují stejné věci? Pokud mají jiné Sdělují stejné věci? Pokud mají jiné výsledky, proč?výsledky, proč?

Pokud existují rozdíly, všímejte si nejprve Pokud existují rozdíly, všímejte si nejprve doby dotazovánídoby dotazování

Pokud jde o přibližně stejnou dobu, žádejte Pokud jde o přibližně stejnou dobu, žádejte o vysvětlení agenturu či sponzora výzkumuo vysvětlení agenturu či sponzora výzkumu

Protichůdné výzkumy mohou posloužit Protichůdné výzkumy mohou posloužit jako dobrá novinová zprávajako dobrá novinová zpráva

20

18. A co šetření exit-poll?18. A co šetření exit-poll?

Výzkumy ukazují, jak si voliči myslí, Výzkumy ukazují, jak si voliči myslí, že volili. Mohli se dopustit chybyže volili. Mohli se dopustit chyby

Voliči nechtějí sdělit, koho voliliVoliči nechtějí sdělit, koho volili Nejsou zahrnuti lidé, kteří volí v Nejsou zahrnuti lidé, kteří volí v

nepřítomnostinepřítomnosti Má prováděcí agentura dostatek Má prováděcí agentura dostatek

zkušeností s exit-poll? zkušeností s exit-poll?

21

19. Co ještě je potřeba 19. Co ještě je potřeba zahrnout do zprávy o zahrnout do zprávy o

výzkumu? výzkumu? Klíčovým aspektem zprávy je kontextKlíčovým aspektem zprávy je kontext Novinář by měl srovnat daný výzkum Novinář by měl srovnat daný výzkum

s jinými z té dobys jinými z té doby Měl by podat zprávu o událostech, Měl by podat zprávu o událostech,

které mohly mít vlivkteré mohly mít vliv Dobrá zpráva pomáhá čtenáři v Dobrá zpráva pomáhá čtenáři v

interpretaci výsledkůinterpretaci výsledků

22

20. Všechny předcházející 20. Všechny předcházející odpovědi vypadají dobře. odpovědi vypadají dobře.

Měli bychom tedy o Měli bychom tedy o výsledcích výzkumu výsledcích výzkumu uveřejnit zprávu? uveřejnit zprávu?

Ano, renomované agentury dělají svoji práci Ano, renomované agentury dělají svoji práci stále dobřestále dobře

Pamatujte na hladinu významnosti 95 % - Pamatujte na hladinu významnosti 95 % - jeden výzkum z 20 může být odlišný od jeden výzkum z 20 může být odlišný od skutečných názorů populaceskutečných názorů populace

Výzkum vždy odráží aktuální situaci, ale věci Výzkum vždy odráží aktuální situaci, ale věci se rychle mění, v politice často i dramatickyse rychle mění, v politice často i dramaticky

23

I přes výše uvedené potíže jsou I přes výše uvedené potíže jsou výzkumy veřejného mínění, výzkumy veřejného mínění, pokud jsou dobře provedeny, pokud jsou dobře provedeny, stále ještě nejlepším objektivním stále ještě nejlepším objektivním měřítkem názorů veřejnostiměřítkem názorů veřejnosti