Nemusíte se učit spoustu matematiky, abyste dokázali rozpoznat, kdy je vám předkládán skutečný obchod nebo číselný salát. Stačí vědět, jaká vodítka hledat.

Hypotéza

Byla hypotéza falzifikovatelná? Pokud něco nelze formulovat jako tvrzení, které lze dokázat nebo vyvrátit pomocí pozorování a dedukce, nelze to vědecky zkoumat. Záležitosti názorů a přesvědčení nejsou falzifikovatelné.

Vzorka/populace

Jaká populace je zkoumána? Jak je velká? O jaké jedince se jedná a v jakém poměru?

Jak velký je vzorek? Kolik osob z populace výzkumníci vybrali pro svou studii?

Jak výzkumníci vybrali svůj vzorek? Rozložení proměnných ve vzorku by mělo odrážet rozložení proměnných v populaci jako celku. Náhodný výběr je jedním ze způsobů, jak toho dosáhnout.

Experimentální metody

Testovali výzkumníci vždy jen jednu experimentální proměnnou? To proto, aby bylo možné vědět, že výsledky jsou způsobeny zkoumanou proměnnou, a ne něčím jiným.

Měli výzkumníci kontrolní skupinu? Kontrolní skupina je skupina, která není vystavena experimentální proměnné. Opět proto, aby výzkumníci mohli prokázat, že to byla experimentální proměnná, která měla účinek, a ne jen náhoda. Například při testování účinnosti léku dostává kontrolní skupina placebo.

Kontrolovali výzkumníci všechny proměnné, aby bylo možné si být jistý, že výsledky byly důsledkem proměnných, které výzkumníci přesně určili? Příkladem může být, že lék může mít jiný účinek na 150kilovou ženu než na 250kilového muže.

Jednalo se o dvojitě zaslepený test? Někdy je to v praxi nemožné. Dvojitě zaslepený test zajišťuje, že ani výzkumníci, ani účastníci výzkumu nevědí, kdo dostává experimentální proměnnou. Tak nemohou záměrně ani nevědomky ovlivnit výsledek experimentu.

Vypovídají tato čísla něco?“

Statistická významnost

Vypočítává pravděpodobnost (vyjádřenou v procentech), že získané výsledky byly způsobeny tím, co výzkumník řekl, a ne jen náhodou.

Plus nebo minus (neboli…), intervaly spolehlivosti, rozpětí chyb)

Míra jistoty a nejistoty. Velké plusové nebo minusové číslo znamená větší nejistotu, ale porovnejte ho s velikostí základního čísla – 100 plus nebo minus 1 je mnohem jistější než 2 plus nebo minus 1!“

Další otázky k zamyšlení

  • Pokud porovnáváte dvě statistiky, měří stejnou věc? Používají stejné metody a nástroje? Definují tuto věc stejným způsobem?
  • Pokud získáte nějaká opravdu podivná čísla (odborně nazývaná “ odlehlé hodnoty“), zahrnete je, nebo je vyhodíte?

Pokud odpovědi na tyto otázky nejsou snadno dostupné, můžete začít mít podezření, že výzkumník (nebo autor) je buď bezohledný, nebo nekompetentní. Mějte na paměti, že jednou z věcí, která činí výzkum v sociálních vědách tak náročným, je to, že často prostě nelze zaručit dokonale náhodné vzorky nebo dokonale kontrolované proměnné. Dobrá zpráva z oblasti sociálních věd se však vždy bude zabývat otázkami, které tato opomenutí vyvolávají.