You don’t have to learn a lot of math to be able to tell when you’re being presented with the real deal or number salad. Musisz tylko wiedzieć, jakich wskazówek szukać.

Hipoteza

Czy hipoteza jest falsyfikowalna? Jeśli coś nie może być sformułowane jako stwierdzenie, które można udowodnić lub obalić za pomocą obserwacji i dedukcji, nie można tego badać naukowo. Sprawy opinii i przekonań nie są falsyfikowalne.

Próba/Populacja

Jaka populacja jest badana? Jak duża ona jest? Jakie jednostki i w jakich proporcjach?

Jak duża jest próba? Ile osób z tej populacji badacze wybrali do badania?

Jak badacze dobrali próbę? Rozkład zmiennych w próbie powinien odzwierciedlać rozkład zmiennych w populacji jako całości. Losowy wybór jest jednym ze sposobów, aby to osiągnąć.

Metody eksperymentalne

Czy badacze testowali tylko jedną zmienną eksperymentalną na raz? Jest to możliwe, aby wiedzieć, że wyniki są spowodowane badaną zmienną, a nie czymś innym.

Czy badacze mieli grupę kontrolną? Kontrola jest grupą, która nie jest narażona na zmienną eksperymentalną. Ponownie, to jest tak, że badacze mogą wykazać, że to była zmienna eksperymentalna, która miała efekt, a nie tylko przypadek. Na przykład, podczas testowania skuteczności leku, grupa kontrolna otrzymuje placebo.

Czy badacze kontrolowali wszystkie zmienne, aby można było być pewnym, że wyniki były konsekwencją zmiennych, które badacze wskazali? Przykładem jest to, że lek może mieć inny wpływ na 150 funtową kobietę niż na 250 funtowego mężczyznę.

Czy był to podwójnie ślepy test? Czasami jest to niemożliwe w praktyce. Podwójnie ślepa próba zapewnia, że ani badacze, ani badani nie wiedzą, kto otrzymuje zmienną eksperymentalną. W ten sposób nie mogą świadomie lub nieświadomie wpłynąć na wynik eksperymentu.

Czy te liczby coś znaczą?

Statystyczna istotność

Oblicza prawdopodobieństwo (w procentach), że uzyskane wyniki były spowodowane tym, co powiedział badacz, a nie tylko przypadkiem.

Plus lub minus (a.k.a., przedziały ufności, marginesy błędu)

Miary pewności i niepewności. Duża liczba plus lub minus oznacza większą niepewność, ale porównaj ją z wielkością liczby bazowej – 100 plus lub minus 1 jest o wiele bardziej pewne niż 2 plus lub minus 1!

Inne pytania do zadania

  • Jeśli porównujesz dwie statystyki, czy mierzą one to samo? Czy używają tych samych metod i instrumentów? Czy definiują tę rzecz w ten sam sposób?
  • Jeśli otrzymujesz jakieś naprawdę dziwne liczby (technicznie nazywane „wartościami odstającymi”), czy uwzględniasz je, czy wyrzucasz?

Jeśli odpowiedzi na te pytania nie są łatwo dostępne, możesz zacząć podejrzewać, że badacz (lub autor) jest pozbawiony skrupułów lub niekompetentny. Należy pamiętać, że jedną z rzeczy, która sprawia, że badania z zakresu nauk społecznych są tak wymagające, jest to, że często po prostu nie można zagwarantować idealnie losowych próbek lub doskonale kontrolowanych zmiennych. Ale dobry raport z dziedziny nauk społecznych zawsze odpowie na pytania wynikające z tych pominięć.

.