Wyciągnij liczebność próby, metodologię i ograniczenia z kilkunastu badań naraz

Zamiast opierać się na optymistycznym abstrakcie, porównaj w tabeli sekcje Methods oraz Limitations z wielu artykułów naukowych przed podjęciem decyzji.

Na co patrzeć w sekcji metodologicznej artykułu naukowego

  1. 01

    Nie zatrzymuj się na streszczeniu (Abstract)

    Abstrakty często eksponują najbardziej efektowny wynik cząstkowy, przemilczając fakt, że próbę stanowiło 34 studentów pierwszego roku obserwowanych przez tydzień.

  2. 02

    Sprawdź wielkość efektu i przedziały ufności

    Na bardzo dużej próbie nawet mikroskopijna, biznesowo nieistotna różnica daje wynik istotny statystycznie (p < 0,05) – szukaj miar takich jak d Cohena lub OR.

  3. 03

    Oceń trafność zewnętrzną populacji badanej

    Wyniki uzyskane w laboratorium uniwersyteckim lub w jednym szpitalu w USA nie zawsze przenoszą się bezpośrednio na realia średniego przedsiębiorstwa produkcyjnego w Polsce.

  4. 04

    Przeczytaj uważnie oświadczenie o konflikcie interesów

    Na końcu każdej rzetelnej publikacji znajduje się sekcja Funding oraz Competing Interests, która ujawnia finansowanie eksperymentu przez producenta badanego rozwiązania.

Przykład działania

Analiza 8 cytowanych w prasie badań o czterodniowym tygodniu pracy

Zestaw dla tych publikacji rzeczywistą wielkość próby firm, branże, czy skrócono liczbę godzin z 40 do 32 przy zachowaniu płacy oraz jak mierzono produktywność.

Porównanie metodologiczne wyodrębnione z pełnych tekstów

1. Raport pilotażu UK (N=61 firm, ~2900 pracowników, głównie usługi profesjonalne i NGO, 6 mies.): brak losowej grupy kontrolnej (dobór ochotniczy); produktywność oceniana samooceną zarządów w skali 1–10. 2. Eksperyment Microsoft Japan (N=1 oddział, 2300 osób, 1 miesiąc letni): wzrost sprzedaży na pracownika o 39,9% rok do roku, przy jednoczesnym skróceniu spotkań do 30 min (zmienna współwystępująca).

Zaglądnięcie do sekcji Methods natychmiast odróżnia twardy eksperyment kontrolowany od pilotażu ochotników z samooceną ankietową.

Najczęściej zadawane pytania

Dlaczego wnioski z nagłówków prasowych omawiających badania naukowe bywają tak mylące?

Media upraszczają ostrożne sformułowania naukowców, zamieniając korelację zaobserwowaną w wąskiej grupie na uniwersalną regułę przyczynowo-skutkową.

Gdzie w strukturze artykułu naukowego najszybciej znaleźć słabe punkty badania?

Pod koniec sekcji Discussion w akapitach zatytułowanych Limitations, gdzie recenzenci wymuszają na autorach jawne wypisanie braków i założeń upraszczających.

Czy porównanie metodologii przydaje się przy pisaniu pracy dyplomowej i doktorskiej?

Tak, gotowa matryca porównawcza próby, narzędzi pomiarowych i luk w dotychczasowych badaniach stanowi fundament uzasadnienia własnego projektu badawczego.

Dowiedz się więcej

Powiązane poradniki i wyjaśnienia do tego zadania