Mirosława K.

Mirosława K. Badania i rozwój

Temat: Jak mam raportować wyniki testowania hipotez ??

Witam wszystkich Państwa.

Chciałabym zasięgnąć Państwa opinii na temat tego, jak powinnam raportować
wyniki testowania hipotez statystycznych?

Ja teraz podaję wartość testu i "P wartość", ale spotkałam się z opinią, że nie jest to najlepsze podejście. Najbardziej mnie zdziwiła wyrażona dość niewybrednymi słowami opinia jednego z matematyków. Powiedział, że dla niego taki wynik jest bez wartości, że wygląda to tak, jak bym chciała kogoś oszukać i coś ukryć i że "ci medyczni kochają ściemniać p wartościami". Przyznam, że ja zupełnie nie rozumiem jego zarzutu i powiedziałam mu że mnie obraża. Może to złośliwość ?? Ale mnie zastanowiło to co powiedział.

A jak Państwo sądzą? Tylko bardzo proszę nie robić mi wykładu ze statystyki, bo i tak niewiele zrozumiem, a nawet nie mam na to czasu. Proszę o prostą radę co powinnam dodawać do moich wyników, żeby nie wyglądało to bezwartościowo i oszukańczo. Ja co prawda robię tylko wstępne obliczenia, takie orientacyjne, bo potem analizują to matematycy, ale chciałabym uniknąć zarzutów.

Zapraszam do dyskusji.

Temat: Jak mam raportować wyniki testowania hipotez ??

Witam,
Mirosława K.:
Ja teraz podaję wartość testu i "P wartość", ale spotkałam

Proszę unikać potworków typu "p wartość". To jest rażąca kalka językowa. Albo oryginalnie p-value, albo "prawdopodobieństwo p".
się z opinią, że nie jest to najlepsze podejście.

Zgadzam się. Ale to temat na dłuższą dyskusję, a Pani chce takiej uniknąć. Po prostu takie "binarne" wyniki typu p<a, p>a nie niosą zbyt wielu informacji, np. nic nie wiemy (bez dodatkowych informacji) o wielkości efektu. Internet jest pełen dyskusji na ten temat.
mnie zdziwiła wyrażona dość niewybrednymi słowami opinia jednego z matematyków.

Nerwowy człowiek :)
że wygląda to tak, jak bym chciała kogoś oszukać i coś ukryć i że "ci medyczni kochają ściemniać p wartościami".

Aaaa, chyba wiem, o co chodzi :)

Otóż jest sporo badaczy "wściekle rzucających się na odrzucanie H0", ignorując wielkość efektu, choćby był on pomijalny z naukowego punktu widzenia. Wszystko jedno jak mało znaczący jest efekt, grunt to odrzucić H0 i chwalić się wynikami. Jest odrzucona H0? Jest. A małe efekty tylko psują obraz.

Cóż, wiem, że są miejsca, do których można się "przebić" tylko wtedy, jeśli wyniki "spełniają określone potrzeby". Trudno się dziwić, że niektórych to, delikatnie mówiąc, irytuje (zwłaszcza, jak potem trzeba przeprowadzać metaanalizę...), bo to nie jest nauka, tylko kombinatorstwo. Potem idzie w świat opinia, że "największym kłamstwem jest statystyka".
mam na to czasu. Proszę o prostą radę co powinnam dodawać do moich wyników, żeby nie wyglądało to bezwartościowo i

Moja sugestia - proszę podawać w raportach:

- przedziały ufności
- WIELKOŚĆ EFEKTUAdrian Olszewski edytował(a) ten post dnia 24.03.13 o godzinie 02:45
Mirosława K.

Mirosława K. Badania i rozwój

Temat: Jak mam raportować wyniki testowania hipotez ??

Panie Adrianie.

Dziękuję za odpowiedź. Co to są przedziały ufności na szczęście wiem, więc będę je dołączać. Proszę mi jednak powiedzieć, jak mierzyć wielkość efektu? Widzę, że postawił Pan na tym wyraźny akcent.

Temat: Jak mam raportować wyniki testowania hipotez ??

Dla wielu testów istotności różnic istnieją "dedykowane" miary efektu, np.:

ANOVA -> omega kwadrat
ANOVA Kruskala-Wallisa -> epsilon kwadat
ANOVA Friedmana -> wskaźnik W
Test Manna-Whitneya -> r Glassa
Test Wilcoxona -> rangowy wsp. korelacji dwuseryjnej (rank biserial) dla par
Test t -> omega kwadrat, d Cohena, g Hedgesa, Delta Glassa, albo wsp. korelacji punktowej dwuseryjnej (point biserial)

W Internecie jest mnóstwo informacji na ten temat, np.: http://www.staff.amu.edu.pl/~uamzpoip/co_robia_doktora...

W powyższej prezentacji jest fajne podsumowanie zagadnienia:

When we feel a p near zero
Makes us out to be a hero.

Replace that wish to null-reject
Report the size of the effect.

R. Rosenthal
Ew Wyska

Ew Wyska Student, UKW

Temat: Jak mam raportować wyniki testowania hipotez ??

Panie Adrianie,

w którym miejscy w Statistica 10 mogę znaleźć współczynnik miary efektu r Glassa?

Będę wdzięczna za odpowiedź,
Ewa

Temat: Jak mam raportować wyniki testowania hipotez ??

Nie mam pod ręką Statistica. Podejrzewam, że trzeba będzie go wyliczyć ręcznie.
http://yatani.jp/teaching/doku.php?id=hcistats:mannwhi...
+ http://documentation.statsoft.com/STATISTICAHelp.aspx?...Ten post został edytowany przez Autora dnia 01.03.15 o godzinie 07:32
Ew Wyska

Ew Wyska Student, UKW

Temat: Jak mam raportować wyniki testowania hipotez ??

Dziękuję!

konto usunięte

Temat: Jak mam raportować wyniki testowania hipotez ??

Adrian O.:
Otóż jest sporo badaczy "wściekle rzucających się na odrzucanie H0", ignorując wielkość efektu, choćby był on pomijalny z naukowego punktu widzenia. Wszystko jedno jak mało znaczący jest efekt, grunt to odrzucić H0 i chwalić się wynikami. Jest odrzucona H0? Jest. A małe efekty tylko psują obraz.
Ja myślę, że to w ogóle jest głębszy problem. Pomijając już czym jest p-value,
to jednak wiele osób nie rozumie, że:

1. Rozkład próbkowy jest asymptotyczny.
2. Rozkład próbkowy jest warunkowy.
3. I to nie tylko ze względu na prawdziwość H0, ale także danych.

A na to wszystko jeszcze dochodzą algorytmy wyznaczania p, które w specyficznych przypadkach (np. w ekonometrii) są często mocno przybliżone.

Fetysz p-value jest moim zdaniem prostą konsekwencją nierozumienia przez wiele osób idei wnioskowania i faktycznej radości pt. "odrzucam H0 bo p-value jest mniejsze od alfa". Radości bez jakiejkolwiek refleksji, że to jedynie oznacza, że wynik w danych rozmija się z założeniami. Może to oczywiście oznaczać, że założenie o prawdziwości H0 było niepoprawne, ale może też oznaczać, że p-value (przybliżona) dla rozkładu próbkowego wyszła taka a nie inna, bo faktyczny rozkład próbkowy jest zupełnie inny. Ludzie na ogół robią w tym momencie wielkie oczy: jak to? A no tak to: w prostych testach (np. na średnią) zakłada się, że rozkład zmiennej jest normalny i wówczas dopiero rozkład próbkowy to ASYMPTOTYCZNIE t Student. A kto testuje normalność w populacji generalnej? Albo co gorsza: bierze test Jarque-Bera i twierdzi, że sprawdził. Tylko co...
A wystarczyłoby chociaż bootstrap zrobić.

Pozdrawiam
M



Wyślij zaproszenie do