Na mnie działa. O dowodzie anegdotycznym
Pozderzałem się ostatnio ze zwolennikami homeopatii na forach wiodących dzienników. Na hasło „homeopatię biją Niemcy” natychmiast zbiegało się dużo zwolenników tej alternatywnej metody topienia pieniędzy w wodzie (alternatywnej do inwestowania w jachty i łodzie wiosłowe, rzecz jasna). Wielu z nich przyniosło własne dowody na działanie homeopatii, zwane również dowodami anegdotycznymi, świadectwami, czy, z angielska, testimonialami. Kilka dni temu na mój blog zawitała kobieta gotowa głosić chwałę homeopatii na podstawie własnych pozytywnych doświadczeń. Kiedy próbowałem jej wyjaśnić, dlaczego dowody anegdotyczne mają małą wartość, ogarnęło mnie silne poczucie deja vu: „chyba dziesiąty raz o tym piszę”. Zmotywowało mnie to do napisania o dowodach anegdotycznych raz a dobrze, w formie posta na blogasku, do którego będę potem linkować zamiast strzępić przysłowiowy język po przysłowiowej próżnicy.
Dowód anegdotyczny wygląda tak:
A ja ci powiem, że po roku walki o zdrowie mojego synka gdzie zaliczył całe spektrum antybiotykowe, ten „cukier” zadziałał. I nie mamy od 2 lat problemów. I od tamtej pory nie dostał ANI JEDNEGO CHEMICZNEGO LEKU i jest zdrowym silnym chłopaczkiem.
Albo tak:
W medycynie konwencjonalnej wykorzystaliśmy WSZYSTKIE możliwości aby ratować syna, i co? Inic! Został tylko homeopata. Podeszłam do tego sceptycznie, ale nie byłabym dobrą matką, gdybym nie spróbowała ostatniej deski ratunku. Nagle szok! Kilka „kulek” za 8,7zł i w ostatniej chwili syn został dosłownie wyciągnięty grabażowi spod łopaty. Do tej pory nie mogę odżałować, że mojej Pani doktor nie spotkałam wcześniej. Moje dziecko nie cierpiałoby tak strasznie.
Może też wyglądać tak:
Na Mszy św. o uzdrowienie byłam po raz pierwszy w pierwszą środę września 2005 r. i od tego dnia nie doświadczyłam już bólu kolana.
Co zrobić z dowodem anegdotycznym? Można oczywiście zarzucić rozmówcy kłamstwo — i zapewne w kilku przypadkach będziecie mieć rację. Rzadziej jednak, niż się spodziewacie. Częściej ludzie przedstawiający taki dowód będą głęboko przekonani, że homeopatia wyleczyła ich z ciężkiego przeziębienia lub pomogła ich dziecku wyjść z jakiegoś chronicznego schorzenia. Co skłania ich do zajęcia takiego stanowiska?
Autora pierwszego cytatu spytałem o diagnozę, jaką postawiono jego synkowi. Okazało się, że cierpiał na przewlekłe zapalenia ucha, czyli dość uciążliwe schorzenie, które jednak zazwyczaj mija z wiekiem — rzadko dotyka dzieci starsze niż siedmioletnie. Przeziębienie, nawet to ciężkie, również w końcu przechodzi. Pani, której od mszy minął ból kolana, kilka dni wcześniej wróciła z turnusu rehabilitacyjnego. Kto wie, czy to rehabilitacja nie wpłynęła na poprawę?
Człowiek jest tak skonstruowany, by wszędzie doszukiwać się związków skutkowo-przyczynowych. Psycholog ewolucyjny powiedziałby, że na sawannie była to cecha preferowana przez dobór naturalny: Gumbo zjadł czarny grzybek, Gumbo nie rusza się i brzydko pachnie, więc my nie będziemy jeść czarnych grzybków. Kiedy słyszymy zdanie „Zjadłam Oscillo, grypa minęła”, niezależnie od intencji wypowiadającego sami je przekształcamy na podrzędnie złożone „Ponieważ zjadłam Oscillo, to grypa minęła”. Błąd w rozumowaniu, który przypisuje związek przyczynowo-skutkowy dwóm zdarzeniom tylko dlatego, że wystąpiły jedno po drugim, nazywa się po łacinie post hoc ergo propter hoc i jest chyba najczęstszą pomyłką spotykaną w dowodach anegdotycznych.
Najczęstszą, ale nie jedyną. Istnieje cały szereg błędów w rozumowaniu, które mogła popełnić nasza bohaterka. Na przykład efekt potwierdzania (ang. confirmation bias), bardzo częsty błąd logiczny polegający na zwracaniu uwagi jedynie na zdarzenia, które pasują do naszych poglądów. Jeśli nasza bohaterka jest fanką homeopatii, będzie lepiej pamiętać te sytuacje, w których po zażyciu Oscillo objawy przeziębienia niż te, kiedy efektu nie było. Może też skłaniać się ku twierdzeniu, że po zażyciu Oscillo objawy ustępowały szybciej, choć w rzeczywistości taki związek nie zachodził. Typowy przykład efektu potwierdzania to pielęgniarka z ostrego dyżuru, która jest przekonana, że w czasie pełni na oddziale jest większy ruch. Statystycznie związek nie istnieje: jeśli karetki kursują częściej, a jest akurat pełnia, pielęgniarka myśli sobie “Oho, pełnia, duży ruch”; jeśli większy ruch występuje w czasie nowiu, pielęgniarka nie zwraca uwagi na ten zbieg okoliczności.
Co jeszcze mogło spotkać naszą fankę homeopatii? Mogła doświadczyć fascynującego zjawiska powrotu do średniej (ang. regression to the mean): jednostki, które uzyskały skrajne wyniki w pierwszym pomiarze, w drugim pomiarze uzyskują wyniki bliżej średniej. Fenomen ów bardzo ładnie obrazuje prawda życiowa sierżanta Marines: kiedy pochwali żołnierzy za wykonanie jakiegoś zadania, za drugim razem wykonują je gorzej; kiedy ich opieprzy za zły wynik, za drugim razem idzie im lepiej (wniosek: nie chwalić). Pewna odmiana powrotu do średniej może wystąpić także podczas leczenia homeopatią przeziębienia; wystarczy, że zdecydujemy się na podjęcie leczenia w momencie przesilenia choroby, kiedy jej objawy najbardziej nam dolegają. Im gorzej czujemy się dziś, tym większa szansa, że jutro poczujemy się lepiej.
Na marginesie: co, jeśli jesteśmy wciąż przed przesileniem i czujemy się coraz gorzej, mimo zażycia Oscillo — czyli jeśli wciąż jesteśmy na krzywej opadającej? Homeopaci wymyślili na to genialny patent: występujące czasami w pierwszej fazie leczenia tzw. pogorszenie homeopatyczne, po którym nadchodzi poprawa! Kiedy nadchodzi? No cóż, kiedy minie przesilenie.
Jeśli zwolenniczka homeopatii nie chce w dyskusji przyjąć racjonalnych argumentów i upiera się przy swoim stanowisku (w końcu nie po to angażujemy się we flejmy w necie, żeby dać się przekonać), prędzej czy później zacznie używać hipotez ad hoc, czyli tworzonych w czasie rzeczywistym rozwiązań wyjaśniających luki w swojej teorii. Aby zilustrować hipotezę ad hoc, najlepiej sięgnąć po prawdziwy przykład. Oto więc opowieści grasującej na moim blogu homeofanki o zbawiennym wpływie homeopatii zostają skonfrontowane z wpisami na jej mikroblogu, z których wynika, że jej ostatnia grypa trwała długo i była bardzo uciążliwa. Co ona na to?
Nie zastosowałam homeopatii na początku, jak powinnam była. Przyjęłam lek homeopatyczny dopiero na koniec.
Wytknięta nieskuteczność homeopatii zostaje natychmiast wytłumaczona dodatkowym, wymyślonym na kolanie powodem, w tym przypadku niewłaściwym reżimem przyjmowania leków.
Nasza homeofanka to przypadek jednostkowy, opierający się na własnych doświadczeniach. Co jednak, jeśli dowodami anegdotycznymi zaczyna sypać praktyk? Na przykład lek. med. Tomasz Kokoszczyński, specjalista medycyny rodzinnej, sekretarz Polskiego Towarzystwa Homeopatycznego (PTH), Krajowy Wiceprezydent na Polskę Międzynarodowej Medycznej Ligi Homeopatycznej (LMHI)? W dyskusji pod artykułem jego autorstwa on sam (albo jakiś podszywający się pod niego złośnik) przywołuje wdzięczność uleczonych pacjentów:
A ja widziałem setki reakcji na leki. Wiele też odczułem na sobie. (…)
Żebyś odczuł na sobie prawdziwą próbę lekową to byś tak nie mówił…
Żebyś doznał radości pacjenta lub jego rodziców to byś tak nie mówił…
Żeby nie było, że znęcam się nad jakimś Bogu ducha winnym poczciwiną: internauci reklamują doktora Kokoszczyńskiego jako homeopatę leczącego dzieci z autyzmu i „uszkodzeń poszczepiennych”. On sam zapytany o te schorzenia odpowiada niejednoznacznie: „W leczeniu homeopatycznym można zdziałać tyle ile mieści się w ramach możliwości organizmu. Niejednokrotnie byłbyś nie tylko zaskoczony, ale zszokowany jak duże są to możliwości. Nie tylko Ty zresztą — ‘magię’ zmian wywoływanych przez cukrowe kulki odczuwa również otoczenie, fachowy personel, który nieraz nic nie wie o leczeniu itp. itd. Dużo by opowiadać :-)”.
Wyobraźmy sobie, że nasz doktor opracowuje homeopatyczną szczepionkę przeciw grypie. Ci z was, którzy czytają komentarze w moim blogu, wyobrażają już sobie pewnie, co taka szczepionka może zawierać; pozostałą większość zapraszam do przeczytania krótkiej historii o mojej przygodzie z kroplami do nosa Euphorbium. Doktor-homeopata prosi jesienią swoich stałych pacjentów o przetestowanie szczepionki; zgadza się dwudziestu z nich, dziesięć osób odmawia. Na wiosnę doktor przeprowadza wywiady i okazuje się, że z dwudziestu osób poddanych działaniu szczepionki zachorowały tylko cztery. Hosanna, radość pacjentów, łzy szczęścia w oczach doktora, nowa szczepionka działa w 80% przypadków (16/20). My jednak — jako sceptyczne fiutki, trzymające się „obecnego, jakże racjonalnego paradygmatu nauki” — popatrzmy na tę dziesiątkę, która odmówiła. Okazuje się, że wśród tych osób, które nie przyjęły homeoszczepionki, na grypę zachorowały tylko dwie — a więc zachorowalność wśród nich była dokładnie taka sama, co wśród tych, które szczepionkę przyjęły: 80% nie zachorowało!. Na pierwszy rzut oka efektywność homeoszczepionki jest piorunująca, przy dokładniejszym zbadaniu okazuje się, że jej działanie nie różni się od działania szklanki wody z cukrem.
Nasz doktor zrobił jednak krok w dobrym kierunku, choć nieświadomie — gdyby ta historia wydarzyła się naprawdę, pewnie na różnych forach czytalibyśmy dziś peany pochwalne na cześć superhomeoszczepionki, która piorunująco zapobiegła grypie u Goździkowej i innych pacjentów pana doktora. Ów krok to przejście od dowodów anegdotycznych w stronę badań klinicznych, które — porządnie przeprowadzone, rzetelnie opracowane i powtórzone przez niezależne ośrodki — dają precyzyjną odpowiedź, z jaką skutecznością dany lek działa na dane schorzenie (i czy w ogóle działa). Środki, które takie badania przeszły, nie potrzebują dowodów anegdotycznych na potwierdzenie swojej skuteczności.
Jeśli więc napotkacie na swojej drodze nieznaną wcześniej metodę leczniczą, rozglądajcie się za sygnałami alarmowymi. Tłumaczenie jej działania mechaniką kwantową, fraktalną strukturą czasoprzestrzeni czy nieodkrytymi jeszcze przez współczesną naukę prawami to poważne ostrzeżenie. Podpieranie się dowodami anegdotycznymi — listami od wdzięcznych pacjentów czy świadectwami łaski — daje prawdopodobieństwo graniczące z pewnością, że mamy do czynienia z pseudonauką.
Przykład z homeoszczepionką zaczerpnąłem z książki Stuarta Sutherlanda „Irrationality”. Sutherland opowiadał o lekarzu szukającym związku między pewnym symptomem a pewną chorobą, liczby były nieco inne, więc może wywinąłbym się od zarzutu o zrzynanie — mimo to wolę od razu uczciwie się przyznać. Historię o pielęgniarce i pełni księżyca ściągnąłem z podcastu „The Skeptics’ Guide To The Universe”.