Poziom zaawansowany

Drzewa stochastyczne i schemat Bernoulliego

Doświadczenie wieloetapowe rysuje się jako drzewo: wzdłuż gałęzi prawdopodobieństwa się mnoży, po ścieżkach dodaje. Na tym rysunku widać wzór na sumę zdarzeń, różnicę między zdarzeniami rozłącznymi a niezależnymi i cały schemat Bernoulliego — łącznie z tym, skąd bierze się w nim symbol Newtona.

Zanim zaczniesz

Ten temat opiera się na wcześniejszych zagadnieniach. Zanim zaczniesz, warto przerobić poniższe lekcje — dzięki nim wszystko pójdzie gładko:

Gdzie się tego używa

Konkretne sytuacje, w których liczysz dokładnie tak, jak uczy ta lekcja:

  • Kontrola jakości partii towaru
    Z partii, w której wadliwe jest 5 procent sztuk, magazynier losuje 10 sztuk do sprawdzenia. Prawdopodobieństwo, że żadna nie okaże się wadliwa, wynosi 0,95 do potęgi dziesiątej, czyli 0,599 — a więc prawie 40 procent takich kontroli wykryje co najmniej jedną wadę. Gdyby wadliwych było 20 procent, próba dziesięciu sztuk przepuściłaby partię już tylko w 11 procentach przypadków, i to jest cała matematyka za doborem liczności próby.
  • Test wielokrotnego wyboru na chybił trafił
    W teście jest 10 pytań, każde z czterema odpowiedziami i jedną poprawną. Zgadywanie to schemat Bernoulliego z p równym 1/4, więc prawdopodobieństwo braku choćby jednego trafienia wynosi 0,75 do potęgi dziesiątej, czyli około 5,6 procenta. Za to prawdopodobieństwo zdania testu przy progu 6 poprawnych odpowiedzi to zaledwie 0,0197, czyli mniej niż 2 przypadki na 100.
  • Redundancja w serwerowni
    Trzy niezależne serwery, z których każdy w danym miesiącu ulega awarii z prawdopodobieństwem 0,02, przestają działać jednocześnie z prawdopodobieństwem 0,02 do potęgi trzeciej, czyli 0,000008. Usługa działa więc przez 99,9992 procenta czasu, podczas gdy pojedynczy serwer daje 98 procent. Dwie dodatkowe maszyny skracają roczny przestój z około 175 godzin do niespełna 5 minut.
  • Nakładające się grupy w ankiecie
    Spośród 200 ankietowanych 90 czyta newsletter, a 60 śledzi profil w mediach społecznościowych, przy czym 25 osób robi obie rzeczy. Do co najmniej jednego kanału trafia więc 90 + 60 − 25 = 125 osób, czyli 62,5 procenta grupy — a nie 75 procent, które wyszłoby ze zwykłego dodania. Ta różnica 25 osób to dokładnie ten składnik, który wzór na sumę zdarzeń odejmuje.

Wszystkie wzory

  • Mnożenie wzdłuż gałęzi

    P(sˊciez˙ki)=p1p2pnP(\text{ścieżki}) = p_1 \cdot p_2 \cdot \ldots \cdot p_n

    prawdopodobieństwo jednej ścieżki drzewa

  • Dodawanie po ścieżkach

    P(A)=sˊciez˙kiAP(sˊciez˙ki)P(A) = \sum_{\text{ścieżki} \subset A} P(\text{ścieżki})

    zdarzenie to zbiór ścieżek, więc się je sumuje

  • Suma zdarzeń

    P(AB)=P(A)+P(B)P(AB)P(A \cup B) = P(A) + P(B) - P(A \cap B)

    część wspólna liczona dwa razy, więc raz odjęta

  • Zdarzenia rozłączne

    AB=    P(AB)=P(A)+P(B)A \cap B = \varnothing \implies P(A \cup B) = P(A) + P(B)

    nie ma czego odejmować

  • Schemat Bernoulliego

    P(X=k)=(nk)pk(1p)nkP(X = k) = \binom{n}{k} p^k (1-p)^{n-k}

    k sukcesów w n niezależnych próbach

  • Co najmniej jeden sukces

    P(X1)=1(1p)nP(X \geq 1) = 1 - (1-p)^n

    przez zdarzenie przeciwne, bez sumowania

Poprzednia lekcja rysowała drzewa, żeby pokazać prawdopodobieństwo całkowite i twierdzenie Bayesa. Rysunek pracował, ale jego reguł nie nazwaliśmy. Zrobimy to teraz — a potem zobaczymy, że jedno konkretne drzewo powtarza się tak często, że dorobiło się własnego wzoru.

Dwie reguły drzewa

Doświadczenie wieloetapowe zapisujemy jako drzewo stochastyczne: poziom to etap, gałąź to możliwy wynik etapu, liczba na gałęzi to prawdopodobieństwo tego wyniku przy tym, co już zaszło.

Obowiązują dwie reguły i warto od razu wiedzieć, skąd każda się bierze:

  • wzdłuż gałęzi mnożymy — to reguła mnożenia P(AB)=P(B)P(AB)P(A \cap B) = P(B) \cdot P(A|B) z poprzedniej lekcji;
  • po ścieżkach dodajemy — bo różne ścieżki wzajemnie się wykluczają, więc suma niczego nie liczy dwa razy.
urnabiała 3/5biała 2/46/20czarna 2/46/20czarna 2/5biała 3/46/20czarna 1/42/20
Dwa losowania bez zwracania z urny o 3 kulach białych i 2 czarnych. Liczby na drugim poziomie są różne w obu węzłach — bo po pierwszym losowaniu urna wygląda inaczej. Cztery wyniki sumują się do 20/20, czyli do jedynki.
Z urny z 3 kulami białymi i 2 czarnymi losujemy dwie kule bez zwracania. Jakie jest prawdopodobieństwo, że wylosujemy dokładnie jedną białą?

Rozłączne to nie to samo co niezależne

To para pojęć, którą myli się najczęściej, a różnica nie jest subtelna — one się wręcz wykluczają.

rozłączneniezależne
co znaczynie mogą zajść razemjedno nie wpływa na drugie
wzórP(AB)=0P(A \cap B) = 0P(AB)=P(A)P(B)P(A \cap B) = P(A) \cdot P(B)
przy sumieP(A)+P(B)P(A) + P(B)trzeba odjąć P(A)P(B)P(A) \cdot P(B)

Weźmy rzut kostką, AA — wypadła liczba parzysta, BB — wypadła liczba nieparzysta. Zdarzenia są rozłączne, bo AB=A \cap B = \varnothing. Czy są niezależne? Sprawdźmy:

P(AB)=0,P(A)P(B)=1212=14P(A \cap B) = 0, \qquad P(A) \cdot P(B) = \frac{1}{2} \cdot \frac{1}{2} = \frac{1}{4}

Nie są. I nie jest to przypadek tej kostki: dwa zdarzenia o niezerowym prawdopodobieństwie, które są rozłączne, nigdy nie są niezależne — bo wiadomość, że zaszło AA, zmienia szansę BB na zero, a to jest największa zmiana, jaka może się przydarzyć.

Niezależne bywają za to zdarzenia z różnych doświadczeń albo z różnych etapów: dwa rzuty monetą, dwa losowania ze zwracaniem, awarie dwóch osobnych serwerów.

Prawdopodobieństwo sumy

Zdarzenie ABA \cup B zachodzi, gdy zaszło AA, zaszło BB, albo zaszły oba. Zwykłe dodanie P(A)+P(B)P(A) + P(B) liczy część wspólną dwa razy, więc trzeba ją raz odjąć:

P(AB)=P(A)+P(B)P(AB)P(A \cup B) = P(A) + P(B) - P(A \cap B)

Dla zdarzeń rozłącznych ostatni składnik znika i zostaje samo dodawanie — dokładnie to, na czym stoi reguła dodawania po ścieżkach.

Z talii 52 kart losujemy jedną. Jakie jest prawdopodobieństwo, że będzie to kier albo król?

Schemat Bernoulliego

Najczęściej rysowanym drzewem jest to, w którym wszystkie poziomy wyglądają tak samo. Mówimy o schemacie Bernoulliego, gdy spełnione są trzy warunki naraz:

  1. każda próba ma dokładnie dwa wyniki — sukces i porażkę;
  2. prawdopodobieństwo sukcesu pp jest w każdej próbie takie samo;
  3. próby są niezależne.

Rzuty monetą, losowania ze zwracaniem i kolejne sztuki z bardzo dużej partii ten opis spełniają. Losowanie bez zwracania z małego zbioru — jak w drzewie z urną wyżej — nie spełnia go, bo pp zmienia się po każdym kroku.

startO 1/2O 1/2O 1/21/8R 1/21/8R 1/2O 1/21/8R 1/21/8R 1/2O 1/2O 1/21/8R 1/21/8R 1/2O 1/21/8R 1/21/8
Trzy rzuty monetą. Wszystkie osiem ścieżek ma to samo prawdopodobieństwo 1/8, bo każda mnoży trzy jednakowe czynniki. Ścieżek z dokładnie dwoma orłami jest trzy — tyle, ile sposobów wyboru dwóch miejsc spośród trzech.

Rysunek zawiera cały wzór. Każda ścieżka z kk sukcesami mnoży kk razy pp i nkn-k razy q=1pq = 1-p, więc ma prawdopodobieństwo pkqnkp^k q^{n-k}niezależnie od kolejności. Takich ścieżek jest tyle, na ile sposobów da się wybrać kk miejsc spośród nn, czyli (nk)\binom{n}{k}kombinacji z lekcji o kombinatoryce. Stąd

P(X=k)=(nk)pk(1p)nkP(X = k) = \binom{n}{k} p^k (1-p)^{n-k}
Rzucamy kostką 5 razy. Jakie jest prawdopodobieństwo, że dokładnie dwa razy wypadnie szóstka?

Co najmniej jeden sukces

Pytanie „czy zdarzy się choć raz" pojawia się w tym schemacie tak często, że warto mieć na nie skrót. Sumowanie od k=1k = 1 do k=nk = n jest tu złą metodą, a nie tylko wolną: zdarzenie przeciwne to jeden składnik.

P(X1)=1P(X=0)=1(1p)nP(X \geq 1) = 1 - P(X = 0) = 1 - (1-p)^n
Partia zawiera 5% sztuk wadliwych. Losujemy 10 sztuk. Jakie jest prawdopodobieństwo, że trafimy na co najmniej jedną wadliwą?

Zadania

Zestaw pyta o trzy rzeczy, w kolejności lekcji. Prompt P(AB)P(A \cup B) podaje P(A)P(A), P(B)P(B) oraz P(AB)P(A \cap B) — trzeba złożyć wzór na sumę, pamiętając o odjęciu. Prompt P(AB)P(A \cap B) podaje P(A)P(A) i P(BA)P(B|A), czyli dwie gałęzie jednej ścieżki, i prosi o ich iloczyn. Prompt P(X=k)P(X = k) podaje liczbę prób nn i prawdopodobieństwo sukcesu pp, czyli pyta wprost o wzór Bernoulliego.

Odpowiedzią w każdym przypadku jest ułamek nieskracalny.

Ćwiczenia

Rozwiąż zestaw zadań — trudność rośnie z każdym kolejnym. Na końcu zobaczysz wynik i listę pomyłek do powtórki.

Zadanie 1 z 8Punkty: 0
P(A∪B): P(A) = 7/10, P(B) = 3/5, P(A∩B) = 1/2

Generator nie pyta o werdykt „rozłączne czy niezależne" — odpowiedzią byłoby słowo, a nie liczba. To rozróżnienie masz w tabeli i w kontrprzykładzie z kostką powyżej i warto do niego wrócić, bo wraca w każdym zadaniu z sumą zdarzeń.

Częste błędy

  • Mylenie rozłączności z niezależnością — pierwsze mówi „nie razem", drugie „bez wpływu". Zdarzenia rozłączne o niezerowym prawdopodobieństwie nigdy nie są niezależne.
  • Dodawanie P(A)+P(B)P(A) + P(B) dla zdarzeń, które mogą zajść razem — część wspólna zostaje policzona dwa razy. Wynik większy od jedynki to najczęstszy objaw tej pomyłki.
  • Mnożenie prawdopodobieństw etapów, które nie są niezależne — na drzewie druga liczba jest warunkowa; przy losowaniu bez zwracania różni się w każdym węźle.
  • Pominięcie symbolu Newtona we wzorze Bernoulliegopkqnkp^k q^{n-k} to prawdopodobieństwo jednej ścieżki, a ścieżek jest (nk)\binom{n}{k}.
  • Stosowanie schematu Bernoulliego do losowania bez zwracania — wtedy pp nie jest stałe, a próby nie są niezależne, więc wzór po prostu nie obowiązuje.
  • Liczenie „co najmniej jednego" przez sumowanie wszystkich k1k \geq 1 — jeden rachunek na zdarzeniu przeciwnym daje ten sam wynik i nie da się w nim niczego zgubić.

Karta wzorów

Temat: Drzewa i schemat Bernoulliego

  • Mnożenie wzdłuż gałęzi

    P(sˊciez˙ki)=p1p2pnP(\text{ścieżki}) = p_1 \cdot p_2 \cdot \ldots \cdot p_n

    prawdopodobieństwo jednej ścieżki drzewa

  • Dodawanie po ścieżkach

    P(A)=sˊciez˙kiAP(sˊciez˙ki)P(A) = \sum_{\text{ścieżki} \subset A} P(\text{ścieżki})

    zdarzenie to zbiór ścieżek, więc się je sumuje

  • Suma zdarzeń

    P(AB)=P(A)+P(B)P(AB)P(A \cup B) = P(A) + P(B) - P(A \cap B)

    część wspólna liczona dwa razy, więc raz odjęta

  • Zdarzenia rozłączne

    AB=    P(AB)=P(A)+P(B)A \cap B = \varnothing \implies P(A \cup B) = P(A) + P(B)

    nie ma czego odejmować

  • Schemat Bernoulliego

    P(X=k)=(nk)pk(1p)nkP(X = k) = \binom{n}{k} p^k (1-p)^{n-k}

    k sukcesów w n niezależnych próbach

  • Co najmniej jeden sukces

    P(X1)=1(1p)nP(X \geq 1) = 1 - (1-p)^n

    przez zdarzenie przeciwne, bez sumowania

startO 1/2O 1/2O 1/21/8R 1/21/8R 1/2O 1/21/8R 1/21/8R 1/2O 1/2O 1/21/8R 1/21/8R 1/2O 1/21/8R 1/21/8
Trzy rzuty monetą jako drzewo. Osiem ścieżek, każda o prawdopodobieństwie 1/8 — bo wszystkie mają po trzy gałęzie o wartości 1/2. Dokładnie dwa orły dają trzy z nich, i to jest symbol Newtona ze wzoru Bernoulliego.

Najczęstsze pytania

Powiązane artykuły