Podcast o Základy štatistiky a dátovej analýzy

Základy štatistiky a dátovej analýzy: Kompletný prehľad

Podcast

Štatistika: Ako Netflix vie, čo chceš pozerať0:00 / 9:12
0:001:00 zostáva
ŠimonPremýšľal si niekedy, ako presne vie Netflix alebo Spotify, čo ti má odporučiť? Ako je možné, že ti to takmer vždy trafí do nálady?
EmaStavím sa, že väčšina si myslí, že je to nejaká mágia. Ale v skutočnosti je za tým niečo, s čím sa stretávate na hodinách matematiky. Je to čistá štatistika.
Kapitoly

Štatistika: Ako Netflix vie, čo chceš pozerať

Délka: 9 minut

Kapitoly

Úvod do štatistiky

Početnosť a frekvencie

Priemer, medián a modus

Rozptyl a normálne rozdelenie

Vzorka vs. Populácia

Bodové a intervalové odhady

Testovanie hypotéz

Rozhodnutie na základe p-hodnoty

Regresia vs. Korelácia

Časové rady

Zhrnutie a záver

Přepis

Šimon: Premýšľal si niekedy, ako presne vie Netflix alebo Spotify, čo ti má odporučiť? Ako je možné, že ti to takmer vždy trafí do nálady?

Ema: Stavím sa, že väčšina si myslí, že je to nejaká mágia. Ale v skutočnosti je za tým niečo, s čím sa stretávate na hodinách matematiky. Je to čistá štatistika.

Šimon: Počkaj, štatistika? To znie... menej kúzelne. A presne o tom sa dnes budeme baviť. Počúvate Studyfi Podcast.

Ema: Presne tak. Všetky tie odporúčania sú postavené na dátach. A dáta môžu byť rôzne. Buď kvalitatívne, ako napríklad žáner filmu – komédia, dráma... Alebo kvantitatívne, čo sú čísla – napríklad hodnotenie filmu od 1 do 10.

Šimon: Dobre, takže Netflix zbiera všetky tieto údaje. Čo s nimi potom robí? Predpokladám, že ich nejako počíta.

Ema: Áno, a na to slúži frekvenčná tabuľka. Jednoducho si spočíta, koľkokrát sa ktorá hodnota objavila. Napríklad, koľko ľudí dalo filmu päť hviezdičiek.

Šimon: A to je tá absolútna početnosť, však? Proste presný počet.

Ema: Presne. A keď tento počet vydelíš celkovým počtom hodnotení, dostaneš relatívnu početnosť – často v percentách. A tá je vlastne odhadom pravdepodobnosti, že sa ti film bude páčiť.

Šimon: Aha! Takže ak 80 % ľudí podobných mne malo rado nejaký seriál, je 80 % šanca, že sa bude páčiť aj mne. Chápem.

Ema: A ideme ešte ďalej. Aby sme tie dáta zhrnuli, používame opisnú štatistiku. Najznámejšie sú priemer, medián a modus.

Šimon: Priemer pozná asi každý, sčítaš všetko a vydelíš počtom. Ale aký je rozdiel medzi priemerom a mediánom?

Ema: To je super otázka! Priemer je veľmi citlivý na extrémne hodnoty. Ak by napríklad deväť ľudí dalo filmu 8 bodov a jeden človek nula, priemer by to dosť znížilo.

Šimon: Jasné, ten jeden hejter by to pokazil.

Ema: Presne. Ale medián, čo je hodnota presne v strede usporiadaných dát, by stále zostal osem. A modus? Ten je najjednoduchší. Je to len najčastejšia hodnota.

Šimon: Takže modus je v podstate kráľ popularity v dátach.

Ema: Presne tak. Ale zaujíma nás aj to, ako veľmi sú tie hodnoty rozhádzané. Na to slúži rozptyl a smerodajná odchýlka.

Šimon: Čiže ak majú hodnotenia veľký rozptyl, znamená to, že názory ľudí na film sú extrémne rozdielne? Od odpadu až po majstrovské dielo?

Ema: Perfektne si to vystihol! A ideálny prípad pre štatistikov je, keď dáta tvoria takzvané normálne rozdelenie – peknú zvonovú krivku, kde je väčšina hodnôt okolo priemeru.

Šimon: A pri tomto rozdelení sú priemer, medián a modus takmer rovnaké, však?

Ema: Presne tak. A toto všetko sú základy, ktoré ti pomôžu pochopiť nielen štatistiku na maturite, ale aj svet okolo teba. Odporúčania na Netflixe sú len začiatok.

Šimon: Takže minule sme si dáta pekne upratali a popísali... ale čo ďalej? Veď väčšinou nemáme dáta o všetkých ľuďoch na svete. Čo s tým?

Ema: Presne tak, Šimon. A tým sa dostávame k inferenčnej štatistike. To je vlastne taká detektívka. Z malého kúska dôkazov – čiže z našej vzorky – sa snažíme odvodiť, čo platí pre celý prípad, teda pre celú populáciu.

Šimon: Počkaj, populácia a vzorka? Aký je v tom rozdiel?

Ema: Dobrá otázka. Predstav si, že chceš vedieť, aká je priemerná výška všetkých stredoškolákov na Slovensku. To je tvoj základný súbor, alebo populácia. Všetci.

Šimon: Jasné, ale odmerať každého jedného by bola... no, nočná mora.

Ema: Presne! Bolo by to drahé a prakticky nemožné. Preto si vyberieš menšiu skupinu, napríklad 500 študentov z rôznych škôl. To je tvoj výberový súbor, alebo vzorka. A na základe tejto vzorky odhadneš priemer pre všetkých.

Šimon: Chápem. Je to ako keď ochutnáš lyžičku polievky, aby si vedel, či je slaná celá. Nemusíš zjesť celý hrniec.

Ema: Perfektné prirovnanie! Presne o tom to je.

Šimon: Okej, takže máme tú vzorku. Ako z nej urobíme ten „odhad“?

Ema: Sú dva hlavné spôsoby. Prvý je bodový odhad. To je jedno konkrétne číslo. Vypočítaš priemer zo svojej vzorky a povieš: „Odhadujem, že priemerná výška všetkých stredoškolákov je 175 centimetrov.“

Šimon: To znie dosť... nepresne. Čo ak som sa trafil o kúsok vedľa?

Ema: A preto máme intervalový odhad, ktorý je oveľa lepší! Namiesto jedného čísla povieš: „S 95-percentnou istotou sa priemerná výška všetkých stredoškolákov nachádza medzi 173 a 177 centimetrami.“

Šimon: Aha! Takže dáme tomu nejaké rozpätie. Tomu sa hovorí interval spoľahlivosti, však?

Ema: Presne tak. Má dolnú a hornú hranicu. A je to super užitočné. Ak by niekto tvrdil, že priemerná výška je 180 cm, môžeš mu povedať, že to je veľmi nepravdepodobné, lebo 180 neleží v tvojom intervale.

Šimon: Super. A s tým súvisí aj testovanie hypotéz, o ktorom som počul. To je čo?

Ema: Testovanie hypotéz je formálny spôsob, ako sa rozhodnúť, či naše dáta podporujú nejaké tvrdenie. Napríklad, či nový liek naozaj funguje, alebo či sa priemery dvoch skupín líšia.

Šimon: A na to sú všetky tie zložité názvy... t-test, chí-kvadrát test, ANOVA...

Ema: Znie to zložito, ale každý je na niečo iné. T-test porovnáva priemery dvoch skupín. Napríklad, či majú chalani v priemere lepšie známky z matiky ako dievčatá.

Šimon: A čo ak mám skupín viac? Povedzme, chcem porovnať známky prvákov, druhákov a tretiakov?

Ema: Na to nemôžeš použiť t-test. Vtedy prichádza na rad ANOVA, alebo analýza rozptylu. Tá porovnáva priemery troch a viacerých skupín naraz.

Šimon: Takže ANOVA je taký t-test na steroidoch.

Ema: Dá sa to tak povedať. Ale pozor, aj ANOVA má svoje pravidlá, napríklad vyžaduje, aby dáta mali približne normálne rozdelenie. Ak ho nemajú, musíme použiť iné, takzvané neparametrické testy.

Šimon: Okej, takže mám test... a ako zistím výsledok? Pozerám na nejakú p-hodnotu, je to tak?

Ema: Presne. P-hodnota ti povie, aká je pravdepodobnosť, že by si videl také výsledky, aké máš, čisto náhodou. Zjednodušene: ak je p-hodnota veľmi malá, zvyčajne menšia ako 0,05, tak náhoda to asi nebola. A my zamietneme našu pôvodnú hypotézu a prijmeme tú alternatívnu.

Šimon: Čiže malá p-hodnota znamená, že sme našli niečo štatisticky významné. Rozumiem. Takže vieme porovnávať skupiny... ale čo ak chceme zistiť, či existuje vzťah medzi dvoma premennými? Napríklad medzi časom učenia a výslednou známkou?

Šimon: Takže hypotézy máme za sebou. Ale čo ak chceme niečo predpovedať? Napríklad, ako ovplyvní cena reklamy naše tržby?

Ema: Presne na to slúži regresia. Modeluje vplyv premennej X, ako je cena reklamy, na premennú Y, teda tržby.

Šimon: A tie písmenká b₀ a b₁? To znie ako nejaká tajná šifra.

Ema: Žiadna šifra. Sklon b₁ hovorí, o koľko sa zmenia tržby, ak dáme do reklamy o euro viac. A intercept b₀ je hodnota tržieb, keď by sme na reklamu nedali nič.

Šimon: Aha! A čo je potom to slávne R na druhú?

Ema: R² ukazuje, akú časť variability Y vysvetľuje náš model. Čím bližšie k jednej, tým lepšie.

Šimon: Super. Ale nie je to to isté ako korelácia?

Ema: Dobrá otázka! Korelácia len meria silu a smer vzťahu. Regresia ide ďalej, modeluje a predpovedá. Pamätaj, korelácia neznamená príčinnosť! Vieš, že predaj zmrzliny silno koreluje s útokmi žralokov?

Šimon: Čože? To snáď nie!

Ema: Obidva javy jednoducho rastú v lete. Ale zmrzlina nespôsobuje útoky žralokov!

Šimon: To dáva zmysel. Poďme rýchlo na poslednú tému – časové rady.

Ema: Jasné. Časové rady sú dáta usporiadané v čase, napríklad mesačné tržby. Hľadáme v nich trend, teda dlhodobý rast či pokles, a sezónnosť.

Šimon: Ako napríklad ten predvianočný zhon a vyšší predaj každý december?

Ema: Presne tak! Na základe týchto zložiek potom vieme robiť predikcie do budúcnosti, či už pomocou aditívneho alebo multiplikatívneho modelu.

Šimon: Fantastické. Ema, toto bola naša posledná téma. Dala by si nám na záver také bleskové zhrnutie toho najdôležitejšieho?

Ema: Určite! Dve skupiny porovnávame t-testom, tri a viac Anovou. Ak nemáme normalitu, použijeme neparametrické testy. Histogram ukazuje tvar rozdelenia, boxplot medián a odľahlé hodnoty. A pamätajte, priemer je citlivý na extrémy, medián je odolnejší.

Šimon: Skvelý prehľad. Ema, ďakujem ti veľmi pekne za celú sériu. Verím, že sme študentom pomohli.

Ema: Aj ja ďakujem za pozvanie. A všetkým poslucháčom držím palce pri skúškach!

Šimon: Tak tak. Za celý Studyfi Podcast sa s vami lúčim, majte sa pekne a dopočutia!