Никита Поваров, principal analyst в JetBrains, пришёл, чтобы рассказать об одной из самых коварных ловушек в работе с данными: мы привыкли видеть корреляции, но совершенно не умеем доказывать причинность. А разница между "связано" и "вызывает" – это разница между правильным решением и красивой иллюзией. В выпуске прошли по истории вопроса от Гальтона и Фишера до современных каузальных графов: почему исторически статистика и каузальность шли разными путями и как они всё-таки сошлись.

Разбираем d-сепарацию, конфаундеры, медиаторы и строим каузальные графы на конкретных примерах из A/B тестирования, медицины и продуктовой аналитики. Выпуск для всех, кто работает с данными и хочет не просто находить паттерны, а понимать, что на что влияет и уметь это обосновать.

Также ждем вас, ваши лайки, репосты и комменты в мессенджерах и соцсетях!

Telegram-чат: https://t.me/podlodka

Telegram-канал: https://t.me/podlodkanews

Страница в Facebook: www.facebook.com/podlodkacast/

Twitter-аккаунт: https://twitter.com/PodcastPodlodka

Ведущие в выпуске:

Стас Цыганов, Егор Толстой

Полезные ссылки:

Фундамент — вероятность как логика E.T. Jaynes — «Probability Theory: The Logic of Science»

Вес и физическая активность — каузальные модели

Mendelian randomization, eLife 2022: «Mendelian randomization suggests a bidirectional, causal relationship between physical inactivity and adiposity»

https://pmc.ncbi.nlm.nih.gov/articles/PMC8975550/

Multivariable MR, Nature Comms Med 2023: «Distilling causality between physical activity traits and obesity via Mendelian randomization»

https://www.nature.com/articles/s43856-023-00407-5

E. Yudkowsky — «Causal Diagrams and Causal Models»

https://www.lesswrong.com/posts/hzuSDMx7pd2uxFc5w/causal-diagrams-and-causal-models

Выдуманный пример вес/активность/сидение-на-Reddit, как иллюстрация коллайдера Herman Pontzer — «Constrained Total Energy Expenditure and Metabolic Adaptation to Physical Activity in Adult Humans»

https://pmc.ncbi.nlm.nih.gov/articles/PMC4803033/

Исторические байки

Ф. Гальтон — Регрессия к среднему — Regression towards Mediocrity in Hereditary Stature, Journal of the Anthropological Institute

https://galton.org/essays/1880-1889/galton-1886-jaigi-regression-stature.pdf

К. Пирсон — Корреляция наше всё — «The Grammar of Science»

https://archive.org/details/grammarofscience00pearrich/page/44/mode/2up

Р. Фишер — ген курильщика — «Cancer and smoking», Nature

https://www.nature.com/articles/182596a0

Ignaz Semmelweis — мытьё рук

https://en.wikipedia.org/wiki/Ignaz_Semmelweis

краткая биография

https://pmc.ncbi.nlm.nih.gov/articles/PMC11568873/

Джон Сноу — холера в Лондоне

https://pmc.ncbi.nlm.nih.gov/articles/PMC7150208/

Barbara Stoddard Burks — забытый пионер медиации

https://danamackenzie.com/barbara-stoddard-burks-pioneer-in-causality/

Бедность и когнитивные функции

https://pubmed.ncbi.nlm.nih.gov/23990553/

Дискриминация женщин — слепые прослушивания

https://www.aeaweb.org/articles?id=10.1257/aer.90.4.715

Курьёз — ретроспективный эффект молитвы — «Effects of remote, retroactive intercessory prayer on outcomes in patients with bloodstream infection: randomised controlled trial»

https://pubmed.ncbi.nlm.nih.gov/11751349/