Попытка проанализировать причинно-следственные связи свободно доступного набора данных.

Mar 20, 2015 15:33

Крайне часто мы слышим "корреляция это ещё не причинно-следственная связь", однако в своих аргументах в споре приводим её именно в данном качестве ( Read more... )

Leave a comment

Comments 28

dborisog March 20 2015, 15:30:04 UTC
Да, statistical inference -- очень интересная дисциплина, которую хочу освоить практически полностью. К сожалению, пока понял, что обладаю недостаточными теоретическими знаниями. Но через некоторое время смог бы поучаствовать или откомментировать ход дискуссии )))

Reply

p2004r March 22 2015, 08:57:41 UTC
Как видно темп дискуссии временами напоминает "переписку Грозного с беглым Курбским"ТМ, так что ждём подключения. А то мы с автором журнала уже "исчерпали пространство состояний" :)

Reply

dborisog March 22 2015, 09:56:12 UTC
Пока у меня создалось впечатление, что statistical inference можно разделить на три области: проверка гипотез, предсказание (большей частью с помощью линейной регрессии) и построение моделей (взаимосвязь переменных). В данный момент я изучаю проверку гипотез (hypothesis testing), ваша дискуссия скорее связана с третьей категорией. Смею предположить, что в рамках существующего датасета можно отследить ненаправленные связи между значениями, но для построения направленных связей придётся выходить за пределы датасета, как за дополнительными концепциями, так и статистикой и допущениями.

Reply

p2004r March 22 2015, 10:42:02 UTC
Всё нормально с направлением связи, строится наилучшая модель с учетом направленности связи. (Во всяком случае человек действует куда более нелогично.)

http://secondary-tea.livejournal.com/18888.html?thread=44232#t44232

?choose.direction

Check both possible directed arcs for existence, and choose the one with the lowest p-value, the highest score or the highest bootstrap probability.

Castelo R, Siebes A (2000). "Priors on Network Structures. Biasing ( ... )

Reply


Мы имеем дело с современным лысенкоизмом secondary_tea March 24 2015, 07:12:30 UTC
Стрелка obe1->black может быть истолкована двумя способами
"если достаточно сильно разжиреть, станешь негром"
"если достаточно сильно разжиреть, приедут негры селиться в ваш район"
И то и другое абсурдно.
Еще логично было бы "если разжиреть, не будут брать на работу, обеднеешь, упадут цены на жилье и приедут негры селиться в ваш район" -- но этого не в выхлопе bnlearn не видно

Вообще, на этом датасете причинно-следственные связи видны плохо. Они хорошо видны на других датасетах, которые p2004r предпочёл просто не комментировать.

... )

Reply

Re: Мы имеем дело с современным лысенкоизмом dborisog March 24 2015, 09:43:07 UTC
> если все объясняется воспитанием, почему мы должны ограничиваться тем, чтобы поднять негров до уровня белых, может быть, лучше тогда поднять ВСЕХ до уровня азиатоамериканцеев или евреев ( ... )

Reply

Re: Мы имеем дело с современным лысенкоизмом secondary_tea March 24 2015, 13:09:58 UTC
так мозги измеряли уже, у негров еще с самого рождения они меньше, чем у белых, а у белых -- меньше, чем восточноазиатов
http://www.ncbi.nlm.nih.gov/pmc/articles/PMC2668913/
The results showed that at birth, 4 months, 1 year, and 7 years, the East Asian children averaged larger cranial volumes than White children who averaged larger cranial volumes than Black children (Figure 5). Within each group, children with larger head sizes obtained higher IQ scores. Moreover, the East Asian children, who averaged the largest craniums, were the shortest in stature and the lightest in weight, whereas the Black children, who averaged the smallest craniums, were the tallest in stature and the heaviest in weight; the differences in brain

Reply

Re: Мы имеем дело с современным лысенкоизмом dborisog March 24 2015, 13:21:07 UTC
Спасибо за ссылку.

Reply


Leave a comment

Up