Благодаря стрелкам это новшество лишь на первый взгляд кажется дребеденью, но по факту требует нетривиальных логических способностей (не расслабляйтесь) анализ вышел на новый, третий уровень. Лестница показывает предыдущие два: первый это корреляция, мы лишь наблюдаем за происходящим (да, анализ больших данных и искусственный интеллект находятся на нем), на следующем уровне мы задумаемся о последствиях своих действий, то есть вмешиваемся (здесь расположены исследования с контрольными группами), на третьем переход к сослагательному наклонению, когда для ответа на вопрос «Что, если?» требуются лишь данные и стрелочки, искусно помноженные на привычные статистические методы.
Корреляция это не причинно-следственные связи. Разве?
Английский антрополог, географ, психолог Френсис Гальтон (18221911) одним из первых начал анализировать наследственность. Он рассматривал рост отцов и их сыновей, и выявил закономерность, известную как «регрессия к средним величинам». То есть высока вероятность, что у высокого отца сын будет ниже ростом (и наоборот). Если бы это было не так, то тогда средний рост населения серьезно менялся бы, но он остается стабильным. Чтобы наглядно показать этот процесс, он сконструировал «доску Гальтона». Если бросить один шарик, то предсказать его размещение сложно, но при тысяче общее распределение статистикам сегодня известно.
Рис. 1. Доска Гальтона
Идею выявленной таким образом «двойной» корреляции (можно взять рост отца или сына и предположить рост сына и отца соответственно), которая не является причинно-следственной связью, подхватил английский математик, статистик, биолог и философ Карл Пирсон (18571936). Пирсон увидел в таком подходе возможность вывести гуманитарные и социальные области знаний (например, психологию) на уровень точных наук, ведь появилась строгая математическая методология. При этом анализ и внимание к причинно-следственным связям он считал ненужными и в корне неверными. Пирсон основал научный журнал Biometrika до сих пор ведущий в области статистики. И благодаря этому (а также активному развитию статистического направления в русле корреляционного анализа) Пирсон оказал значительное влияние на то, что «корреляция не выявляет причинно-следственных связей» стало де факто аксиомой. С противниками такой точки зрения он активно боролся всеми доступными в научном сообществе способами.