Корреляция, связь и независимость
Безразмерная мера линейной связи и её важные ограничения.
Чему научимся
Она позволяет сравнивать направление и силу линейного совместного изменения в разных единицах, одновременно напоминая о нелинейной зависимости, выбросах и причинности.
Главная идея. Корреляция Пирсона нормирует ковариацию произведением стандартных отклонений и получает безразмерное число от −1 до 1, измеряющее именно линейную связь.
План рассуждения и проверка понимания
- Проверьте конечность и строгую положительность обеих дисперсий; при постоянной переменной знаменатель равен нулю и корреляция не определена.
- Вычислите ковариацию центрированных величин и разделите её на √Var(X)√Var(Y), сохраняя знак результата.
- Сопоставьте |ρ| = 1 с аффинной зависимостью почти наверное и ненулевым наклоном, а ρ = 0 не превращайте в независимость.
- Для выборочного r изучите диаграмму рассеяния, выбросы, отбор данных и возможный общий фактор до содержательного вывода.
Частая ошибка. Приписывать нулевой корреляции независимость или трактовать высокий выборочный коэффициент как доказательство причинного влияния одного признака на другой.
Как проверить себя. Пара X и X² при симметричной X может иметь нулевую ковариацию и полную нелинейную зависимость. Причинный вывод требует отдельного дизайна исследования.
Наглядная модель: Корреляция, связь и независимость
Безразмерная мера линейной связи и её важные ограничения.
- Корреляция, связь и независимость → Корреляция, связь и независимость
- Корреляция, связь и независимость → covariance
Проверка пониманияОбъясните тему своими словами
Для X, равномерной на {−1,0,1}, и Y = X² объясните, как ковариация становится нулевой, хотя значение Y полностью определяется X.
В хорошем объяснении есть:
- Использована симметрия X и нечётность X³.
- Нулевая линейная связь отделена от независимости.
- Приведена условная вероятность, показывающая зависимость.
Нормированная ковариация
Корреляция Пирсона делит ковариацию на произведение стандартных отклонений. Так исчезают единицы измерения, и число оказывается между −1 и 1. Она описывает линейную связь, а не всякую зависимость.
Условия и крайние значения
Требуются конечные положительные дисперсии. Если один признак постоянен, знаменатель нулевой: корректный результат — «не определена», а не ноль. При этих условиях абсолютная корреляция равна 1 тогда и только тогда, когда одна величина является аффинной функцией другой почти наверное с ненулевым наклоном. Знак корреляции совпадает со знаком наклона.
Почему модуль не превышает 1
Примените неравенство Коши–Буняковского к центрированным величинам. Квадрат ковариации не превосходит произведения дисперсий. Деление на положительный знаменатель даёт оценку. Условие равенства соответствует линейной зависимости центрированных величин.
Ноль и причинность
Независимость с существующими вторыми моментами влечёт нулевую корреляцию, но обратное неверно: X и X² при симметричной X дают нелинейный контрпример. Для совместно нормального вектора нулевая ковариация координат действительно влечёт их независимость; нормальности отдельных маргинальных законов недостаточно.
Выборочная корреляция r — статистика данных, а не известная генеральная корреляция ρ. Выбросы, отбор наблюдений и скрытый общий фактор могут существенно менять r. Ни высокий коэффициент, ни красивое облако точек сами по себе не доказывают причинность.
Три примера
- При Cov(X,Y)=3,Var(X)=4,Var(Y)=9 получаем ρ=3/(2·3)=1/2.
- Если Y=−2X+7 и Var(X)>0 конечна, то ρ=−1: увеличение X полностью соответствует уменьшению Y.
- При X, равномерной на {−1,0,1}, и Y=X² ковариация равна нулю, но P(Y=0|X=0)=1 отличается от P(Y=0)=1/3.
Формула, смысл и ограничения
Главные формулы с расшифровкой
Формула словами: Обе дисперсии должны быть конечными и строго положительными; при постоянной величине корреляция не определена.
От формулы к наблюдению
Попробуйте самостоятельно
Измените параметры и сопоставьте расчёт с результатами случайного эксперимента.
От простого к сложному
Проверьте себя
Сначала запишите решение самостоятельно. Затем можно открыть намёк, сравнить каждый переход с пошаговым разбором и только после этого посмотреть ответ. Прогресс сохраняется в этом браузере.
Открываем задание…
Открываем задание…
Открываем задание…
Источники и соглашения
Объяснения и задачи — авторские. Источники помогают проверить определения, условия и школьную привязку. Обозначения и параметризация указаны в статье.