Часткова кореляція

В теорії ймовірностей і статистиці, часткова кореляція вимірює ступінь зв'язку між двома випадковими величинами, коли певна множина випадкових величин видаляється. Якщо потрібно визначити чи є числова залежність між двома змінними, то використання коефіцієнту кореляції може привести до встановлення помилкового відношення, якщо існує змішувальна змінна, яка пов'язана з цими змінними. Цієї інформації, яка вводить в оману, можна уникнути, якщо контролювати змішану змінну, що досягається шляхом обчислення коефіцієнта часткової кореляції. Саме це є мотивацією для включення інших змінних до правої сторони в множинній регресії; але в той час як множинна регресія дає об'єктивні результати для ефект розміру, вона не дає числового значення міри зв'язку між двома змінними.

Формальне визначення

Формально, часткова кореляція між X і Y, яка визначається множиною n керуючих змінних Z = {Z1, Z2, …, Zn}, записується як ρXY·Z, є кореляцією між залишками eX та eY, як результат лінійної регресії на X із Z та Y з Z, відповідно. Часткова кореляція першого порядку (тобто, при n = 1) є різницею між кореляцією і добутком змінених кореляцій, поділену на добуток коефіцієнтів відчуження змінених кореляцій. Інформація про коефіцієнт відчуження, та його зв'язок із дисперсією на основі кореляції доступні в книзі Гілфорда (1973, ст. 344—345)[1].

Обчислення

За допомогою лінійної регресії

Простий спосіб обчислити часткову кореляцію для деяких даних полягає у розв'язанні двох пов'язаних задач лінійної регресії, отримати залишки і обчислити кореляцію між ними. Нехай X та Y , будуть, як зазначено вище, випадковими величинами, що приймають дійсні значення, і нехай Z буде n-мірним вектором значень випадкової величини. Будемо писати xi, yi та zi для позначення i-того з N н.о.р. спостережень деякого спільного розподілу ймовірностей над дійсними випадковими величинами X, Y та Z, де zi збільшуються на 1, для того, щоб у лінійній регресії була присутня стала (тобто, буде не нульовий доданок). Розв'язання лінійної задачі регресії зводиться до знаходження (n+1)-мірних коефіцієнтів векторів  і таких, що

де N означає число спостережень і  позначає скалярний добуток між векторами w and v. Слід зазначити, що в деяких джерелах регресія включає в себе постійний член, так що матриця z буде мати додатковий стовпчик з одиниць.

Залишки будуть

і приклад часткової кореляції обчислюється за звичайною формулою для вибіркової кореляції, але між цими новими отриманими значеннями. 

У першому виразі три доданки після знаків мінус всі рівні 0, оскільки кожен містить суму залишків регресії звичайного методу найменших квадратів.

За допомогою рекурсивної формули

Це може бути ресурсномістким у обчислюванні задач лінійної регресії. Насправді, n-порядок часткової кореляції (тобто з |Z| = n) може бути легко обчислено з трьох (n—1)-го порядку часткової кореляції. Нульовий порядок часткової кореляції ρXY·Ø визначається як звичайний коефіцієнт кореляції ρXY.

Для будь-якого виконується

Наївно реалізації даного розрахунку як рекурсивний алгоритм  експоненту тимчасової складності. Однак, це обчислення має характеристику перекривних підзадач, таких, що за допомогою динамічного програмування або просто кешування результатів рекурсивних викликів призводить до складності .

Примітка: у разі, якщо Z є єдиною змінною, це призводить до:

Використовуючи матрицю інверсії

За час , інший підхід дозволяє всім частковим кореляціям обчислюватися між будь-якими двома змінними Xi та Xj у множині V потужності n, враховуючи всі інші, тобто , якщо кореляційна матриця (або матриця коваріацій) Ω = (ρXiXj) є позитивно визначеною і, отже, оборотною. Якщо ми визначаємо P = (pij ) = Ω−1, ми маємо:

Інтерпретація

Геометрична інтерпретація часткової кореляції для випадку n=3 зразків і, таким чином, 2-мірної гіперплощини

Геометрична

Нехай три змінні X, Y, Z (де Z — це «контрольна» або «Додаткова змінна») вибирається з спільного розподілу ймовірностей за n змінних V. Далі vi, 1 ≤ i ≤ N, де N це n-мірніНезалежні однаково розподілені випадкові величини незалежні однаково розподілені вибірки, взяті із загального розподілу ймовірностей над V. Потім ми розглянемо в N-мірних векторів х (утворений послідовністю значень х за зразками), y (утворену значеннями Y) i z (утворену значеннями Z).

Можна показати, що залишки RХ , йдуть від лінійної регресії X на Z, якщо також розглядати як N-мірний вектор rХ, мають нульовий скалярний добуток з вектором z породженною Z. Це означає, що вектор залишків лежить на (n-1)-мірною [ гіперплощиною] Sz, яка перпендикулярна до z.

Те ж саме відноситься до залишків RY породженним вектора rY. Якщо бажана часткова кореляція тоді косинус кута φ між проекціями rX і rY  х і y, відповідно, на гіперплощину, перпендикулярну Z.[2]:ch. 7

Як тест умовної незалежності

За умови, що всі задіяні змінні це багатовимірні Гауссівського, часткової кореляції ρху·Z дорівнюють нулю, тоді і тільки тоді, коли х є умовно незалежноюY даного Z.[3] Ця властивість не використовується в загальному випадку.

Щоб перевірити, що зразок часткової кореляції  зникає, використовують Z-перетворення в часткові кореляції Фішера :

У нульовій гіпотезі є для тестування проти двох хвостових альтернатив. Ми відкидаємо н0 з рівнем значущості α , якщо:

де Φ(·) є кумулятивною функцією розподілу з Гауссовим розподілом з нульовим значенням і одиницею стандартного відхилення, та N — це розмір вибірки. Зверніть увагу, що z-перетворення є приблизними і, що фактичний розподіл вибірки (частковий) коефіцієнту кореляції є не однозначним. Однак точний T-тест, заснований на поєднанні коефіцієнту часткової регресії, частковому коефіцієнті кореляції і частковій дисперсії є доступними.[4]

Розподіл вибірки часткової кореляція було описано Фішером.[5]

Напівчасткова кореляція (часткова кореляції)

Напівчасткова (часткова) кореляція статистики аналогічна частковій кореляції статистики. Обидва порівняння варіантів двох змінних після того, як певні фактори, не контрольовані, але для обчислення напівчасткової кореляції, одна займає третю змінну константою для будь-якого Х або Y , але не обидва, в той час як для часткової кореляції, одна займає третю змінну константою для обох.[6] У напівчастковій кореляції порівнюються унікальні варіації однієї змінної(з витягнутою варіацією, пов'язаною з Z змінною (ами)), з нефільтрованої зміни іншої, в той час як часткова кореляція порівнює унікальні варіації однієї змінної унікальною варіацією іншого.

Напівчасткову (часткову) кореляцію можна розглядати як більш практично відповідною, « так як вона масштабується (тобто відноситься) загальною мінливістю в залежності (відповіді) змінної.». [7] з іншого боку, вона менш теоретично відповідна, тому що вона менш чіткіше уявляє роль унікального внеску незалежної змінної.

Абсолютне значення напівчасткової кореляції Х з Y завжди менше або дорівнює часткової кореляції X з Y. Причина полягає в наступному: припустимо, що співвідношення X з Z видалено з Х, даючи залишковий вектор rХ . При розрахунку напівчасткової кореляції Y і досі містить унікальну дисперсію і дисперсію через її асоціацію з Z. Але rХ , будучи корельованним з Z, можуть пояснити тільки деякі з унікальної частини дисперсії у , а не частини, яка належить до Z. На відміну від цього, з частковою кореляцією, тільки ry  (частина дисперсії у , яка не має відношення до Z) буде пояснена так, що там менше дисперсія типу  rХ не можна пояснити.

Використання в аналізі часових рядів

В аналіз часових рядів, у приватній автокореляційній функції (іноді «часткова кореляційна функція») часові ряди визначаються, для лагу h, як

Ця функція використовується для визначення відповідної довжини лагу авторегресії.

Див. також

Примітки

  1. Guilford J. P., Fruchter B. (1973). Fundamental statistics in psychology and education. Tokyo: McGraw-Hill Kogakusha, LTD.
  2. Rummel, R. J. (1976). Understanding Correlation.
  3. Baba, Kunihiro; Ritei Shibata; Masaaki Sibuya (2004). Partial correlation and conditional correlation as measures of conditional independence. Australian and New Zealand Journal of Statistics 46 (4): 657–664. doi:10.1111/j.1467-842X.2004.00360.x. Вказано більш, ніж один |author2= та |last2= (довідка); Вказано більш, ніж один |author3= та |last3= (довідка); Вказано більш, ніж один |DOI= та |doi= (довідка)
  4. Kendall MG, Stuart A. (1973) The Advanced Theory of Statistics, Volume 2 (3rd Edition), ISBN 0-85264-215-6, Section 27.22
  5. Fisher, R.A. (1924). The distribution of the partial correlation coefficient. Metron 3 (3–4): 329–332.
  6. Архівована копія. Архів оригіналу за 6 лютого 2014. Процитовано 10 грудня 2016.Пропущений або порожній |title= (довідка)
  7. StatSoft, Inc. (2010).

Посилання

This article is issued from Wikipedia. The text is licensed under Creative Commons - Attribution - Sharealike. Additional terms may apply for the media files.