Квазі-експеримент

Перша частина створення плану квазі-експериментального дослідження полягає у виявленні змінних. Квазінезалежна змінна буде x-змінною, змінною, якою маніпулюють, щоб вплинути на залежну змінну. «X», як правило, групова змінна з різними рівнями. Групування означає дві або більше груп, наприклад, дві групи, які отримують альтернативні методи лікування, або групу лікування та групу, яка не отримує лікування (яким може бути надано плацебо — плацебо частіше використовують у медичних або фізіологічних експериментах). Прогнозованим результатом є залежна змінна, яка є змінною y. При аналізі часових рядів спостерігаються будь-якихі міни залежної змінної у часі, які можуть відбутися. Після того, як змінні були ідентифіковані та визначені, слід застосувати процедуру та вивчити групові відмінності.[3]

У експерименті з випадковим призначенням досліджувані одиниці мають однакові шанси бути призначеними на певне лікування. Таким чином, випадковий розподіл гарантує, що експериментальна та контрольна групи є рівнозначними. У квазі-експериментальному плануванні призначення певного лікування базується на чомусь іншому, ніж на випадковому призначенні. Залежно від типу квазі-експериментальної конструкції, дослідник може контролювати віднесення до лікування, але використовувати деякі критерії, крім випадкового присвоєння (наприклад, граничний бал), щоб визначити, які учасники отримують лікування, або дослідник може не мати контроль за призначенням лікування та критерії, що використовуються для призначення, можуть бути невідомими. Такі фактори, як вартість, доцільність, політичні проблеми чи зручність, можуть впливати на те, як або якщо учасники призначаються до тих чи інших умов лікування, і такі, квазі-експерименти піддаються сумніву щодо внутрішньої валідності (тобто, чи можуть результати експерименту бути використовується для причинно-наслідкового висновку?).

Квазіексперименти ефективні також тим, що використовують «тестування до та після». Це означає, що перед тим, як збирати будь-які дані, проводяться тести, щоб перевірити, чи є хтось, хто викликає занепокоєння, чи хтось із учасників має певні тенденції. Потім проводиться власне експеримент із записом результатів тестів після. Порівняння цих даних може бути виконане як частина дослідження, або дані перед тестом можна включити в пояснення фактичних експериментальних даних. Квазі-експерименти мають незалежні змінні, які вже існують, такі як вік, стать, колір очей. Ці змінні можуть бути безперервними (вік) або категоріальними (стать). Коротше кажучи, природні змінні вимірюються в рамках квазі-експериментів.[4]

Існує кілька типів квазі-експериментальних планів досліджень, кожен з яких має різні сильні, слабкі сторони та області застосування. Ці плани включають (але не обмежуються):[5]

• Різниця у відмінностях (тестування до та після, з та без)
• Планування нееквівалентних контрольних груп
  • планування контрольної групи без лікування
  • планування нееквівалентних залежних змінних
  • планування видалених груп з лікуванням
  • планування з повторним лікуванням
  • планування нееквівалентних контрольних груп обернених лікуванню
  • когортне дослідження
  • планування лише з тестом після
  • планування з безперервною регресією
• планування з переривчастою регресією
• планування випадок-контроль
  • планування часових рядів
  • планування декількох часових рядів
  • планування з перерваними часовими рядами
  • відповідність оцінки схильності
  • метод інструментальних змінних
• Панельне дослідження

З усіх цих планів досліджень планування з переривчастою регресією є найбільш наближеним до планування експерименту, оскільки експериментатор підтримує контроль за призначенням лікування, і, як відомо, він дає «неупереджену оцінку ефектів лікування».[5] Однак це вимагає великої кількості учасників дослідження та точного моделювання форми функції між призначенням та змінною результату, щоб отримати таку ж потужність, як традиційне планування експерименту.

Хоча квазі-експериментів іноді уникають ті, хто вважає себе експериментальними пуристами (змусивши Дональда Т. Кемпбелла ввести для них термін «неприємні експерименти»),[6] вони надзвичайно корисні в областях, де неможливо або бажано проводити експеримент або рандомізоване контрольне дослідження. Такі випадки включають оцінку впливу змін державної політики, освітніх втручань чи широкомасштабних заходів охорони здоров'я. Основним недоліком квазі-експериментальних конструкцій є те, що вони не можуть усунути можливість упередженості, що викликає занепокоєння, що може перешкодити спроможності робити причинно-наслідкові висновки. Цей недолік часто використовується для зниження цінності квазі-експериментальних результатів. Однак таке упередження можна контролювати за допомогою різних статистичних методів, таких як множинна регресія, якщо можна ідентифікувати та виміряти змішувальні змінні. Такі методи можна використовувати для моделювання та часткового згладжування ефектів методів змішування змінних, тим самим покращуючи точність результатів, отриманих в результаті квазі-експериментів. Більше того, розвивається використання відповідності оцінки схильності до збігу учасників за змінними, важливими для процесу вибору лікування, може також підвищити точність квазі-експериментальних результатів. Насправді було показано, що дані, отримані в результаті квазі-експериментального аналізу, тісно відповідають експериментальним даним у певних випадках, навіть коли використовувались різні критерії.[7]

У підсумку, квазі-експерименти є цінним інструментом, особливо для прикладного дослідника. Самі по собі квазі-експериментальні плани досліджень не дозволяють робити остаточні причинно-наслідкові висновки; однак вони надають необхідну та цінну інформацію, яку неможливо отримати лише експериментальними методами. Дослідникам, особливо тим, хто зацікавлений у дослідженні прикладних дослідницьких питань, слід вийти за рамки традиційного планування експерименту та скористатися можливостями, властивими квазі-експериментальним планам.[5]

Наприклад, справжній експеримент може випадковим чином призначити дітей на стипендію, щоб контролювати всі інші змінні. Квазіексперименти зазвичай використовуються в соціальних науках, громадському здоров'ї, освіті та аналізі політики, особливо коли недоцільно або непрактично розподіляти учасників дослідження за умовами лікування (впливу).

Як приклад, припустимо, ми поділяємо домогосподарства на дві категорії: домогосподарства, в яких батьки б'ють своїх дітей, і домогосподарства, в яких батьки не б'ють своїх дітей. Ми можемо провести лінійну регресію, щоб визначити, чи існує позитивна кореляція між побоями батьків та агресивною поведінкою їхніх дітей. Однак просто рандомізувати батьків на те, щоб вони били або не шльопали своїх дітей, може бути непрактично чи неетично, оскільки деякі батьки можуть вважати, що морально неправильно шльопати своїх дітей і відмовляться від участі.

Деякі автори розрізняють природний експеримент та «квазі-експеримент».[1][5]Відмінність полягає в тому, що в квазі-експерименті критерій призначення призначається дослідником, тоді як у природному експерименті призначення відбувається «природним шляхом», без участі дослідника.

Квазіексперименти містять показники результатів, методи лікування та експериментальні одиниці, але не використовують випадкове призначення. Квазіексперименти часто є тим планом, який більшість людей обирають перед справжніми експериментами. Основна причина полягає в тому, що їх зазвичай можна проводити, тоді як справжні експерименти не завжди можуть бути проведені. Квазіексперименти цікаві тим, що вони включають особливості як експериментальних, так і не експериментальних планів досліджень. Вимірювані змінні можуть бути додані, а також підконтрольні, змінювані змінні. Зазвичай квазі-експерименти вибирають експериментатори, оскільки вони максимізують внутрішню та зовнішню обґрунтованість.[8]

Оскільки квазі-експериментальні плани використовуються, коли рандомізація є непрактичною та / або неетичною, їх, як правило, простіше поставити, ніж справжні експериментальні плани, які вимагають випадкового призначення суб'єктів.[9] Крім того, використання квазі-експериментальних конструкцій мінімізує загрози для екологічної валідності, оскільки природне середовище не страждає від таких самих проблем штучності, як у добре контрольованих лабораторних умовах.[10] Оскільки квазі-експерименти є природними експериментами, висновки в одному можуть застосовуватися до інших предметів та обставин, дозволяючи зробити деякі узагальнення щодо популяції. Крім того, цей метод експериментування ефективний при лонгітюдному дослідженні, яке включає більш тривалі періоди часу, за якими можна спостерігати в різних середовищах.

Інші переваги квазі-експериментів включають ідею проведення будь-яких маніпуляцій, які обрав експериментатор. Під час природних експериментів дослідникам доводиться дозволяти змінам відбуватися самостійно і не мати над ними контролю. Крім того, використання самостійно вибраних груп у квазі-експериментах також призводить до виникнення етичних, умовних тощо проблем під час проведення дослідження.[8]

Квазіекспериментальні оцінки впливу піддаються забрудненню непевними змінними.[1] У наведеному вище прикладі на зміну реакції дітей на побої правдоподібно впливають фактори, які неможливо легко виміряти та контролювати, наприклад, власна дикість дитини або дратівливість батьків. Відсутність випадкового призначення в методі квазі-експериментального планування може дозволити дослідженню бути більш здійсненними, але це також створює багато проблем для дослідника з точки зору внутрішньої валідності. Цей недолік рандомізації ускладнює виключення непевних змінних та вносить нові загрози для внутрішньої валідності.[11] Оскільки рандомізація відсутня, деякі знання про дані можна наблизити, але висновки про причинно-наслідкові зв'язки важко визначити через безліч сторонніх та змішувальних змінних, які існують у соціальному середовищі. Більше того, навіть якщо ці загрози внутрішній валідності оцінені, причинно-наслідковий зв'язок все ще не може бути повністю встановлений, оскільки експериментатор не має повного контролю над сторонніми змінними.[12]

До недоліків також належать досліджувані групи, які можуть надати слабкі докази через відсутність випадковості. Випадковість приносить багато корисної інформації для дослідження, оскільки вона розширює результати і, отже, забезпечує кращу представленість популяції в цілому. Використання нерівних груп також може загрожувати внутрішній валідності. Якщо групи не рівні, що іноді буває у квазі-експериментах, тоді експериментатор може не бути впевненим, що причини результатів.[4]

Внутрішня валідність — це приблизна істина про висновки щодо причинно-наслідкових зв'язків. Ось чому обґрунтованість є важливою для квазі-експериментів, оскільки всі вони стосуються причинно-наслідкових зв'язків. Це відбувається, коли експериментатор намагається контролювати всі змінні, які можуть вплинути на результати експерименту. Статистична регресія, історія та учасники — усі можливі загрози внутрішній валідності. Питання, яке ви хотіли б задати, намагаючись зберегти високу внутрішню валідність, — «Чи є інші можливі причини результату, крім причини, яку я хочу?» Якщо так, то внутрішня валідність може бути не такою вже сильною.[8]

Зовнішня валідність — це ступінь, в якому результати, отримані на основі вибірки дослідження, можуть бути узагальнені «до» певної конкретно визначеної сукупності, що представляє інтерес, та «поміж» субпопуляціями людей, часу, контексту та методів дослідження.[13] Джон Г. Лінч-молодший стверджував, що узагальнення популяції майже ніколи неможливе, оскільки популяції, на які ми хотіли б проектувати висновки, є мірами майбутньої поведінки, вибірки яких за визначенням неможливо взяти.[14] Отже, більш актуальним є питання, чи узагальнюють ефекти лікування «поперек» субпопуляцій, які різняться залежно від фонових факторів, які можуть не бути помітними для дослідника. Зовнішня валідність залежить від того, чи мають дослідження лікування однорідні ефекти для різних підмножин людей, часу, контекстів та методів дослідження, чи змінюються ознака та величина будь-яких ефектів лікування між підмножинами способами, які не можуть бути визнані або зрозумілі дослідниками.[15] Сьюзен Атей та Імбенс, Аті та Вейджер запровадили методи машинного навчання для індуктивного розуміння різнорідних ефектів лікування.[16][17]

Проекти «лікування на особу» (індивідуальне лікування) — це найпоширеніший тип планування квазі-експериментів. У цій конструкції експериментатор вимірює принаймні одну незалежну змінну. Поряд із вимірюванням однієї змінної, експериментатор також буде маніпулювати іншою незалежною змінною. Оскільки відбувається маніпулювання та вимірювання різних незалежних змінних, дослідження в основному проводяться в лабораторіях. Важливим фактором у роботі із схемами індивідуального лікування є те, що потрібно буде використовувати випадкове призначення, щоб переконатися, що експериментатор має повний контроль над маніпуляціями, які проводяться під час дослідження.[18]

Приклад такого типу планування був виконаний в Університеті Нотр-Дам. Дослідження проводилось для того, щоб з'ясувати, чи не призводило наставництво до підвищеного задоволення від роботи. Результати показали, що багато людей, які мали наставника, демонстрували дуже високе задоволення роботою. Однак дослідження також показало, що ті, хто не отримав наставника, також мали велику кількість задоволених працівників. Зайберт дійшов висновку, що, хоча працівники, які мали наставників, були щасливі, він не міг припустити, що причиною цього були самі наставники через велику кількусть людей без наставників, які сказали, що вони задоволені. Ось чому попередній скринінг дуже важливий, щоб можна було звести до мінімуму будь-які недоліки в дослідженні, перш ніж їх побачити.[19]

«Природні експерименти» — це інший тип планування квазі-експериментів, який використовується дослідниками. Він відрізняється від індивідуального лікування тим, що не існує змінної, якою маніпулює експериментатор. Замість того, щоб контролювати принаймні одну змінну, наприклад, схему індивідуального лікування, експериментатори не використовують випадкове призначення і залишають керування експериментом на волю випадку. Звідси походить назва «природний» експеримент. Маніпуляції відбуваються природним шляхом, і хоча це може здатися неточним методом, насправді це виявилося корисним у багатьох випадках. Це дослідження, проведені на людях, з якими раптом щось трапилось. Це може означати добре чи погано, травматично чи ейфорично. Прикладом цього можуть бути дослідження, проведені на тих, хто потрапив у дорожньо-транспортну пригоду, і на тих, хто ні. Автомобільні аварії трапляються природним шляхом, тому не було б етично проводити експерименти з метою травматизації досліджуваних. Ці природні події виявились корисними для вивчення випадків посттравматичного стресового розладу.[18]

• Quasi-Experimental Design at the Research Methods Knowledge Base