1교시 [사회복지기초] 사회복지조사론 (12) 실험설계의 특성 및 타당도

1. 정의

 - 실험설계란 연구에 적용된 독립변수에 대한 조작을 통해 그 조작의 결과 종속변수에 어떠한 변화가 나타나는가를 평가하는 방법으로, 인과관계에 대한 규명을 통해 미래의 사건을 예측할 수 있다. 

2. 특성 및 조건

 1) 특성

  ㄱ) 비교 : 실험집단과 통제집단에 대한 비교를 통해 변화를 입증한다. 

  ㄴ) 조작 : 시간적 선행성을 입증하기 위해 독립변수를 조작한다. 

  ㄷ) 무작위할당 : 외재적 변수의 통제와 경쟁가설을 제거하기위해 실험집단과 통제집단을 동질화한다. 

 2) 조건

  ㄱ) 독립변수의 조작 : 실험자가 독립변수를 인위적으로 변화시킨다. 

  ㄴ) 외생변수의 통제 : 독립변수와 종속변수 이외의 종속변수에 영향을 미칠 수 있는 변수의 영향을 제거한다. 

  ㄷ) 실험대상의 무작위화 : 무작위표집(무잡위표본추출) 또는 무작위 할당한다. 

3. 실험설계의 타당도

 1) 내적 타당도 : 연구과정 중 종속변수에서 나타나는 변화가 독립변수의 변화에 의한 것임을 확신할 수 있는 정도를 말한다. 

  ㄱ) 내적 타당도 저해요인

성숙 또는 시간의 경과	시간의 흐름에 따라 독립변수의 순수한 영향 이외의 변화가 종속변수에 미치게 되는 경우
우연한 사건 또는 역사요인	조사기간 중에 연구자의 의도와는 상관없이 일어난 통제 불가능한 사건
선별요인 (선택요인)	단순히 두 집단구성원들이 서로 다르기 때문에 나타나는 경우
상실요인 (실험대상의 탈락)	정책집행 기간 중에 관찰대상 집단 일부의 탈락 또는 상실로 인해 남아있는 대상이 처음의 관찰대상 집단과 다른 특성을 갖게 되는 현상
통계적 회귀요인	극단적인 측정값을 갖는 사례들을 재측정 할때 평균값으로 회귀하여 처음과 같은 극단적 측정값을 나타낼 확률이 줄어드는 현상
검사요인 (테스트 효과)	프로그램의 실시 전과 실시 후에 유사한 검사를 반복하는 경우 프로그램 참여자들의 시험에 대한 친숙도가 높아져서 측정값에 영향을 미치는 현상
도구요인	프로그램 집행 전과 집행 후에 측정자의 측정 기준이 달라지거나, 측정수단이 변화함에 따라 정책효과가 왜곡되는 현상
모방 (개입의 확산)	특정한 자극들에 의해 실험집단의 사람들이 효과를 얻게 되고, 그 효과들이 통제집단에게 영향을 미치는 현상
인과적 시간-순서  (인과관계 방향의 모호성)	시간적 우선성을 경험적으로 보여줄 수 없는 설계의 형태인 비실험설계에서는 원인변수와 결과변수 사이의 인과관계의 방향을 결정하기가 곤란함

  ㄴ) 내적 타당도의 제고방법

무작위 할당 (Random Assignment)	연구대상을 실험집단과 통제집단으로 무작위로 배치함으로써 두 집단이 동질적이 되도록 함
배합 또는 짝짓기 (Matching)	연구주제에 영향을 미칠 수 있는 주요 변수들을 미리 알아내어 이를 실험집단과 통제집단에 동일하게 분포되도록 함
통계적 통제 (Statistical Control)	실험설계를 통해 통제할 필요성이 있는 변수들을 독립변수로 간주하여 실험을 실시한 다음, 그 결과를 통계적으로 분석하여 해당 변수의 영향을 통제

 2) 외적 타당도 : 연구 결과에 의해 기술된 인과관계가 연구대상 이외의 경우로 확대/일반화될 수 있는 정도를 말한다. 

  ㄱ) 외적 타당도 저해요인

연구표본의 대표성	표본이 모집단을 대표할 수 있어야 일반화의 정도가 높아진다.
조사반응성 (반응효과)	실험대상자가 연구자의 관찰 사실을 의식하여 연구자가 원하는 방향으로 반응을 보인다면 일반화의 정도가 낮아지게 된다.

  ㄴ) 외적 타당도의 제고방법

모집단에 대한 타당성 (Population Validity)	표본의 대표성을 높이는 방법으로서, 표본자료가 모집단의 특성을 충분히 반영하고 있는지 파악한다.
환경에 의한 타당성 (Ecological Validity)	연구 결과가 연구 환경을 벗어나 보다 현실적이면서 다양한 환경에서도 적용될 수 있는지 검토한다.

* 기출문제 (2015년)

Q. 매우 건강한 90대 남성노인들에게 건강서비스를 1년 동안 제공한 후 건강상태를 측정한 결과, 이들의 상태가 나빠졌고 통제집단인 여성노인들에 비해서도 늦게 나타났다. 이 연구에서 영향을 미칠 수 있는 내적 타당도 저해요인을 모두 고른 것은?

 ㄱ. 성숙효과

 ㄴ. 선택(Selection)과의 상호작용

 ㄷ. 통계적 회귀

 ㄹ. 위약(Placebo) 효과

 1) ㄱ, ㄴ, ㄷ

 2) ㄱ, ㄷ

 3) ㄴ, ㄹ

 4) ㄹ

 5) ㄱ, ㄴ, ㄷ, ㄹ

(정답 및 해설은 아래 댓글을 참고하시기 바랍니다.)