단일사례 평가설계와 표본추출: 연구 현장에서의 경험과 통찰

단일사례 평가설계와 표본추출: 연구 현장에서의 경험과 통찰

1. 단일사례 평가설계란?

단일사례 평가설계(Single-Case Evaluation Design)는 시계열 설계의 논리를 개별 사례나 체계에 대한 개입 또는 정책 변화의 영향을 평가하는 데 적용하는 방법론입니다. 이 설계는 특정한 개입이 표적 문제에 어떤 영향을 미치는지 평가하기 위해 클라이언트의 체계를 반복적으로 측정하는 것이 핵심입니다.

개입 도입 전, 표적 문제의 경향성을 파악하기 위해 반복 측정을 실시하는데, 이 단계를 **기초선(baseline)**이라고 합니다. 기초선은 통제 단계로서, 집단 실험에서 통제 집단과 같은 역할을 수행합니다. 기초선 단계에서 수집된 자료는 개입 단계 동안 수집된 자료와 비교되며, 개입의 효과성을 판단하기 위해 두 단계 간의 변화 추이를 분석합니다.

2. 실제 경험: 장애인 현장 수요 연구 사례

과거 장애인 현장 수요 연구를 통해 단일사례 평가설계를 접한 적이 있습니다. 당시 기초선의 중요성에 대한 인식이 부족했던 것이 아쉬움으로 남습니다. 한국장애인개발원에서 발달장애인의 직업재활훈련 성과를 측정하는 연구를 진행하면서, 기초선 측정을 충분히 하지 못한 채 개입을 시작해버린 경험이 있습니다.

이로 인해 연구 결과에 대한 통제가 어려워졌고, 개입 후 반복 측정을 충분히 하지 못해 신뢰할 수 있는 데이터를 수집하는 데 실패했습니다. 결국 질적 연구를 추가로 수행해야 했고, 이로 인해 시간과 노력이 더 소요되었습니다. 이 경험은 단일사례 평가설계에서 기초선의 중요성을 깊이 인식하게 된 계기가 되었습니다.

3. 지역사회 단일사례 평가설계 적용에 대한 고민

단일사례 평가설계는 개별 사례를 중심으로 접근하는 방법입니다. 최근에는 지역사회를 하나의 사례로 보고 연구를 진행하는 것에 관심을 갖고 있습니다. 그러나 지역사회라는 개념은 추상적이고 모호하기 때문에 측정 방법의 조작화가 중요합니다.

조작화를 통해 지역사회를 단일 사례로 보고 기초선과 관련된 반복 측정을 수행한다면, 단일사례 평가설계를 효과적으로 활용할 수 있습니다. 이는 지역사회 변화를 평가하고, 정책 개입의 효과를 분석하는 데 유용한 방법이 될 수 있습니다.

4. 표본추출의 개념과 방법

표본추출(Sampling)은 모집단의 특성을 추론하기 위해 모집단의 일부를 선택하는 과정입니다. 표본은 모집단의 특성을 잘 반영해야 하며, 대표성이 중요한 기준이 됩니다.

• 의도적 표본추출(Purposive Sampling): 연구자의 판단에 따라 표본을 선정하는 비확률 표본추출 방법입니다. 정보 제공자를 활용하여 연구 대상 집단에 대한 다양한 시각을 얻을 수 있습니다.
• 확률 표본추출(Probability Sampling): 모집단의 모든 요소가 표본으로 선정될 확률이 있으며, 이 확률이 0이 아닙니다. 대표성이 높은 표본을 선정하는 데 효과적이며, 표본추출 오차를 추정할 수 있습니다.

5. 사회적기업 연구 경험: 확률표본추출의 도전

과거 사회적기업을 대상으로 한 연구에서는 전국 단위의 확률표본추출을 수행했습니다. 연구 주제는 "사회적기업의 취약계층 고용이 재무적 성과와 사회적 성과에 미치는 영향"이었습니다. 각 시도별로 분포율에 따라 표본을 선정하고 설문 조사를 진행했는데, 이는 매우 어려운 작업이었습니다.

일부 시도에서는 설문 회수가順조롭게 이루어졌지만, 다른 시도에서는 회수 자체가 어려웠습니다. 연구팀 내에서는 부산으로 한정하거나 예비사회적기업으로 확대하자는 의견이 나왔지만, 연구의 본래 목적에 맞춰 확률표본추출 방식을 유지하기로 결정했습니다.

설문 회수와 분석 과정을 거쳐 연구 결과를 도출했을 때, 확률표본추출의 중요성을 깊이 이해하게 되었습니다. 이는 연구의 신뢰성과 타당성을 확보하는 데 중요한 역할을 했습니다.

6. 단일사례 평가설계와 표본추출의 통합적 시사점

단일사례 평가설계와 표본추출은 연구 설계에서 중요한 두 축을 이룹니다. 단일사례 평가설계는 개별 사례의 변화를 심도 깊게 분석할 수 있는 반면, 표본추출은 모집단의 특성을 일반화할 수 있는 근거를 제공합니다.

이 두 가지 방법론을 통합적으로 활용하면, 개별 사례의 깊이 있는 분석과 함께 모집단 수준의 신뢰성 있는 결과를 도출할 수 있습니다. 이는 정책 평가, 사회적 개입 효과 분석, 지역사회 연구 등 다양한 분야에서 효과적으로 적용될 수 있습니다.

7. 결론

연구 설계에서 기초선의 중요성과 표본의 대표성은 결코 간과할 수 없는 요소입니다. 단일사례 평가설계를 통해 개별 사례의 변화를 정밀하게 분석하고, 확률표본추출을 통해 모집단의 특성을 신뢰성 있게 추론하는 방법론적 접근은 연구의 질을 높이는 데 필수적입니다.

과거의 연구 경험들은 이러한 방법론적 통찰을 얻게 한 소중한 배움의 과정이었습니다. 앞으로도 이러한 경험을 바탕으로 더 나은 연구 설계를 고민하고, 실증적 근거를 강화하는 연구를 지속적으로 수행해 나가야 할 것입니다.