16.정책평가와 관련하여 실험결과의 외적 타당성을 저해하는 요인으로 옳지 않은 것은?

① 연구자의 측정기준이나 측정도구가 변화되는 경우

정답: X

※ 외적 타당성: 실험 결과를 다른 상황·집단에 일반화할 수 있는 정도. 내적 타당성: 원인(정책)과 결과(효과) 간 인과관계의 정확성. 측정기준·측정도구의 변화(도구효과)는 내적 타당성을 저해하는 요인이다. 외적 타당성 저해 요인이 아니다.

② 표본으로 선택된 집단의 대표성이 약할 경우

정답: O

※ 외적 타당성: 실험 결과를 다른 상황·집단에 일반화할 수 있는 정도. 내적 타당성: 원인(정책)과 결과(효과) 간 인과관계의 정확성. 표본 대표성이 약하면 다른 집단·상황에 일반화하기 어려우므로 외적 타당성을 저해한다.

③ 실험집단 구성원 자신이 실험대상임을 인지하고 평소와 다른 특별한 반응을 보일 경우

정답: O

※ 외적 타당성: 실험 결과를 다른 상황·집단에 일반화할 수 있는 정도. 내적 타당성: 원인(정책)과 결과(효과) 간 인과관계의 정확성. 실험대상임을 인지한 특별한 반응(호손 효과·반응효과)은 외적 타당성을 저해한다.

④ 실험의 효과가 크게 나타날 것으로 예상되는 집단만을 의도적으로 실험집단에 배정하는 경우

정답: O

※ 외적 타당성: 실험 결과를 다른 상황·집단에 일반화할 수 있는 정도. 내적 타당성: 원인(정책)과 결과(효과) 간 인과관계의 정확성. 특정 집단만 의도적으로 실험집단에 배정하면 결과의 일반화가 어렵다(외적 타당성 저해).