전실험설계와 요인설계

전실험설계(원시실험설계)는 무작위 배정도 통제집단도 갖추지 못했거나 하나만 갖춘 설계로, 인과를 말하는 힘이 가장 약하다. 그럼에도 현장에서 자주 쓰이므로 무엇을 말할 수 있고 무엇을 말할 수 없는지 아는 것이 중요하다. 일회검사 사례연구(단일집단 사후검사 설계)는 개입한 뒤 한 번 재는 것이 전부다. 견줄 것이 아무것도 없어 개입 때문인지조차 말할 수 없고, 사실상 실태를 적어 두는 기록에 가깝다. 단일집단 사전사후검사 설계는 한 집단을 개입 전후로 재어 견준다. 변화가 있었다는 것은 알 수 있으나 외부사건·성숙·검사·도구·통계적 회귀가 모두 살아 있어 그 변화의 원인을 가릴 수 없다. 현장 평가에서 가장 흔히 쓰이는 형태이기도 하다. 정태적 집단비교(비동일 집단 사후검사 설계)는 개입집단과 비교집단을 사후에만 재어 견준다. 비교집단은 있으나 무작위 배정도 사전검사도 없어, 두 집단이 애초에 달랐을 가능성을 배제할 수 없다. 요인설계는 성격이 다르다. 독립변수를 둘 이상 동시에 두고 각 조합을 만들어, 각 변수의 효과인 주효과와 두 변수가 함께 작용해 생기는 상호작용효과를 함께 본다. 개인상담 유무와 집단프로그램 유무를 교차하면 네 조합이 생기고, 어느 하나만 할 때보다 둘을 함께 할 때 더 큰 효과가 나는지를 확인할 수 있다. 여러 변수를 한 연구에서 다룰 수 있어 효율적이지만 조합이 늘수록 필요한 표본이 급격히 커진다. 요인설계는 앞의 셋과 층이 다르다는 점을 짚어 둘 만하다. 전실험설계는 비교가 모자라 인과를 못 말하는 설계들이고, 요인설계는 독립변수를 여럿 두는 짜임을 가리키는 말이어서 무작위 배정을 붙이면 순수실험이 되고 붙이지 않으면 유사실험이 된다. 곧 요인설계는 설계의 강약을 나타내는 이름이 아니라 변수를 몇 축으로 볼 것인가를 나타내는 이름이다.

전실험설계는 견줄 것이 모자란 설계들이다. 개입 뒤에만 재면 무엇과 견줄지가 없고, 한 집단만 앞뒤로 재면 시간과 견주는 셈이며, 두 집단을 뒤에만 재면 애초에 같았는지 알 수 없다. 반면 요인설계는 견주는 축을 오히려 늘린 설계다. 하나씩 따로 시험하는 대신 둘을 겹쳐 보면서, 각각의 몫과 함께 썼을 때 생기는 몫을 갈라 보려는 것이다.