11.측정도구의 신뢰도와 타당도에 관한 설명으로 옳지 않은 것은?

① 타당도는 측정하려고 의도된 개념을 얼마나 정확하게 측정하는가를 나타내는 것이다.

정답: X

타당도의 정의가 맞다. 「재려던 것을 제대로 재고 있는가」이며, 「몇 번 재도 같게 나오는가」인 신뢰도와 묻는 것이 다르다. 과녁에 빗대면 타당도는 한가운데를 맞혔는가, 신뢰도는 한 곳에 모였는가다.

② 측정도구의 신뢰도가 높아지면 타당도도 높아진다.

정답: O

방향이 한쪽으로만 성립한다. 늘 2.5kg 더 나오는 체중계는 몇 번 재도 같은 값이 나오므로 신뢰도는 높지만 참값을 재지 못하므로 타당도는 낮다 — 신뢰도가 높아도 타당도는 낮을 수 있다. 반대로 타당도가 높으면 신뢰도는 반드시 높다는 방향만 성립한다.

③ 검사-재검사 방법은 신뢰도를 측정하는 방법이다.

정답: X

검사-재검사는 같은 도구로 시차를 두고 두 번 재어 그 결과가 얼마나 일치하는지 보는 방법이다. 다만 간격이 짧으면 앞의 답을 기억해 버리고 길면 대상 자체가 달라진다는 어려움이 있다.

④ 다른 조건이 동일하다면, 동일 개념에 대한 측정도구의 문항 수가 많아질수록 신뢰도는 높아지는 경향이 있다.

정답: X

문항이 많아지면 한 문항의 우연한 흔들림이 전체에서 차지하는 몫이 줄어 신뢰도가 올라간다. 다만 지나치게 늘리면 응답자가 지쳐 오히려 나빠진다.

⑤ 요인분석법은 타당도를 측정하는 방법이다.

정답: X

요인분석은 문항들이 몇 개의 묶음으로 갈리는지 보아 구성타당도를 재는 방법이다. 이론이 말하는 구조대로 문항이 묶이면 그 도구가 재려던 개념 구조를 담고 있다고 본다.