타당성과 신뢰성(이훈영, 2015, pp. 304-323)

이훈영(2015). 이훈영교수의 연구조사방법론 제 2판, 청람출판사, pp, 304-323

 

타당성이란 인과관계연구 분석을 통해 도출된 실험결과가 실험설계의 목적에 얼마나 정확하게 부합하느냐를 나타내는 척도.

1. 내적 타당성 : 실험이 실험변수의 효과를 정확하게 측정할 수 있도록 설계되어 외생변수의 통제가 얼마나 잘 이루어졌는가.

1. 내용 타당성 : 측정을 위해 개발한 도구가 측정하고자 하는 대상의 정확한 속성값을 얼마나 포괄적으로 포함하고 있는가.
2. 기준에 의한 타당성 : 특정한 평가기준에 의한 측정의 효과성을 제시, 에측타당성.
3. 개념 타당성 : 내용, 기준 타당성으로 설명하기 어려운 감정과 같은 추상적인 개념이나 속성을 측정도구가 얼마나 적절하게 측정하였는가.

-이해타당성 : 특정한 개념을 어떻게 이해하고 있는가.

-집중타당성 : 동일한 개념을 서로 상이한 측정방법으로 측정한 결과값들 사이에 높은 상관관계가 있어야함.

-판별타당성:서로 상이한 개념을 동일한 측정방법으로 측정할 경우 결과값들 간에 상관관계가 낮아야함.

 

1. 외적 타당성 : 실험결과를 실험실 밖에서 실제 상황에서 어느 정도까지 확대 적용할 수 있는가를 나타내는 지표.
2. 내적 타당성과 외적 타당성의 트레이드 오프 관계. 상황에 맞게 조정하여 실험 설계 필요함.

 

신뢰성이란 측정하고자 하는 현상이나 대상을 얼마나 일관성있게 측정하였는가. 안정성, 일관성, 예측가능성, 정확성.

1. 신뢰성 정의하는 방법 : 여러 번 반복해서 측정한 조사결과나 실험결과 들이 얼마나 일치하는가 일치성 정도 판단. 하나의 측정도구나 방법을 이용하여 얻은 측정치가 측정하고자 하는 개념이나 속성을 충분히 잘 대변할 수 있는 진실된 측정치인지 판단. 측정한 결과로 얻은 값들의 오차범위로 신뢰성 파악.
2. 신뢰값의 분산 : 총분산 중에 실제값들의 분산을 나타내는 진분산 차지하는 비중.
3. 신뢰성 측정방법 - 재검사법(동일한 측정대상에 대해 동일한 측정도구나 방법 사용, 일정한 사용간격을 두고 반복적으로 측정하여 그 값을 비교분석), 반분법(측정도구를 2개의 임의의 집단으로 나눔다음, 측정결과가 집단별로 얼마나 다른지 비교하여 측정도구나 방법 신뢰도 분석), 내적일관성(동일한 개념을 측정하기 위해 여러 개의 항목을 이용, 크론바하 알파, 0.6~0.- 계수 신뢰도 높다고 판단)

 

오차

-체계적 오차 : 타당성과 관련. 어느 대상을 측정하여도 항상 동일한 크기와 방향으로 발생하는 오차. 체중계의 바늘 고장.

-비체계적 오차 : 신뢰성과 관련된 개념. 측정자의 컨디션, 감정의 변동, 측정자의 능력의 차이에서 생기는 오차. 사수의 능력이 낮으면 원점이 맞는 총인지 신뢰성이 떨어짐.