HR은 짧은 동영상 형식으로 게시한 채용 공고에 지원서가 현저히 더 많이 접수되는 것을 발견하고, 채용 담당자는 모든 채용 공고를 짧은 동영상 형식으로 전환할 것을 제안했습니다. '짧은 동영상 자체가 지원을 더 유치한다'는 주장을 검증하려면, 다음 단계로 가장 적절한 것은?

정답: A

• A유사한 직무를 가진 두 부서를 선정하여, 한 부서는 기존의 문서 형식을 유지하고 다른 부서는 짧은 동영상 형식으로 전환하며, 나머지 조건은 동일하게 유지한 후 지원서 수를 비교한다.✓ 정답: 이는 해당 요인만 소규모로 변경하고 대조군을 설정하며 다른 조건을 고정하는 방법으로, 게시 형식만 다르고 지원서 수에 차이가 발생한다면 인과 관계를 뒷받침할 수 있다.
• B지난 1년간 모든 채용 공고의 지원 데이터를 수집하고, 급여, 근무지 등의 요인을 통제한 모델을 사용하여 효과를 추정한다.✗ 오답: 통계적 통제가 실제 개입을 대체할 수 있다고 가정하는 오류가 있다. 과거 데이터에는 관찰되지 않은 차이(직무 매력도, 팀 평판 등)가 형식 선택과 지원 건수에 동시에 영향을 미칠 수 있으며, 추정된 결과는 여전히 상관관계에 불과하다.
• C먼저 짧은 동영상 형식의 채용 공고를 통해 지원한 후보자들을 개별 인터뷰하여, 지원을 선택한 실제 이유를 파악한다.✗ 오답: 주관적 피드백 수집을 인과 관계 검증으로 착각하는 오류가 있다. 인터뷰는 단서만 제공할 뿐이며, 표본이 이미 지원한 사람들로만 구성되어 있어 '이 요인을 변경하면 결과가 달라지는지'에 대한 답을 줄 수 없다.
• D모든 채용 공고를 짧은 동영상 형식으로 전환하여 3개월간 시범 운영한 후, 총 지원서 수가 현저히 증가하는지 관찰한다.✗ 오답: 변경 사항에 대조군이 없다는 오류가 있다. 3개월 동안 시장 상황, 채용 공고 수 등의 조건이 동시에 변할 수 있으며, 지원서 수가 증가하더라도 이를 게시 형식 자체에 귀인할 수 없다.