경영연구 통계방법을 실용적으로 바꾸는 방안

초록

본 논문은 전형적인 경영학 연구 논문에 적용된 통계 기법을 비판하고, 결과 보고 방식의 불명료성, 영가설 검정의 근본적 한계, 그리고 통계적 접근 자체의 적용 가능성 문제를 제시한다. 저자는 효과 크기와 신뢰구간을 강조하며, 사례 연구 데이터를 재분석해 보다 직관적인 해석을 보여준다.

상세 분석

이 논문은 관리학 분야에서 흔히 사용되는 통계 절차를 면밀히 검토함으로써 세 가지 핵심 문제점을 도출한다. 첫째, 연구 결과가 p값과 유의수준만을 제시하는 방식은 독자에게 실제 의미를 전달하기 어렵다. p값은 ‘우연히 관측된 결과가 나타날 확률’일 뿐이며, 효과의 크기나 실질적 중요성을 반영하지 않는다. 따라서 효과 크기(예: Cohen’s d, η²)와 그에 대한 신뢰구간을 함께 보고하면, 결과의 실용적 의미를 보다 명확히 전달할 수 있다.

둘째, 영가설 검정(paradigm) 자체가 과도하게 이분법적 사고를 조장한다는 점이다. 영가설을 ‘기각’하거나 ‘채택’하는 것이 연구의 목표가 아니라, 실제 현상에 대한 추정과 그 불확실성을 정량화하는 것이 핵심이다. 저자는 사례 논문의 데이터를 재분석하면서, 영가설 검정 대신 효과 크기와 95 % 신뢰구간을 제시함으로써 보다 풍부한 해석을 제공한다. 이는 연구자가 가설을 ‘증명’하려는 것이 아니라, 가설이 얼마나 타당한지를 ‘평가’하는 방향으로 전환을 촉구한다.

셋째, 통계적 접근이 모든 연구 상황에 적합한 것은 아니라는 점이다. 효과가 매우 작거나 표본이 제한적인 경우, 통계적 유의성을 확보하기 위해 과도한 표본 확대가 필요할 수 있다. 이는 실무적 적용 가능성을 저해한다. 또한, 연구 결과를 다른 조직·문화·시점에 일반화하는 데는 큰 제약이 있다. 저자는 이러한 맥락적 한계를 인정하고, 통계적 결과를 해석할 때 ‘맥락적 타당성’과 ‘실제적 의미’를 함께 고려해야 함을 강조한다.

결론적으로, 논문은 통계 결과를 보다 사용자 친화적으로 제시하고, 영가설 검정의 의존도를 낮추며, 연구 설계 단계에서 효과 크기와 일반화 가능성을 사전에 검토할 것을 권고한다. 이는 관리학뿐 아니라 사회과학 전반에 걸친 연구 품질 향상에 기여할 수 있다.