통계 속 숫자의 거짓말

통계 속 숫자의 거짓말 - 정부와 여당, 기업, 정치가는 통계로 우리를 어떻게 속이고 있는가?
게르트 보스바흐 & 옌스 위르겐 코르프 지음, 강희진 옮김 / Gbrain(지브레인) / 2012년 2월

통계 속 숫자의 거짓말

게르트 보스바흐 · 엔스 위르겐 코르프 공저

작은책방

각종 공공기관이나 광고를 통해 수많은 통계와 접하게 되는 현실을 다시 살펴보면, 여러 방법으로 잘못된 정보를 제공하고 있다는 사실을 인식해야 한다고 주장한다. 모든 상황은 음이 있으면, 양이 있고, 장점이 있으면 단점이 있게 마련인데, 필요에 의해 장점만을 내세우고 단점은 감춘다든지(음양이론), 그림이나 그래픽을 제공할 때, 한 두가지 요소를 감추거나 바꿔주면, 받아들이는 사람에게 전혀 다른 시각으로 파악하도록 유도한다던지(그래픽의 거짓말), 원인과 결과를 절대적 수치와 상대적 수치의 차이를 제대로 설명하지 않고, 한 가지에게 포커스를 맞춰 설명한다든지, 백분율이 정확한 것 같지만, 기준을 어떻게 설정하느냐에 따라 전혀 다른 결과를 낳는다는 것을 숨긴다든지, 표본 추출 방식에 따른 오류를 밝히지 않고 일부의 상황을 마치 전체에 해당되는 상황인 것 처럼 둔갑시킨다든지, 선거 결과를 예측하는 과정에서도 편할 대로 조사하고 발표하는 거짓을 자행하기도 한다. 또한 장기적 예측 자체가 불가능 한 일인데도 적중률과 예측 기관의 상관관계를 무시하고 정확한 예측인 것처럼 과장하기도 한다.

숫자를 통한 통계자료를 제시하면 마치 상당히 정확한 자료를 바탕으로 결과를 낳은 것처럼 착각하게 되는데, 실제로는 현실과 동떨어진 말장난(?) 또는 숫자장난(?)일 뿐일 수도 있다.

요소 하나를 옮겨 놓음으로써, 전혀 다른 결과를 만들어내는 '윌-로저스 현상'을 그 예로 들 수도 있고.

통계를 계산한 기간을 늘리거나 줄이는 방법으로 거짓말을 할 수도 있고, 평균값이 아닌 것을 평균값인 것처럼 속일 수도 있으며, 상황자체를 조작하여 그 결과물을 속일 수도 있다(이산화탄소 배출량을 검사하는 경우나 자동차의 연비를 측정할 경우), 순위를 매기는 과정에서 발생하는 오류에 대해서는 모두 함구하고 마치 진정한 순위인 것처럼 오도하는 경우도 비일비재하다. 또한 '토이로' 논쟁으로 표현되는 체감 통계에 대해서도 설명하고 있다.

특이한 것은 인구수를 조사하는 경우에도 그 조사 목적이 무엇이냐에 따라서 전혀 다른 결과를 낳기도 한다. 즉, 단속을 목적으로 한 인구조사의 경우에는 실제 인구보다 훨씬 낮은 수치로 조사되고, 구호 물자를 배포하는 것이 그 목적인 경우는 실제 인구보다 훨씬 더 부풀려 진 수치를 조사하게 된다는 것이다.

또한 표본 집단이 누구냐에 따라 글 결과는 전혀 달라질 수 있다는 것이다. 따라서 통계자료를 조사할 목적에 따라 그 표본 집단 선정 방법도 차이를 두기 마련이다. 흔히 통계자료를 통한 조사가 상당히 정확하다고 착각하고 있지만, 이는 숫자를 통한 놀음에 불과하다는 생각이 든다. 12장부터는 앞으로의 미래를 대비하는 통계자료에 대한 허상에 대해 설명하고 있는데,

추세외삽법 : 실험치가 아닌 값을 그래프에서 추정하는 방법중하나입니다. 그래프의 변화를 하나의 추세(직선이나 곡선)으로 표현한후에, 실험하지 않은 다른 경우들의 값을 추정하는 것이다.
윌-로저스현상 : “오클라호마 출신 농부들이 일자리를 찾아 캘리포니아로 이주하는 바람에 오클라호마와 캘리포니아 주민 모두의 평균 지능지수가 높아졌다”는 영화배우가 한 말.

심슨의 역설 : 변수를 제대로 관리하지 못해 실제 관계와 상반된 관계가 나타나는 현상을‘심슨의 역설(Simpson's Paradox)'라고 한다.

등등에 대해서는 공부를 좀 더 할 필요가 있겠다.

앞으로는 통계자료를 대할 때, 무조건 신뢰하고 아하! 그렇구나 할 일이 아니라, 어떤 오류를 내재하고 있는 지 다시한 번 의심하고 되짚어볼 필요가 있다고 하겠다.

이 책에서 제시하는

통계를 대하는 15가지 원칙

1. 성급한 판단을 지양하고 침착한 태도를 유지한다.

2. 기존 자료들을 입수하여 현 상황과 비교한다.

3. 근거 자료를 요청한다.

4. 실제로 파악 가능한 수치들인지 검토해본다.

5. 예측의 정확도를 가늠해본다.

6. 어림잡아 계산해본다.

7. 개념의 정의를 따져본다.

8. 중요한 결정일 때에는 더욱 신중을 기한다.

9. 자료의 출처를 확인해본다.

10. 그래프의 x축과 y축, '착시효과' 등에 유의한다.

11. 그래프 뒤에 숨은 근거 자료들을 요청하고 검토한다.

12. 독창적인 아이디어를 동원한다.

13. 직접 검산해본다!

14. 용기내어 결단을 내린다.

15. 다섯 가지 '입버릇'에서 벗어나야 한다.

이 사항에 대해서는 숙지하면 좋겠다.

2012.3.15. 통계를 공부하고 난 두뽀사리~