[TIL]새빨간 거짓말, 통계 - 통계의 속임수를 피하는 다섯 가지 열쇠

오늘 TIL 3줄 요약 

• 거짓 통계를 어떻게 간파하여 내동댕이칠 수 있는가는 매우 중요한 일인데, 수많은 사기와 협잡 속에서 올바르고 건전한 데이터를 어떻게 식별해 내는가에 관한 것이다.
• 누가 발표했는가? 출처를 캐보고 어떤 방법으로 알게 되었는지 조사 방법에 주의해야 한다. 
• 빠진 데이터는 없는지 숨겨진 자료를 찾아보아야 하고 내용이 뒤바뀐 것은 아닐지 쟁점 바꿔치기에 주의해야 한다. 또한 상식적으로 말이 되는 이야기인가 살펴봐야 한다. 

TIL (Today I Learned) 날짜

2023.04.28

 

오늘 읽은 범위 

10장. 통계의 속임수를 피하는 다섯 가지 열쇠

 

책에서 기억하고 싶은 내용 

• 거짓 통계를 어떻게 간파하여 내동댕이칠 수 있는가는 매우 중요한 일인데, 수많은 사기와 협잡 속에서 올바르고 건전한 데이터를 어떻게 식별해 내는가에 관한 것이다.
• 첫 번째 - 누가 발표했는가? 출처를 캐 봐야 한다. 무엇보다도 가장 먼저 주의하여야 할 것은 왜곡된 통계를 찾아내는 일이다. 예를 들어, 어떤 실험실에서 무엇인가를 검증하였다면, 자신이 주장하는 이론의 완벽성을 과시하기 위해서인지, 또는 명예를 위해서인지 또는 돈을 목적으로 하는 것인지 알아볼 필요가 있다. 권위 있는 이름이 인용되어 있을 때는 그 권위자가 그 이야기와 관련되어 있을 뿐만 아니라 그 사실을 지지하고 있는지도 확인하여 볼 필요가 있다.
• 두 번째 - 어떤 방법으로 알게 되었는지 조사 방법에 주의해야 한다. 표본이 왜곡된 것인지, 신뢰할 만한 결론을 얻기에 충분히 큰가의 여부도 따질 필요가 있으며 상관관계에 대해서도 정말 의미 있는 것으로 결론지을 만큼 표본의 크기가 큰지, 그리고 또 어떤 유의한 결론을 내릴 만큼 충분히 많은 사례가 있었는지를 물어 보아야 한다.
• 세 번째 - 빠진 데이터는 없는지 숨겨진 자료를 찾아보아야 한다. 표본의 크기가 빠져 있다면, 특히 그 출처가 중요한 관심사라면, 그 통계나 조사 전체에 대하여 의심해 볼 필요가 있다. 지수를 알고 있다 하더라도 그 지수 외에 무엇이 생략되어 있는가를 찾아봐야 한다. 아마 지수를 계산할 때의 기준이 빠져 있을 가능성이 많은데, 무엇을 기준으로 정하느냐에 따라 왜곡된 통계 숫자를 만들어 낼 수 있기 때문이다.
• 네 번째 - 내용이 뒤바뀐 것은 아닐지 쟁점 바꿔치기에 주의해야 한다. 통계를 분석할 때는 그 기초가 된 데이터와 결론 사이에 어떤 바꿔치기가 있었는지 주의해야 한다. 전혀 다른 것으로 둔갑하여 발표되는 경우가 많기 때문이다.
• 다섯 번째 - 상식적으로 말이 되는 이야기인가 살펴 봐야 한다. 석연치 않은 부분은 조사해라. 증명되지도 않은 가정을 토대로 장황하게 이야기가 전개될 때 '상식적으로 말이 되는 이야기인가?'와 같은 질문은 통계 숫자를 과대평가하지 않고 제대로 파악할 수 있게 해주는 역할을 한다.

 

떠오르는 생각 

거짓 통계를 파악하는 다섯 가지 방법에 대한 설명은 매우 흥미로웠다. 특히, 널리 알려진 권위 있는 사람들의 글에서도 목적을 파악하는 것이 중요하다는 점이 인상 깊었다. 빠진 데이터가 없는지 확인하고 왜곡된 정보가 없는지 살펴보는 것, 또한 증명되지 않은 가정에 의존하는 이야기에 대해 의심을 가져보는 것도 중요하다. 이 책을 통해 다양한 통계의 왜곡에 대해 살펴볼 수 있었으며, 데이터와 통계에 관심 있는 사람들에게 한 번 쯤 읽어볼만한책으로 추천하고 싶다.