여론조사는 얼마나 정확한 것일까? 뉴스타파는 2014년 지방선거부터 2016년 총선까지 국내 여론조사기관들이 내놓은 선거 예측이 얼마나 정확했는지 분석했다. 그 결과 조사오차가 평균 9.6%p에 이르렀고 전체 중 36%의 조사는 당선을 맞추지 못하는 수준이었다.

여론조사 얼마나 정확하게 예측했나?

여론조사기관 ‘예측정확성’ 분석(수정오차 기준)

순위	조사기관명	조사 건수	당선자예측 성공률	단순 오차	수정 오차
1	한국CNR/케이엠조사연구소	7	71%	5.12	-6.61
2	현대리서치연구소	9	67%	3.94	-5.02
3	케이엠조사연구소	38	66%	5.85	-3.51
4	순천투데이(전남리서치연구소)	5	80%	6.10	-3.45
5	에이스리서치	10	70%	5.20	-2.85
6	폴스미스	14	79%	6.91	-2.59
7	중앙일보 조사연구팀/엠브레인	25	72%	8.84	-2.15
8	아이디인큐(오픈서베이)	9	33%	5.75	-1.82
9	한길리서치센타	75	65%	7.73	-1.70
10	한국CNR	11	73%	8.81	-1.69
11	큐리서치	5	60%	6.69	-1.69
12	한국리서치	60	65%	7.86	-1.52
13	마크로밀엠브레인	101	67%	8.46	-1.40
14	TNS KOREA	37	68%	8.13	-0.89
15	모노리서치	51	73%	8.69	-0.67
16	강원도민일보 부설 강원사회조사연구소	5	80%	7.94	-0.63
17	밀워드브라운미디어리서치	97	72%	8.80	-0.62
18	포커스컴퍼니	27	56%	9.27	-0.57
19	리서치앤리서치	126	58%	9.07	-0.23
20	중앙일보 조사연구팀	41	61%	9.42	0.15
21	조원씨앤아이	36	75%	9.73	0.18
22	유앤미리서치	18	67%	9.96	0.18
23	리얼미터	296	60%	9.77	0.19
24	휴먼리서치	13	62%	9.89	0.31
25	메트릭스코퍼레이션	8	50%	8.23	0.32
26	코리아리서치센터	130	62%	10.53	0.48
27	여민리서치컨설팅	20	50%	11.07	0.93
28	한국갤럽조사연구소	51	71%	10.65	1.05
29	비전코리아	5	60%	10.34	1.26
30	리서치플러스	31	61%	10.26	1.54
31	한국인텔리서치	11	73%	11.06	1.67
32	충청한길리서치	10	70%	12.08	1.82
33	대구한길리서치	7	71%	11.12	1.94
34	리서치뷰	21	62%	11.47	2.40
35	케이에스리서치	5	40%	11.42	2.86
36	폴리컴	5	80%	14.56	3.45
37	윈스리서치	19	68%	13.35	3.69
38	윈폴(WINPOLL)	15	53%	15.50	5.39
39	한백리서치연구소	6	33%	14.42	5.85
40	경기동부신문	5	60%	16.35	6.18
41	한국사회여론연구소(KSOI)	18	56%	17.31	6.68
42	좋은날리서치	5	100%	19.19	8.98
총합계		1,557	64%	9.55	0.00

▲ 분석대상과 기간: 2014년 지방선거 ~ 2016년 총선 사이 선거 예측조사

전체 분석대상 여론조사 1,557건의 단순오차는 평균 9.55%p로 나타났다. 즉, 여론조사들이 선거에서 1위와 2위 후보의 득표율 차이를 평균 9.55%p 잘못 예측한 것이다. 선거별로 단순오차를 보면 2014년 지방선거는 8.5%p, 2016년 총선은 10.6%p였다. 선거구가 작아질 수록 오차는 더 커지는 것으로 나타났다.

선거유형	조사 건수	단순오차
광역단체장	239	7.89
교육감	145	8.35
기초단체장	336	9.08
국회의원	837	10.41
총합계	1,557	9.55

1,557건의 여론조사 중 당선자 예측에 성공한 조사는 996건으로 예측 성공률은 64%였다. 36%인 561건은 당선자를 예측하는 데 실패했다. 당선자 예측에 실패한 조사의 단순오차는 평균 13.65%p로 나타났는데, 이는 당선자를 예측한 조사의 단순오차인 7.23%p보다 두 배 가까이 높은 수치다.

당선자 예측 여부	조사 건수	단순오차
성공	996	7.23
실패	561	13.65
총합계	1,557	9.55

단순오차를 기준으로 여론조사기관을 평가하는 데는 한계가 있다. 조사기관의 책임으로 볼 수 없는 요인들이 오차를 초래했을 수 있기 때문이다. 뉴스타파는 회귀분석을 통해 조사시점, 표본크기, 선거유형이 미치는 영향을 통제한 뒤 새로운 오차, 즉 수정오차를 계산했다. 수정된 오차를 기준으로 여론조사기관의 예측정확성 순위를 평가한 결과 메이저 여론조사기관이 중위권에 머물러서 회사규모가 크거나 전통이 있다고 더 정확한 것은 아닌 것으로 나타났다. 조사 건수가 296건으로 가장 많았던 리얼미터의 예측정확성 순위는 중위권인 23위였다. 오랜 전통을 가진 한국갤럽은 이보다 낮은 28위였다. 2015년 기준 리서치업계 매출액 1위인 칸타코리아의 전신인 TNS코리아와 미디어리서치는 각각 14위와 17위로 나타났다. 매출액 2위 한국리서치는 이보다 조금 높은 12위였다.

예측정확성 순위와 조사방법 사이의 관계도 살펴봤다. 유선전화 표집 여부와 자동응답시스템(ARS) 사용 여부에 따라 조사기관을 네 그룹으로 나눴다. 대부분의 조사를 유선전화를 대상으로 ARS만을 써서 조사하는 회사는 13곳이었는데, 예측정확도 순위가 가장 낮은 기관 10곳 중 6곳이 이 그룹에 속했다. 한편, 무선전화를 혼합해서 조사하는 비중이 상대적으로 높고, 전화면접 비중이 높은 회사는 18곳이었다. 예측이 가장 정확한 회사 10곳 중 6곳이 이 그룹에 속했다.

어떻게 분석했나?

1.오차란?

선거 여론조사가 실제 선거 결과를 얼마나 정확하게 예측했는지는 예측값과 참값의 차이로 평가할 수 있다. 여기서 예측값은 조사기관이 내놓은 지지율이 되고 참값은 실제 투표에서 얻은 득표율이 된다.

조사오차 = 예측값(여론조사 지지율) – 참값(선거 득표율)

2. 데이터 수집

지지율, 즉 여론조사기관들의 선거예측 데이터는 중앙선거여론조사심의위원회(여심위) 홈페이지에서 수집했다. 2014년 3월 여론조사 결과 등록 제도가 시행된 이후 2017년 4월 16일 현재까지 여심위 홈페이지에 등록된 조사건수는 3,396개였다. 이 가운데 선거일로부터 4주 이내에 조사된 여론조사는 모두 1,557건이었다. 여심위 홈페이지의 첨부파일을 열어 일일이 확인하는 수작업을 거쳤다. 득표율, 즉 실제 투표에서 각 후보가 얻은 득표율 데이터는 중앙선거관리위원회가 관리하는 선거통계시스템에서 가져왔다.

선거명	조사 건수
제6회 전국동시지방선거	705
2014년 상반기 재·보궐선거	54
2015년 상반기 재·보궐선거	26
제20대 국회의원선거	757
2016년 재·보궐선거	15
총합계	1,557

3. 단순오차

개별 후보들의 지지율과 득표율을 바로 비교하기는 어렵다. 여론조사에서는 ‘지지후보가 없다’는 등의 무응답이 있지만 실제 투표에서는 없기 때문이다. 이같은 문제를 해결하기 위해 학계에서는 후보간 지지율의 차이를 예측값으로, 같은 후보간의 득표율 차이를 참값으로 보고 그 차이를 계산해 여론조사의 정확성을 평가하는 경향이 있다. 뉴스타파는 선거에서 당선자와 2위 후보의 득표율 차이와 같은 후보들의 여론조사에서의 지지율 차이를 비교해 오차를 계산했다.

단순오차 = (선거 1, 2위 후보간 득표율 차이) – (여론조사 동일 후보 지지율 차이)

4. 수정오차

단순오차를 기준으로 여론조사기관을 평가하는 데는 한계가 있다. 여론조사기관의 책임으로 볼 수 없는 요인들이 오차를 초래했을 수 있기 때문이다. 대표적으로 고려되는 요인이 바로 조사가 이뤄진 시점이다. 선거일에 가까운 조사일수록 더 정확할 가능성이 높다. 또 선거 유형과 표본크기도 오차에 영향을 미치는 요인으로 알려져 있지만 조사기관의 책임으로 볼 수 없는 요인들이었다. 뉴스타파는 이 세 가지 요인이 오차에 미치는 영향을 통제하기 위해 회귀분석을 수행하고, 각 조사별로 잔차 값을 계산하는 방식으로 ‘수정오차’를 계산했다.

회귀분석의 종속변인으로는 ‘단순오차’, 독립변인으로는 조사일과 선거일 사이의 거리, 표본크기, 선거 유형이 사용됐다. 미국의 여론조사전문매체인 파이브서티에이트(FiveThirtyEight)이 적용해 공신력을 인정받은 방식이다. 조사업계와 학계에서 사용되는 다른 지표들과 비교한 결과 타당성에 문제가 없다고 판단했다.

※분석 결과에 이견이 있거나 개선사항을 제안하고 싶은 경우, 최문호([email protected]) / 김강민([email protected])에게 연락바랍니다.

---

취재: 최문호, 김강민, 최윤원, 연다혜
촬영: 김남범, 최형석
편집: 이선영
자료 입력: 김현우, 이수련

UPI, 한국 사드 반대 시위 경찰과 마찰 보도 -사드 부지 출입 감시하는 주민과 저지하려는 경찰 사이 충돌 -러시아, 사드 감시 공격용 모두 가능하다며 사드 반대 UPI는 15일 성주 소성리 사드배치 현장에서 주민과 종교단체, 활동가들과 경찰 사이에 마찰이 있었음을 연합뉴스를 인용해 보도했다. 기사는 주민과 활동가들이 사드 부지로 출입하는 차량을 감시하는 목적으로 마련한 야외 파라솔과 책상 등이 ...

The post UPI, 한국 사드 반대 시위 경찰과 마찰 보도 appeared first on TheNewsPro.

아마도 일부 한국 외교관들은 문재인 대통령이 트럼프 미국 대통령과 즐거운 회담을 한 것에 대해 자축하고 있을 것이다. 분명히 이번 회담에서 양국 정상은 한미 동맹의 중요성을 확인했고 북한의 위협에 대처하기 위해 양국이 긴밀히 협력하고 있다고 주장했다.

이번 정상 회담이 심각한 지정학적 갈등으로 이어졌던 트럼프 대통령과 안겔라 메르켈 독일 총리와의 회담에 비해 훨씬 더 순조롭게 진행된 것은 사실이다.

 

이번 정상회담의 성적표는 비교적 좋은 편이다. 문제는 트럼프 대통령 쪽이다. 그는 지금 사상 최악의 대통령으로 평가받고 있고, 시민사회에서 탄핵 움직임이 있다. (사진 출처: 연합뉴스)

그러나 한국이 긴밀한 관계를 유지하기 원하는 지도자가 트럼프 대통령인가라는 어려운 질문을 하는 이는 아무도 없다.

이번 정상회담에서 말하지 않았던 이슈들

분명 필자의 미국인 친구들 중 대부분은 트럼프를 최악의 미국 대통령으로 생각하고 있다.

또한 저명한 미국의 오피니언 리더 중 상당수가 기후변화의 존재 부인, 과학에 대한 비난, 공교육의 파괴 개시, 인종 차별적 이민 정책의 명시적 추진, 트위터를 통한 구조적인 법치주의 훼손, 중국,이란, 북한 및 러시아에 대한 전쟁 요구 및 행정 명령 등을 일삼는 트럼프 대통령과 어떠한 협력 관계도 맺지 않을 것이라고 선언한 바 있다.

문 대통령은 만약 도날드 트럼프가 한국 대통령이었다면 부정 부패로 인해 사임을 요구하는 촛불 집회가 일어났을 것이라는 점을 분명히 알고 있다.

그렇다면 문 대통령은 생각하고 있는 것은 정확히 무엇인가?

필자는 어떤 수준의 정치적 마법을 사용한다 해도 북한에 대한 경제 제재를 강화하고 잠재적으로는 중국으로도 이를 확장하려는 트럼프의 정책이 평양 정권과의 협력을 추구하는 문 대통령의 계획과 조화를 이루지 못할 것으로 우려하고 있다.

피할 수 없는 이견을 회피하려 하다가는 향후 문제를 더욱 심각하게 만들 수 있다.

“나쁜 소식을 전하려면 한번에 모두 전하라”는 마키아벨리의 말처럼 문 대통령은 논리적이고 정중한 방식으로 트럼프 대통령과는 다른 자신의 관점을 조기에 명백하게 전달해야 할 의무가 있다.

 

지난 7월 2일, 미국 텍사스주 오스틴에서 트럼프 탄핵을 요구하는 시위가 벌어졌다. (사진 출처: http://www.timesofisrael.com)

필자는 문 대통령이 분명한 진보적 시각을 갖고 있지만 공공 부문의 민영화 및 군국주의의 증가를 주장하는 강력한 세력에 의해 영향을 받았던 오바마 전 미국 대통령과 같은 길을 가고 있는 것이 아닌가 우려하고 있다.

트럼프 대통령 주변의 반동 세력들과 거리를 두는 것을 꺼린다면 문 대통령의 전략적 한계선(레드라인)은 어디에 있는가? 문 대통령은 어느 시점에서 트럼프 행정부의 국방 정책이나 경제 정책이 한국의 이익에 부합하지 않는다고 말할 것인가?

문 대통령은 이번 방문 기간 동안 많은 미국인들이 기후변화가 전세계에 미치는 영향에 대해 깊이 우려하고 있으며 몇 달 전 문 대통령의 지지자들이 그랬던 것처럼 거리에서 시위를 하고 있음에도 불구하고 이를 전혀 언급하지 않았다.

문 대통령은 트럼프 행정부가 카타르에서 이란 및 터키와, 시리아에서 러시아 및 이란과 군사적 대치를 통해 위험한 행보를 하고 있는 것에 대해 전혀 언급하지 않았다. 이는 현재 워싱턴 당국을 분열시키고 있는 문제들로 그는 그러한 무모한 행동과 거리를 두었어야 했다.

미국의 지원 및 격려에 고무된 사우디 아라비아는 카타르가 본질적인 정치적 경제적 독립성을 포기하고 터키 및 이란과의 관계를 종식시키도록 요구하고 있다.

이러한 움직임은 1914년 독일의 지원을 등에 업은 오스트리아가 세르비아에게 주권을 포기하고 항복하도록 요구했던 상황과 매우 흡사한데, 1세기 전의 이 사건은 결국 제1차 세계 대전으로 이어진 바 있다.

현재의 이러한 상황이 갖고 있는 위험을 과소평가하지 않아야 한다.

사드배치, 세계 여론을 움직여라

트럼프 대통령과 좋은 관계를 유지하는 것이 단지 현재 한국에게 최우선 순위가 되는 것은 아니다.

문 대통령이 방미 일정을 마치고 귀국했으니 이제는 트럼프 행정부를 잊고 미국과 실질적인 협력을 시작할 수 있다. 한미 양국은 교육 및 공공 정책, 기술 정책 개발 및 기후변화에 대응하기 위한 대책을 논의할 대화를 가질 필요가 있다.

트럼프 대통령과의 합의 효력 기간은 4년인 반면 미국 대학이나 연구소와의 합의는 수십 년간 지속될 수 있다.

환경 영향 평가를 통한 사드 배치의 연기는 근본적인 해결책이 아니며 어려운 결정을 내려야 하는 상황을 악화시킬 뿐이다.

 

사드배치 문제는 미국만 설득해서 될 문제가 아니다. 당장 한미정상회담 이후 중국의 반발이 나왔다. 이 문제와 관련해 자국에서 정치적 기반이 흔들리는 트럼프 대통령에게만 매달릴게 아니라, 세계 여론을 움직이는 보다 큰 그림과 전략이 필요하다.

이보다는 서울에서 국제 회의 개최를 통해 저명한 전문가들을 초청해 이들로 하여금 새로운 미사일 및 드론 기술로 인해 야기되고 있는 지역 내 위험을 객관적으로 평가하도록 하는 것이 훨씬 낫다.

이 회의는 사실에 대한 객관적 분석에 기반을 두어야 한다. 이러한 사실 조사를 통해 사드의 실상과 함께 일반적으로 특정 미사일 방어 체제가 새로 대두되고 있는 위협에 대한 효과적인 대응책이 되지 못한다는 것이 정확히 드러날 것이다.

또한 그러한 사실 조사는 미사일 방어가 아닌 군축 및 비확산 정책만이 장기적인 국방 전략이 될 수 있음을 객관적으로 보여주게 될 것이다.

그러한 과학적 조사를 통해 중국에 대한 두려움이나 무기 도입 계약 체결에 대한 요구에 근거하지 않은 미사일 방어와 관련한 한국의 대응책을 미국에 전달할 수 있게 될 것이다.

끝으로 향후 문재인 행정부는 장래에 다양한 간접적 수단을 통해 트럼프 대통령과 연계되는 것을 피해야 한다.

아마도 트럼프의 사위인 재러드 쿠슈너나 다른 이들을 통한 비공식 대화 채널 구축 시도가 있을 것이다. 그러나 그러한 움직임은 한국이 갖고 있는 가장 큰 장점을 약화시킬 것이다.

최근 있은 탄핵 및 대선 이후 한국은 법치주의 및 민주주의 실행에 대한 측면에서 국제적으로 주목받고 있다. 한국은 향후 있을 미국과의 모든 관계에서 규정 준수를 주장해야 할 것이다.

자유한국당 안상수 의원이 정부 보도자료와 연구보고서를 출처 표기 없이 통째로 베껴 자신의 이름으로 정책자료집을 발간했고 이 과정에서 발간 비용으로 국회예산 890만 원을 사용했다는 최근 뉴스타파 보도와 관련해, 시민단체가 성명을 내고 안상수 의원은 국민들에게 사과하고 베낀 정책료집에 쓰인 예산을 전액 반납할 것을 요구했다.

인천평화복지연대는 오늘(10월 18일) 성명을 내고 정부 보도자료와 다른 기관의 자료를 베끼고 국회 예산까지 사용해 정책자료집을 만드는 것은 저작권법 등 실정법을 위반한 것뿐 아니라 세금을 부정하게 사용하는 것으로 볼 수밖에 없다며 안 의원의 정책자료집 베끼기 행태는 국회의 대표적인 적폐라고 비판했다.

인천평화복지연대는 또 인천 시민들을 실망스럽게 하고 더 큰 분노를 일으키는 것은 뉴스타파와의 취재과정에서 보여준 안상수 의원의 태도라고 지적하고, 안 의원이 ‘미친놈’, ‘별놈 다보겠다’라며 막말을 하고 ‘허가받고 (발간)했다”며 취재 기자에게 거짓 해명을 한 것에 대해서도 국민들에게 사죄해야 한다고 밝혔다.

시민단체는 안상수 의원은 베껴 만든 것으로 확인된 정책자료집의 발간 비용 890만 원 외에 전체 정책개발비용이 어디에 어떻게 쓰여졌는지 근거자료를 공개하지 않고 있다면서 이를 공개하라고 요구했다. 또 다른 자료를 베껴 정책자료집을 만들면서 사용한 국회예산에 대한 환수운동과 함께 법적 대응도 추진할 것이라고 밝혔다.

디플로마트, 한국과 일본은 해빙기를 맞는가?– 한일 양국의 진정한 동맹은 구조적 문제 해결과 국민들의 인식 변화를 필요로해– 위안부 문제, 한국은 진심 어린 사과와 보상 요구…일본은 모든 것 마무리 돼– 양국의 우익 성향과 극단주의자들에 대한 대응 실패 등의 구조적 문제 해결해야디플로마트는 5일 ‘한국과 일본은 해빙기를 맞는가?’ 라는 제목의 기사에서 한일 두 나라가 진정한 동맹 관계를 맺기 위해서는 ...