네덜란드 Amersfoort에 퍼진 1% 나눔의 변화
제3편: 유럽에서 발견한 아시아 연대의 씨앗
작성자: 윤지영 ODA Watch 정책기획팀장
6월 14일 화요일, 컨퍼런스가 본격적으로 시작되는 날이다. 이른 아침식사를 하고 회의장으로 가니 각양각색의 옷차림의 사람들이 이야기를 나누고 있다. 그런데 대충 훑어봐도 동양에서 온 사람은 몇몇 보이지 않는다. 또 대부분이 나이가 지긋한 시니어들이다.
만나는 사람들과 반갑게 첫인사를 나누고 기본적인 소개를 시작한다.
“나는 이름이 윤지영이고 한국의 ODA Watch라는 곳에서 일하고 있고, 유럽이 처음이다. 등등…”
인사를 건네 받은 몇몇 사람들이 다시 되묻는다. 남한?(South Korea) 북한??(North Korea)
똑 같은 질문을 몇 번씩 받고 난 이후부터는 “남한(South Korea)” 이라고 콕 집어서 말하게 되었다.
첫 세션에서 주최기관 대표자들의 환영 인사에 이어 기조연설이 시작되었다. 주된 내용은 현재 국제개발협력에서의 M&E가 직면한 도전과 기회가 무엇인지를 설명하고 어떻게 대처해야 할 것인지를 제기하는 것이었다. 핵심은 현재 가장 많이 사용하고 있는 평가의 기준으로 개발원조 비용 대비 효과성과 효율성에 초점을 맞추는 것이 개발로 인한 실질적인 변화를 측정하는 것에 오히려 해가 되는 것이 아니냐는 질문이다. 이에 본 회의에서 M&E의 목적을 재정립하고 평가 방법론의 다양화에 대한 논의를 하고자 했다. 기조연설을 들으면서 아직 M&E 제도와 문화가 성숙하게 자리잡지 않은 한국개발NGO들에게는 다소 상당히 거리감이 있는 문제제기라는 생각이 들었지만, 나와 우리 단체가 지난해 평가 작업을 하면서 절실히 느꼈던 고민들을 재확인할 수 있었기에 본 회의에서 이 고민을 어떻게 풀어나갈지 기대가 되었다.
기조연설 후에는 참가단체들의 실제 M&E 경험들을 나누고 이에 대한 의견을 주고받는 시간으로 5개의 주제분과(working group) 별 발표와 토론이 오후 내내 이어졌다. 5개 분과는 ▲거버넌스와 책무성 ▲애드보커시사업에 대한 M&E ▲역량강화사업에 대한 M&E ▲인도주의지원사업에 대한 M&E ▲평가 네트워크 이다.
[사진설명 : 평가 네트워크 주제분과 모습]
이 중 나는 평가 네트워크 분과에 참여하였는데 논의의 핵심은 지역사회가 모니터링과 평가의 주체가 되는 것이 개발원조의 효과성을 높이는데 기여한다는 것이다. 이에 지역 오너십과 포괄성의 가치를 핵심가치로 놓고 모니터링과 평가에 필요한 정보를 감시와 회계 등 도너가 요구하는 틀에 맞출 것이 아니라 지역사회와 지역주민들이 파악하여 사용할 수 있도록 해야 한다. 중요한 것은 모니터링과 평가의 언어까지도 전문적이고 기술적인(language jargon) 용어들을 탈피하여 지역사회의 언어를 사용해야 한다는 것이다.
실제로 이 분과에서는 나미비아의 슬럼 지대 주민들의 연대체인 Shack Dwellers Federation of Namibia와 Namibia Housing Action Group이라는 NGO가 19,168 가구의 지역주민들과 함께 실시하고 있는 가계저축 프로그램에 대한 모니터링과 평가 사례를 발표하여 참가자들의 뜨거운 관심을 받았다. 이 프로그램에서는 각 가구가 다른 가구에 대한 감시자이자 평가자로 프로그램의 전 과정에 참여하고 있다.
오후 세션에서는 영국, 네덜란드 정부에서 M&E에 대한 새로운 접근법과 사례를 소개하는 시간이 있었는데 그 중에서도 흥미로운 것은 영국의 국제개발부(DFID)에서 ‘프로그램 파트너십 협정(Program Partnership Arragement, PPA) ’의 일환으로 원조 파트너들이 수행한 프로그램의 영향력(impact)을 모니터링한 사례였다. 민간 사업 별로 수행된 평가는 매우 유연하게 진행되어 각기 다양한 평가 방법을 사용하였는데, 평가 결과를 보면 매우 형식적인 평가 보고서를 제출한 곳도 있지만 그 외 영향력 측정의 창의성(creativity)을 보여준 곳들도 많았다고 한다.
더보기
※ 프로그램 파트너십 협정(Program Partnership Arragement, PPA)
여기에는 민간단체 지원 펀드인 Civil Society Challenge Fund도 포함되며, 각 프로그램은 사업연도별로 “National Audit Office assessment of DFID Value for money”규정에 따른 평가를 실시한다. 이와 별도로 PPA 전반에 대하여 ‘평가에 대한 평가’라 할 수 있는 메타 평가(meta-evaluation) 도 실시하였다. 메타평가란 Daniel L. Stufflebeam에 따르면, ‘평가활동의 길잡이가 되고 평가 자체의 강점과 약점을 공개적으로 보고하기 위하여 평가활동의 효용성, 실제성, 윤리성, 기술적 적정성에 관한 기술적(記述的)이며 판단적인 정보를 구분•획득•이용하는 과정’을 뜻한다. (출처: 김병철 (2009). 『메타평가론』)
※ 프로그램 영향력 모니터링 사례 대한 내용은 우리단체 뉴스레터(OWL) 56호에 실린 “ODA Watch 라오스원조종합평가, 국제사회의 문을 두드리다” 중 일부를 발췌하였다. (원문보기
http://www.odawatch.net/11013 )
그 한 예가 탄자니아에서 수행된 DFID 시민사회펀드 프로그램(AcT)이 활용한 아웃컴 맵핑(Outcome Mapping) 기법 이다. 캐나다의 IDRC(Internatoinal Development Research Center)에서 고안한 이 방법은 성과(outcome)에서 나타나는 행동의 변화에 초점을 두고 있으며, 정해진 지표 대신 아래 그림에서 보이는 사다리, 즉 성과 마커(progress markers)를 활용한다. 사람들의 행동의 변화가 일직선으로 나타나지 않는다는 전제 하에 오른쪽 그림에서 보이는 구부러진 사다리를 사용하는 것도 특징이다.
[IDRC의 아웃컴 맵핑]
(출처 : http://evaluationinpractice.files.wordpress.com/2008/01/outcomemapping-gk3.pdf)
더보기
이미 너무 오래되어 식상한 논의가 되었다는 양적•질적 평가 방법에 대한 논쟁에 관해 DFID의 프로그램을 평가해 온 컨설턴트 Neil MacDonald씨는 프로그램의 특징에 적합한 측정 방법을 선별하는 것이 가장 중요하며, 결론적으로는 양적 평가와 질적 평가 방법을 혼용할 것을 권고하였다. 양적 평가는 서비스의 전달에 초점을 둔 정형화된 사업의 경우 적합한 평가방법이긴 하지만 ‘숫자가 모든 것을 다 말해줄 수 없다’는 한계가 있다. 질적 평가는 다양한 측정 방법이 있으므로 무엇보다 엄격한 진행 과정을 거쳐 철저한 검증 결과를 얻어내는 것이 중요하다. 그 외 컨퍼런스에서 공유된 약 100여 가지의 발표자료와 페이퍼는 모두 INTRAC 홈페이지에서 받아볼 수 있다 .
(INTRAC 홈페이지 http://www.intrac.org/pages/en/evaluation-conference-presentations.html)
회의 첫날의 공식적인 일정이 끝나고 저녁에는 참가단체들이 서로 정보를 나누고 교류할 수 있는 market place라는 장이 열렸다. 우리단체는 아직 영어로 소개할 수 있는 발간자료가 많지 않아 수십년 활동해온 서구 NGO들의 상차림에 비하면 매우 초라하였지만, 변화의 시나리오 보고서와 영문 리플렛을 펼쳐두고 열심히 사람들을 만났다. 이름도 생소하고 어린?(다른 참가자들에 비하면 매우 어린) 활동가 2이 폴짝폴짝 뛰고 있는 모습이 신기했는지 꽤 많은 참가자들이 관심을 가지고 우리 부스를 들락날락거렸다.
[사진설명: 마켓플레이스에 차린 우리단체 부스 전경]
둘째날에도 주제분과별 토론은 계속되었고 늦은 오후에는 드디어 우리단체도 사례발표에 나섰다. (2편 사례발표 소감문 참고)
발표는 팀원 주영이가 차분히 해나갔다. 국제시민사회 앞에 처음 서 보는 탓에 긴장을 많이 해서인지 전날 밤 잠도 제대로 못하고 발표 준비에 열을 다했던 주영이다. 긴장하는 모습이 역력하여 나도 조마조마한 마음으로 지켜봤는데 떨리는 목소리 가운데서도 당당하고 자신 있게 우리의 경험을 하나씩 풀어놓기 시작했다. 참가자들의 반응이 조금씩 적극적으로 나타나자 발표 후반부에는 더없이 씩씩하게 참가자들과 토론을 해나가기도 했다.
우리 발표를 들으러 온 참가자 중에는 본 회의의 주최기관인 PRIA의 대표인 Rajesh Tandon씨도 있었다. 30년 이상 아시아 시민사회의 역량강화를 위해 일해오신 분으로, 이분과 함께 우리의 사례를 공유한다는 것이 풋내기 우리들에겐 무척이나 고무되는 일이었다. 사실 발표 중간중간에 Rajesh씨를 비롯하여 다른 참가자들과 가진 토론이 발표가 가진 의미를 훨씬 능가하는 에너지를 생산해냈다.
마침내 발표가 끝이 났다. 오늘 이 자리를 위해 참으로 많은 고민과 싸워나가며 우리가 하고 있는 일에 대해 끊임없이 질문을 던졌었다. 과연 이렇게 하는 것이 의미가 있는 것인지, 우리의 활동이 한국의 개발원조사업과 정책에 긍정적인 영향을 주는 것인지, 평가 방법론의 논리가 다소 약한데 이 부분을 어떻게 보완해야 하는 것인지 등…
발표 후 참가자들로부터 들은 의견들을 종합하여 정리하면서 주영과 나는 그간 조금씩 표현하지 못했던 걱정들을 자신감으로 이겨낼 수 있었다. 부족한 점은 보완하고 발전시키면 되었다. 변화의 시나리오는 충분히 그럴만한 가치가 있었고 이미 이 가운데에서 변화에 대한 씨앗을 제공한 것이었다.
특히 이 회의에 모인 참가자들과 경험, 사례들은 NGO들의 사업에 대한 M&E에 관한 것이었고 우리단체만 자국 정부의 개발원조에 대한 평가 경험을 말하고 있었다. 이것만으로도 우리 단체와 우리 평가팀의 시도는 다른 이들에게 시사점을 제공하였다. Rajesh가 말한 것처럼 “개발”이라는 큰 흐름안에 진정한 변화가 있기 위해서는 NGO 사업의 효과성뿐만 아니라 정부의 원조, 즉 ODA의 책무성 또한 높아져야 하는데 이를 위해서는 정부에게 책무성을 요구하는 시민사회의 목소리가 더욱 커져야 한다는 것이다. 이 때에는 반드시 정부의 개발원조 프로그램에 대한 철저한 평가 결과를 근거로 정부가 변할 것을 요구해야 한다.
Rajesh는 신흥공여국인 한국의 시민사회를 대표하여 우리단체가 중국, 인도 시민사회에 경각심을 제공하고 이들이 자국의 정부에 책무성을 요구하는 일에 동참할 수 있도록 앞장서줄 것을 당부하기도 했다.
이렇게 둘째 날도 지나고 회의의 마지막 날에는 지금까지 논의된 것들을 종합하여 향후 공동으로 취할 행동계획을 수립하는 시간을 가졌다. 하지만 솔직히 말해 나는 우리 발표가 끝난 이후 한국으로 돌아가 어떻게 하면 우리의 경험을 보완하고 아시아 시민사회 연대로 이을 수 있을지를 생각하는데 몰두하느라 회의 말미에는 거의 집중을 하지 못했다.
이들이 논의하고 있는 후속 계획이라는 것이 한국 시민사회가 처해있는 상황과는 너무 거리가 멀었고 서구식 방법론과 관점으로 가득차 있다는 불편함이 들면서 더욱 그랬다. 예를 들면 원조 평가 결과를 공공재로써 다 함께 공유하고 시민사회의 경험을 한데 모아 정보를 공유할 공통의 M&E 플랫폼을 구축하자는 것인 것인데 과연 이것이 한국을 비롯한 아시아 국가들의 상황에도 똑같이 적용될 수 있을 것인가에 대해서는 아무도 심각하게 고민하지 않았다. 플랫폼을 주장한 것은 영국, 미국 등 서구단체들이었고 이에 대해 아시아에서 온 참가자들은 불편함을 표시하기도 했다.
[사진설명: 후속 행동계획 논의 결과]
모든 세션이 끝난 후 자연스럽게 아시아에서 온 사람들이 모여 이야기를 나누고 사진도 찍는 유쾌한 시간을 가졌다. 지난 3일을 돌아보니 일정이 너무 타이트하고 피로할 정도로 토론이 많아서 참가자들끼리 즐겁게 교류하지도 못했던 것이 모두들 아쉬웠던 모양이다.
캄보디아, 필리핀, 스리랑카, 방글라데시, 인도, 러시아, 이집트 등 모여보니 우리를 포함해서 8개 국가의 네트워킹 자리가 되었다. 이들 중에 스리랑카에서 온 참가자가 개그맨 뺨치는 개그를 구사하여 모처럼 심각한 이야기에서 벗어나 엄청나게 웃었다. 나중에는 회의에 대한 아쉬움을 함께 토로하기도 했는데, 서구사회 중심으로 회의가 진행되었던 점, 아시아 사람들을 고려하지 못한 식사, 진행자의 너무 빠른-알아듣지도 못할 만큼 빠른- 영어에 대한 지적이 많았다.
이들과의 이야기로 이번 컨퍼런스를 마무리하며 강하게 드는 생각은, ‘나는 별 수 없는 아시아 사람이구나..’ , 아시아 사람들과 함께 모여 있으니 그렇게 마음이 편할 수가 없고 뭔가 알 수 없는 끈끈한 유대감으로 마음이 든든해졌다. 이들과 쿵짝쿵짝 하면 뭔가를 해볼 수 있을 것 같기도 했다. 이들이 나와 주영에게 보내는 격려와 관심도 큰 힘이 되었다. 대부분이 이 분야의 노장들인데 이제 막 힘차게 시작해나가는 갓난 아시아 활동가에 대한 응원이었다.
[사진설명: (좌)필리핀, 캄보디아에서 온 참가자들과 함께 / (우) 아시아 참가자들과 함께]
결국 유럽의 한복판에서 국제시민사회의 노련한 M&E 시장에 당당히 문을 두드리고자 나선 이 여정이 선사한 것은 아시아를 다시 보게 하는 힘이었다. 변화의 시나리오를 만들어가며 품었던 꿈을 뿌리내릴 곳은 멀리가 아닌 바로 내가 밟고 서 있는 땅인 아시아였다. 그러고 보니 우리의 변화의 시나리오 사업명도 “정의로운 개발원조를 위한 아시아 시민연대” 이다.
회의장을 나오면서 우리가 제대로 가고 있다는 생각이 든다. 돌아가서 할 일이 많다 싶다.
멀리 네덜란드에서 다시 발견한 아시아 시민연대의 씨앗을 제대로 심어야겠다는 메시지가 마음 한 켠에서 강하게 울려 퍼진다.
시민들의 의견
댓글 달기