연구보고서에는 어떤 내용이 담겨 있나요?

「Assessing Impact」은 록펠러 필란트로피 자문단*이 축적해온 경험과 노하우를 보기 쉽게 정리한 필란트로피 로드맵 시리즈 중 한 편으로, 자선 활동의 임팩트를 평가하는 여러 방식을 소개하고 검토합니다. 평가를 통해 무엇을 얻을 수 있는지, 어떤 부분을 측정하기 어려워 하는지 등을 살펴보며 자선 활동을 진행할 때 던질 수 있는 일련의 질문과 관련 사례들을 제시합니다.

왜 이 보고서에 주목해야 하나요?

록펠러 필란트로피 자문단은 세계 최대의 자선 관련 자문기관으로, 기부활동에 관한 연구와 자문 제공, 자선 프로그램 개발 등을 주도하고 있습니다. 상대적으로 자선 자문이 생소한 한국에서 본 시리즈는 자선 사업에 관심을 있는 분들이나 기부 단체가 기부자들과 보다 원활한 소통을 하는 데에 도움을 줄 수 있습니다. 특히, 「Assessing Impact」는 지속가능한 자선사업에서 필수적인 임팩트 평가에 대해 기본적인 접근 방법부터 효율적인 평가를 돕는 여러 방법, 사례 등을 소개하며 임팩트 평가에 대한 전반적인 이해를 돕습니다.

*록펠러 필란트로피 자문단(Rockefeller Philanthropy Advisors, RPA)

록펠러 필란트로피 자문단은 현재 연 2억 달러에 달하는 기부금에 대한 자문과 관리를 맡고 있습니다. 존 록펠러(John D. Rockefeller) 1세는 1891년 자선사업도 “기업 경영처럼” 운영해야 된다고 주장하며 자문단을 창시했습니다. 치밀하고 효과적인 자선 활동을 사명으로 삼는 록펠러 자선 자문단은 현재 세계 최대의 자선관련 자문기관으로 성장했으며, 지금까지 세계적으로 30억 달러의 기부금을 관리해 왔습니다. 또한 자문단은 기부활동에 관한 연구와 자문을 제공하며 자선 프로그램을 개발하고 각종 재단과 신탁금에 대한 전반적인 프로그램 운영 및 관리를 제공하고 있습니다.

9가지 질문과 5단계

STEP 1. 평가를 통해 얻을 수 있는 것

STEP 2. 효과성 측정의 방법들: 어떤 접근법이 가장 적합한가

STEP 3. 평가의 심도 결정

STEP 4. 임팩트 평가의 어려움에 대한 이해

STEP 5. 파트너십 구축

사례연구 소개

끝맺음

다음 9개의 질문들은 평가 계획이 어떻게 자연스럽고 효과적으로 기부 전략에 포함되어 발전할 수 있는지 설명하고 있습니다. 아래의 질문들을 통해 어떻게 평가 계획을 수립하고 어떤 부분에 노력을 집중해야 하는지, 현실적으로 할 수 있는 일은 무엇인지 등을 알 수 있을 것입니다.

1) 어떤 문제를 해결하고자 합니까?

2) 어떻게 그 변화들이 일어날 것이라고 봅니까?

3) 시간이 얼마나 걸릴 예정입니까?

4) 얼마나 많은 돈이 필요합니까?

5) 당신이 정의하는 성공은 어떤 모습입니까?

6) 제대로 진행되고 있다는 것을 확인할 수 있는 징표는 무엇입니까?

7) 유사한 문제를 기존 단체들은 어떻게 해결하고 있습니까?

8) 같은 문제를 해결하고자 하는 사람들이 또 있습니까? 그리고 그들은 어떤 방법으로 평가를 합니까?

9) 당신은 평가에 얼마나 많은 시간과 돈을 투자하고자 합니까?

책임 소재(Accountability)

기본적으로 기부자들은 수혜자들이 책임 있게 행동하기를 원합니다. 예를 들어 당신이 트레이너들을 고용하기 위해 돈을 기부했다면, 그 돈이 정말 트레이너를 고용하는 데에 쓰였는지에 대한 답을 얻을 수 있어야 합니다.

의사 결정(Decision Making)

많은 기부자들은 향후의 자선활동 방향성을 결정하기 위하여 과거 후원금들이 어떻게 사용되었는지를 평가합니다. 그들은 계속해서 지원을 할 만한 비영리 조직은 어디이고, 지원을 그만두어야 하는 곳은 어디인지 알고 싶어 합니다. 혹은 어떤 방식으로 수혜자들을 도울 것인가 결정하기 위해서도 평가를  사용합니다.

기부자들은 수혜자에 대한 평가를 통해 자신의 결정이 좋은 결정이었는지, 앞으로 더 나은 결정을 하기 위해서 해야 할 일은 무엇인지 등 스스로를 평가하기도 합니다.

방법론의 실효성 증명(Proof of Concept)

자선사업 프로그램이 지속적인 변화를 만들어내고 있다는 실질적인 성과는 향후 확장의 원동력이 되기도 합니다. 또한 이는 더 많은 기부자를 끌어들일 기회와 기존 계획을 확장할 수 있는 기회를 제공합니다. 성공한 프로그램은 또한 다른 프로그램들의 모델이 될 수도 있습니다.

성과 평가 (Evaluation)

• 목표와 결과의 비교(Goals vs Outcomes) : 가장 쉽고 단순한 방법으로, 계획했던 목표들과 이루어낸 결과를 비교하는 방식입니다. 목표는 명확하고 측정 가능해야 합니다. 
• 진행방식 평가(Process Evaluation) : 프로그램이 끝난 뒤에야 총체적인 평가를 하는 것이 아니라 시작 단계부터 관심을 가질 수 있도록 하는 평가 방법입니다. 또 ‘무엇이 일어났는가(혹은 일어나지 않았는가)’만이 아니라 결과가 나오기까지의 과정을 밝혀내고, 기부자와 단체에게 장애물 혹은 걸림돌이 되고 있는 외부 환경적 요인들을 파악할 수 있도록 돕습니다.
• 실험적 디자인(Experimental Design) : 프로그램의 지원 대상 그룹과 유사한 비지원 대상 그룹의 결과를 측정하여 비교하거나 때로는 프로그램 참가자들의 참가 전과 후를 비교함으로써 결과를 기록합니다.
• 클러스터(군집) 평가(Cluster Evaluation) : 여러 유사 프로그램들의 결과를 비교합니다. 한 가지 프로그램을 평가하기 위해 여러 결과를 종합하는 것입니다. 예를 들어, 분노 조절 치료를 위해 행동 변화 치료 방법을 활용한 결과들을 여러 사례를 종합하여 평가할 수 있습니다.

투자 회수율(ROI, Return on Investment)

벤처 필란트로피 사업과 사회적 기업의 전형적인 임팩트 측정 방법입니다. 투자된 돈과 결과의 관계를 정량적으로 이해하고자 하는 방법입니다. 이 방법은 결과 측정이 필수적이며, 관련 실무 분야의 기부자들과 비영리 조직들이 공유할 수 있는 공통의 기준과 원칙을 만들어낼 수 있습니다.

시스템적 사고(Systems Thinking)

시스템적 사고방식은 복잡한 문제를 큰 그림으로 그려나가며, 기저에 깔린 모든 핵심 요인들을 분석해가는 방식입니다. 그 다음에는 전체적인 시스템을 변화시키기 위해서는 어떤 부분에 개입하는 것이 가장 효과적일지 평가합니다.

프로그램이 어떤 성과를 이루고 있는지 정확하게 알기 위해서는 전체 변화 과정의 어느 단계를 평가할 것인지를 먼저 결정해야 합니다. 평가의 심도를 보여주는 아래 표와 예시를 통해 사회에 미칠 영향력에 대해 서로 다른 레벨, 다른 시간적 프레임을 고려해야 한다는 것을 알 수 있습니다. 평가의 심도를 결정하는 것은 기부자로 하여금 투입되는 자원이 추가적인 효과를 낼 수 있는 부분은 어디고, 파트너십을 맺을 수 있는 분야는 무엇이고, 새로운 기회가 활성화될 수 있는 곳은 어디인지 알 수 있게 해줍니다. 

인도에 학교 구축을 위한 기부금 예시

-학교 건설은 주어진 예산과 예정된 시간 안에 완성되었는가?

-학교는 대상을 위해 적합한 시설을 갖추고 있는가?

-자격을 갖춘 선생님들이 학교에 있는가?

-학생들은 학교를 다니고 있는가?

-학생들의 학업에는 진전이 있는가?

-학생들이 고등 교육 과정에 진학하고 있는가? 

-학생들이 학교를 다님으로써 그렇지 않았을 때보다 더 나은 직업을 가지게 되는가? 

-그들은 더 나은 삶을 살고 있는가?

-결과적으로 그들이 속해있는 사회가 나아졌는가?

기부자들은 종종 자신의 기부 결과에 대하여 분명하고 명확한 답을 구하는데 어려움을 겪습니다. 대부분의 사람들은 그들이 프로그램을 잘 선택한 것인지 알고 싶어합니다. 또 지금까지 고수해온 접근 방식을 유지해야 하는지, 아니면 다른 방식을 찾아봐야 하는지 알고 싶어합니다. 누구도 성과를 내는 프로그램을 지원하는 것을 중단하고 싶어하진 않지만, 마찬가지로 그 누구도 실패할 프로그램에 기부금을 내고 싶어하지는 않습니다. 

비영리조직의 재무적 손익

많은 사람들이 자선사업에서는 기업에서 말하는 '재무적 손익'이라는 것이 존재하지 않는다고 합니다. 하지만  비영리 조직 또한 재무 성과가 있고 그에 따른 소득 신고가 행해집니다. 재무적 손익이란 향후 수익을 낼 가능성에 대해 제한적 정보를 제공하며, 실제로 벤처기업 투자자들이 투자를 결정할 때는 과거 실적 뿐 아니라 성공 역량을 보고 판단하는 경우가 많습니다. 현명한 사람들은 그러한 재무적 손익만을 근거로 투자를 결정하지 않습니다. 자선사업에 대한 투자에 있어서도 마찬가지입니다. 더하여, 비영리 조직은 영리 기업과 달리 지역사회 또는 세계에 지속가능한 변화를 가져올 수 있는지에 대한 가능성을 기반으로 투자 받는다는 것을 고려해야 합니다.

자선사업에서의 시간의 차이

대부분의 사회 문제(가난, 인권 침해, 인종간 갈등 등)는 끝을 가늠할 수 없는 시간이 필요합니다.  이러한 자선사업의 다양한 시간 단위는 평가를 어렵게 만듭니다. 하지만 기부자들은 진전이 나타나는 것을 보고싶어하고, 각각의 지역사회와 조직에 분명한 혜택이 돌아가기를 원하기도 합니다. 그렇다고 기부자들이 전체적인 시스템 수준에서의 영향에 관심을 끊어야 한다는 것은 아닙니다. 보다 넓은 시야를 갖고 전체적인 그림을 보는 시스템적 사고방식이 없다면, 기부자들은 그들이 해결하고 했던 문제에는 실질적인 도움을 주지 못하고 오로지 성공하는 프로그램만을 운영하게 될 위험이 있기 때문입니다.