표제지
목차
요약문 4
SUMMARY 7
제1장 서론 22
1.1. 평가 배경 및 목적 23
1.2. 평가대상 및 범위 24
1.3. 평가단 구성 26
1.4. 평가 일정 27
1.5. 평가계획의 한계 28
제2장 평가방법론 29
2.1. 평가 기간 30
2.2. 평가 방법 30
2.2.1. 평가 절차 및 조사 방법 30
가. 평가 추진 절차 개요 30
나. 조사 방법별 평가범위 및 세부 추진사항 31
2.2.2. 국제개발협력 분야 기존 평가지침 및 평가매뉴얼의 적용성 분석 36
가. OECD DAC 사업평가 기준(2019년 개편) 분석 36
나. 우리나라 ODA 평가체계 구축 경과 개요 38
다. 국제개발협력위원회 2022년 국제개발협력 평가계획 검토 39
라. 국제개발협력 관련 규정(국무조정실, 2021년 개정) 분석 39
마. 국제개발협력 평가지침(국무조정실, 2021년 개정) 분석 40
바. 국제개발협력 평가 매뉴얼(국무조정실, 2022년 개정) 분석 41
사. 행정안전부 국제개발협력 사업 내부평가지침(2020) 분석 50
2.2.3. 기 개발된 자체평가의 목적 및 범위, 방법론, 평가모형 등 검토 53
가. 국립재난안전연구원 기 수행 ODA 사업 자체평가 검토 53
나. 국제개발협력 평가 매뉴얼 개정(2022년)에 따른 자체평가 방법론 검토 62
다. 2022년도 자체평가를 위한 개선 방향 도출 및 방법론 확정 63
2.2.4. 2022년도 ODA사업 특성을 반영한 평가지표 선정 및 보완 65
가. 자체평가용 성과관리 프레임워크(PDM, 평가 매트릭스) 설정 65
나. 평가 매트릭스 수립 68
2.2.5. 평가대상 사업에 적용 가능한 설문조사 항목 선정 및 보완 70
가. 설문조사 종류 세분화 70
나. 설문조사 항목 구성 70
2.3. 평가수행의 어려움 73
제3장 평가대상 분석 74
3.1. 추진 배경 75
3.2. 평가대상 개요 77
제4장 평가내용 79
4.1. 주요 평가 결과 80
4.1.1. 평가 결과 요약 80
4.1.2. 설문조사 결과 요약 82
4.2. 평가기준별 평가 87
4.2.1. 적절성 87
4.2.2. 효율성 97
4.2.3. 효과성 102
4.2.4. 영향력 121
4.2.5. 지속가능성 124
4.2.6. 일관성 130
4.2.7. 범 분야 이슈 137
4.3. 평가 결론 138
제5장 교훈 및 제언 139
5.1. 교훈사항 140
5.1.1. 성공요인 140
5.1.2. 제한요인 141
5.2. 제언사항 142
5.2.1. 국립재난안전연구원 142
5.2.2. 필리핀 기상청 144
5.2.3. 참여기업 144
참고문헌 145
[부록 1] 참여기업 설문조사지 (한글) 149
[부록 2] 현지 이해관계자 설문조사지 (영문) 154
[부록 3] 교육만족도 설문조사지 (영문) 162
판권기 165
표 1.1. 자체평가 자문위원회 구성 26
표 1.2. 평가 추진 일정 (계획: □, 실제: ■) 27
표 1.3. 평가대상 사업 및 자체평가 수행 일정 28
표 2.1. 조사 방법별 평가범위 31
표 2.2. 문헌 검토 내역 32
표 2.3. 이해관계자별 현지평가 주요활동 33
표 2.4. 현지평가 세부 일정 33
표 2.5. OECD DAC 사업평가 기준 개편의 주요 내용 37
표 2.6. 우리나라 국제개발협력 사업평가 관련 체계 구축 경과 38
표 2.7. 국제개발협력 평가지침 주요 신ㆍ구 용어 대조표 41
표 2.8. 국제개발협력 사업평가 원칙 42
표 2.9. 국제개발협력 평가의 종류 43
표 2.10. 국제개발협력 사업평가 기준 44
표 2.11. 평가 기준ㆍ항목별 주요 평가 질문 44
표 2.12. 국제개발협력 사업평가 기준별 점수 체계 46
표 2.13. 국제개발협력 사업 종합 평가 등급별 정의 47
표 2.14. 국제개발협력 평가 매뉴얼 신ㆍ구 대조표 47
표 2.15. ODA 사업 성과지표 모델 신ㆍ구 대조표 49
표 2.16. ODA 사업 성과지표 표준모델 - 평가대상 사업 유관 성과지표 49
표 2.17. 행정안전부의 국제개발협력 사업평가 원칙 및 기준 50
표 2.18. 행정안전부의 국제개발협력 사업 자체평가 결과보고서 표준(안) 51
표 2.19. 행정안전부의 국제개발협력 사업평가 절차 51
표 2.20. 2016년도 국립재난안전연구원 ODA 사업 세부 활동 53
표 2.21. 2016년도 국립재난안전연구원 ODA 사업 자체평가 주요 결과 54
표 2.22. 2017년도 국립재난안전연구원 ODA 사업 세부 활동 55
표 2.23. 2017년도 국립재난안전연구원 ODA 사업 자체평가 주요 결과 55
표 2.24. 2018년도 국립재난안전연구원 ODA 사업 세부 활동 56
표 2.25. 2018년도 국립재난안전연구원 ODA 사업 자체평가 주요 결과 57
표 2.26. 2019년도 국립재난안전연구원 ODA 사업 세부 활동 58
표 2.27. 2019년도 국립재난안전연구원 ODA 사업 자체평가 주요 결과 58
표 2.28. 2021년도 국립재난안전연구원 ODA 사업 세부 활동 59
표 2.29. 2021년도 국립재난안전연구원 ODA 사업 자체평가 주요 결과 60
표 2.30. '일관성' 평가 항목별 점수 부여 체계, 주요 평가 질문 62
표 2.31. 2022년 국립재난안전연구원 ODA 사업 자체평가 점수 부여 체계 63
표 2.32. ODA 사업 성과지표 표준모델 활용 내역 64
표 2.33. 2022년 재난안전 신기술 해외보급(ODA)사업 자체평가용 PDM 67
표 2.34. 2022년 재난안전 신기술 해외보급(ODA)사업 평가 매트릭스 68
표 3.1. 2022년 재난안전 신기술 해외보급(ODA)사업 PDM 78
표 4.1. 2022년 재난안전 신기술 해외보급(ODA)사업 종합평가 결과표 81
표 4.2. 참여기업 대상 설문조사 응답자 82
표 4.3. 참여기업 자체평가 설문조사 결과 82
표 4.4. 참여기업 자체평가 설문조사 결과 (100점 환산) 83
표 4.5. 현지 이해관계자 대상 자체평가ㆍ만족도 설문조사 응답자 83
표 4.6. 현지 이해관계자 자체평가ㆍ만족도 설문조사 결과 84
표 4.7. 현지 이해관계자 자체평가ㆍ만족도 설문조사 결과 (100점 환산) 84
표 4.8. 현지 기술이전 교육만족도 설문조사 응답자 85
표 4.9. 현지 기술이전 교육만족도 설문조사 결과 86
표 4.10. 현지 기술이전 교육만족도 설문조사 결과 (100점 환산) 86
표 4.11. 적절성 평가 결과 87
표 4.12. 이해관계자 설문 결과 (적절성: 정책적 타당성, 개발수요 부합성) 91
표 4.13. 평가대상 사업 구성요소 92
표 4.14. 이해관계자 설문 결과 (적절성: 사업 설계 및 구성의 적절성) 94
표 4.15. 이해관계자 설문 결과 (적절성: 환경변화 대응, 위험관리 적절성) 96
표 4.16. 효율성 평가 결과 97
표 4.17. 사업예산 대비 집행내역 (경비) 98
표 4.18. 이해관계자 설문 결과 (효율성: 사업 비용의 효율성) 99
표 4.19. 평가대상 사업 추진 일정 100
표 4.20. 이해관계자 설문 결과 (효율성: 사업 기간의 효율성) 101
표 4.21. 효과성 평가 결과 102
표 4.22. 산출물 달성 현황 103
표 4.23. 과업 수행내용 - (1) 현장조사 103
표 4.24. 과업 수행내용 - (2) 홍수 예ㆍ경보시스템 및 자동 우량경보시설 구축 106
표 4.25. 이해관계자 설문 결과 (효과성: 산출물 만족도(1)) 110
표 4.26. 과업 수행내용 - (3) 홍수 예ㆍ경보체계 및 자동 우량경보시설 검ㆍ보정 110
표 4.27. 이해관계자 설문 결과 (효과성: 산출물 만족도(2)) 111
표 4.28. 과업 수행내용 - (4) 대상 유역의 하천측량을 통한 수리ㆍ수문 분석 111
표 4.29. 이해관계자 설문 결과 (효과성: 산출물 만족도(3)) 112
표 4.30. 과업 수행내용 - (5) 홍수위험도 분석 및 위험지도 구축 113
표 4.31. 이해관계자 설문 결과 (효과성: 산출물 만족도(4)) 113
표 4.32. 과업 수행내용 - (6) 필리핀 방재 관련 공무원 및 전문가 대상 교육 114
표 4.33. 이해관계자 설문 결과 (효과성: 산출물 만족도(5)) 115
표 4.34. 현지 기술이전 교육만족도 설문조사(7점 척도) 결과 116
표 4.35. 과업 수행내용 - (7) 성과보고서 및 기술요약서 작성 118
표 4.36. 과업 수행내용 - (8) ODA 사업 한국어ㆍ영어 홍보 동영상 제작 118
표 4.37. 평가대상 사업의 단기성과 및 검증지표 119
표 4.38. 이해관계자 설문 결과 (효과성: 계획한 성과 목표 달성 정도(1)) 120
표 4.39. 이해관계자 설문 결과 (효과성: 계획한 성과 목표 달성 정도(2)) 120
표 4.40. 이해관계자 설문 결과 (영향력: 사회ㆍ경제ㆍ제도에 대한 영향력(1)) 121
표 4.41. 이해관계자 설문 결과 (영향력: 사회ㆍ경제ㆍ제도에 대한 영향력(2)) 122
표 4.42. 지속가능성 평가 결과 124
표 4.43. 이해관계자 설문 결과 (지속가능성: 재정ㆍ제도적 역량 여부(1)) 125
표 4.44. 이해관계자 설문 결과 (지속가능성: 재정ㆍ제도적 역량 여부(2)) 127
표 4.45. 이해관계자 설문 결과 (지속가능성: 인적역량ㆍ유지관리 체계(1)) 128
표 4.46. 이해관계자 설문 결과 (지속가능성: 인적역량ㆍ유지관리 체계(2)) 129
표 4.47. 일관성 평가 결과 130
표 4.48. 한국의 對필리핀 지원 규모 추이 (2017~2021년) 131
표 4.49. 국내 수자원, 재난안전 분야 유사 지원사업 133
표 4.50. 국내 수자원, 재난안전 분야 유사 지원사업 구성요소 133
표 4.51. 국내 수자원, 재난안전 분야 유사 지원사업 136
표 4.52. 이해관계자 설문 결과 (일관성: 외적 일관성) 136
표 4.53. 이해관계자 설문 결과 (범 분야: 환경 영향) 137
그림 1.1. 자체평가단 구성 26
그림 2.1. 평가 추진 절차 30
그림 2.2. 설치 확인ㆍ검수 참관(두만적郡) 34
그림 2.3. 설치 확인ㆍ검수 참관(톨레도市) 34
그림 2.4. 기술이전 교육 참관(두만적郡) 34
그림 2.5. 기술이전 교육 참관(톨레도市) 34
그림 2.6. 홍수 예ㆍ경보 모의훈련 참관(두만적郡) 34
그림 2.7. 홍수 예ㆍ경보 모의훈련 참관(톨레도市) 34
그림 2.8. 1차 자문회의 주요 사진 35
그림 2.9. 2차 자문회의 주요 사진 35
그림 2.10. OECD DAC 사업평가 기준(2019년 개편) 36
그림 2.11. 사업 구성요소별 관련 OECD DAC 사업평가 기준 37
그림 2.12. 행정안전부의 국무조정실 평가대상 사업 자체평가 절차 52
그림 2.13. 변화이론 구성요소 66
그림 2.14. PDM 구성요소 66
그림 2.15. 성과관리 프레임워크와 OECD DAC 사업평가 기준의 관계 66
그림 2.16. 참여기업 대상 자체평가 설문지 71
그림 2.17. 현지 이해관계자 대상 자체평가ㆍ만족도 조사 설문지 72
그림 2.18. 현지 기술이전 교육 이수자 대상 교육만족도 조사 설문지 73
그림 3.1. 2022년 재난안전 신기술 해외보급(ODA)사업 추진 체계 77
그림 4.1. 2022년 재난안전 신기술 해외보급(ODA)사업 종합평가등급 80
그림 4.2. 필리핀 수원총괄기관의 공식 사업요청서(PCP) 90
그림 4.3. 톨레도市 현장조사: 홍수위험요소(상) 및 설치 후보지역(하) 검토 104
그림 4.4. 두만적郡 현장조사: 홍수위험요소(상) 및 설치 후보지역(하) 검토 105
그림 4.5. 톨레도市(좌)ㆍ두만적郡(우) 수위ㆍ강우계, 경보국 종합 배치도 106
그림 4.6. 두만적郡 강우관측소 설치: 볼로간 동사무소(좌), 만라페이 대피소(우) 107
그림 4.7. 두만적郡 수위관측소 설치: 제방(좌), 타폰橋(우) 107
그림 4.8. 두만적郡 경보국 설치: 시청(좌), 타폰초등학교(우) 107
그림 4.9. 톨레도市 강우관측소 설치: 바가카이 동사무소(좌), 카르멘社(우) 108
그림 4.10. 톨레도市 수위관측소 설치: 말루복 댐(좌), 메디아온세橋(우) 108
그림 4.11. 톨레도市 경보국 설치: 막두고 동사무소(좌), 스포츠센터(우) 108
그림 4.12. 톨레도市 경보국 설치: 상해橋(좌), 카만칠리橋(우) 109
그림 4.13. 톨레도市 강우ㆍ수위관측소 설치: 일리한橋(좌), 클라우디오橋(우) 109
그림 4.14. 홍수 예ㆍ경보시스템 구축: 웹(좌), 모바일(우) 109
그림 4.15. 대상 유역 하천측량 범위: 톨레도市(좌), 두만적郡(우) 111
그림 4.16. 톨레도市 경보발령 기준: 일리한橋 지점(좌), 클라우디오橋 지점(우) 112
그림 4.17. 두만적郡 경보발령 기준: 타톰橋 지점 112
그림 4.18. 홍수 위험지도 구축: 톨레도市(좌), 두만적郡(우) 113
그림 4.19. 톨레도市 기술이전 교육: 이론(상), 실습(하) 114
그림 4.20. 두만적郡 기술이전 교육: 이론(상), 실습(하) 115
그림 4.21. 현지 기술이전 교육자료: 이론(좌), 유지ㆍ관리(우) 117
그림 4.22. 홍수 예ㆍ경보시스템 및 자동 우량경보시설 운영ㆍ관리 매뉴얼 117
그림 4.23. ODA 사업 홍보 동영상 118
그림 4.24. 홍수 예ㆍ경보 모의훈련: 톨레도市(좌), 두만적郡(우) 126
그림 4.25. 한국의 對필리핀 지원 규모 추이 (2017~2021년) 131
그림 4.26. 한국의 수자원, 재난안전 분야 ODA (2016~2020년) 132
그림 4.27. 주요 공여국의 필리핀 지원액 135
그림 4.28. 2022년 재난안전 신기술 해외보급(ODA)사업 종합평가등급 138