표제지
목차
요약문 5
SUMMARY 10
제1장 평가보고서 요약 27
1.1. 평가 배경 및 목적 28
1.2. 평가 범위 및 내용 29
1.2.1. 평가 범위 29
1.2.2. 평가 내용 29
1.3. 평가 결과 30
1.3.1. 종합평가 결과 30
1.3.2. 참여기업 및 현지 이해관계자 자체평가 결과 32
1.4. 평가 결과 활용방안 및 개선방안 35
1.4.1. 평가 결과 활용방안 35
1.4.2. 유사사업 수행 시 개선방안 35
제2장 평가의 개요 및 배경 36
2.1. 평가의 배경 및 목적 37
2.1.1. 평가의 배경 37
2.1.2. 평가의 목적 38
2.2. 평가대상 및 범위 38
2.3. 평가단 구성 39
2.4. 평가 일정 41
2.5. 평가계획의 한계 42
2.5.1. 평가 기간의 한계 42
2.5.2. 평가용역 과업지시내용 고도화 필요성 43
제3장 평가방법론 44
3.1. 평가 기간 45
3.2. 평가 방법 45
3.2.1. 평가 절차 45
가. 평가 절차 개요 45
나. 평가범위 및 조사 방법 46
다. 조사 방법별 세부 추진사항 47
3.2.2. 국제개발협력 분야의 기존 평가지침 및 평가매뉴얼의 적용성 분석 51
가. 우리나라 ODA 평가체계 구축 경과 개요 51
나. 국제개발협력 통합평가매뉴얼(국무조정실, 2018) 분석 53
다. OECD/DAC 평가기준 개정(2019) 분석 61
라. 국제개발협력 평가지침 개정(국무조정실, 2021) 분석 65
마. 국제개발협력 평가 매뉴얼 개정(안)(국무조정실, 2022) 분석 66
바. 국제개발협력 사업 내부평가지침(행정안전부, 2020) 분석 69
3.2.3. 기 개발된 자체평가의 목적 및 범위, 방법론, 평가모형 등 검토 71
가. 기존 국립재난안전연구원 ODA사업 자체평가 보고서 검토 71
나. 2019년도 국립재난안전연구원 ODA사업 자체평가 방법론 검토 82
다. 2021년도 국제개발협력 평가지침 개정에 따른 검토 83
라. 2020년도 메타평가에 따른 검토 84
마. 2021년도 자체평가를 위한 개선 방향 86
3.2.4. 2021년도 ODA사업 특성을 반영한 평가지표 선정 및 보완 87
가. 성과관리 프레임워크(PDM) 설정 87
나. 평가 매트릭스 수립 94
3.2.5. 평가대상 사업에 적용 가능한 설문조사 항목 선정 및 보완 96
가. 사업 특성을 반영한 평가지표 검토 96
나. 설문조사 항목 구성 96
3.3. 평가수행의 어려움 99
제4장 평가대상 분석 100
4.1. 추진 배경 101
4.1.1. 라오스 홍수피해 101
4.1.2. 한국의 UNESCAP/WMO 태풍위원회 활동 102
4.2. 평가대상 개요 104
제5장 평가내용 110
5.1. 주요 평가 결과 111
5.1.1. 평가 결과 요약 111
5.1.2. 설문조사 개요 113
5.1.3. 현지 이해관계자 자체평가ㆍ만족도 설문조사 결과 116
5.1.4. 참여기업 자체평가 설문조사 결과 117
5.1.5. 교육 이수자 교육 만족도 설문조사 결과 118
5.2. 평가기준별 평가 119
5.2.1. 적절성 평가 119
5.2.2. 일관성 평가 126
5.2.3. 효율성 평가 132
5.2.4. 효과성ㆍ영향력 평가 136
5.2.5. 지속가능성 평가 161
5.2.6. 범분야 평가 165
5.3. 평가 결론 166
제6장 교훈 및 제언 168
6.1. 교훈사항 169
6.1.1. 성공요인 169
6.1.2. 제한요인 171
6.2. 제언사항 172
6.2.1. 전문가 평가 및 제언 172
참고문헌 176
[부록] 180
1. 현지 설문조사지 (한글) 181
2. 현지 설문조사지 (라오어) 194
3. 1차 자체평가 설문조사 결과 203
판권기 207
표 1.3-1. ⌜2021년 재난안전 신기술 해외보급(ODA)사업⌟ 종합평가등급 30
표 1.3-2. 종합평가 결과표 31
표 1.3-3. 참여기업 자체평가 결과 32
표 1.3-4. 참여기업 자체평가 결과 (100점 환산) 32
표 1.3-5. 현지 이해관계자 자체평가 결과 33
표 1.3-6. 현지 이해관계자 자체평가 결과 (100점 환산) 33
표 1.3-7. 현지 교육 만족도 조사 결과 34
표 1.3-8. 현지 교육 만족도 조사 결과 (100점 환산) 34
표 2.3-1. 자문위원 구성 40
표 2.4-1. 평가 추진 일정 41
표 2.5-1. 평가대상사업 및 평가 수행 일정 (변경 전) 42
표 2.5-2. 평가대상사업 및 평가 수행 일정 (변경 후) 42
표 2.5-3. 국립재난안전연구원의 자체평가용역 세부 과업지시서 43
표 3.2-1. 조사 방법별 평가범위 46
표 3.2-2. 문헌 검토 범위 47
표 3.2-3. 현지조사 대상 및 수행 방법 49
표 3.2-4. 현지조사 일정 49
표 3.2-5. 우리나라 국제개발협력 평가 관련 체계 구축 경과 51
표 3.2-6. 평가의 종류 및 내용 55
표 3.2-7. OECD/DAC 5대 평가기준 56
표 3.2-8. 평가항목별 주요 질문 57
표 3.2-9. 평가기준별 점수 체계 58
표 3.2-10. 종합평가등급 59
표 3.2-11. 평가 등급 산정(양식) 60
표 3.2-12. OECD/DAC 평가기준 개편 주요 내용 63
표 3.2-13. 국제개발협력 평가지침 주요 신ㆍ구 용어 대조표('21년 개정) 65
표 3.2-14. 국제개발협력 평가 매뉴얼 신ㆍ구 대조표('22년 개정) 66
표 3.2-15. 평가기준별 점수 체계 67
표 3.2-16. 종합평가등급 68
표 3.2-17. 평가의 원칙 69
표 3.2-18. 평가의 기준 69
표 3.2-19. 자체평가 결과보고서 표준(안) 70
표 3.2-20. 2016년 자체평가 결과보고서 내 사업 세부 활동 및 주요 사항 71
표 3.2-21. 2017년 자체평가 결과보고서 내 사업 세부 활동 및 주요 사항 74
표 3.2-22. 2018년 자체평가 결과보고서 내 사업 세부 활동 및 주요 사항 76
표 3.2-23. 2019년 자체평가 결과보고서 내 사업 세부 활동 및 주요 사항 79
표 3.2-24. 2019년 자체평가 평가기준 및 평가지표 82
표 3.2-25. 2021년 재난안전 신기술 해외보급(ODA)사업 PDM 원안 88
표 3.2-26. 2021년 재난안전 신기술 해외보급(ODA)사업 PDM 수정 내역 90
표 3.2-27. 2021년 재난안전 신기술 해외보급(ODA)사업 PDM 수정안 93
표 3.2-28. 평가 매트릭스 94
표 4.2-1. 2021년 재난안전 신기술 해외보급(ODA)사업 요약 106
표 4.2-2. 2021년 재난안전 신기술 해외보급(ODA)사업 PDM 107
표 4.2-3. 2021년 자체평가 결과보고서 내 사업 세부 활동 및 주요 사항 108
표 5.1-1. ⌜2021년 재난안전 신기술 해외보급(ODA)사업⌟ 종합평가등급 111
표 5.1-2. 종합평가 결과표 112
표 5.1-3. 현지 이해관계자 설문조사 응답자 113
표 5.1-4. 참여기업 설문조사 응답자 114
표 5.1-5. 참여기업 설문조사 응답자 114
표 5.1-6. 현지 이해관계자 자체평가 결과 116
표 5.1-7. 현지 이해관계자 자체평가 결과 (100점 환산) 116
표 5.1-8. 참여기업 자체평가 결과 117
표 5.1-9. 참여기업 자체평가 결과 (100점 환산) 117
표 5.1-10. 현지 교육 만족도 조사 결과 118
표 5.1-11. 현지 교육 만족도 조사 결과 (100점 환산) 118
표 5.2-1. 적절성 평가 결과 119
표 5.2-2. 현지 이해관계자 대상 설문 결과 (적절성 - 정책적 타당성) 123
표 5.2-3. 현지 이해관계자 대상 설문 결과 (적절성 - 개발 수요의 부합성) 124
표 5.2-4. 현지 이해관계자 대상 설문 결과 (적절성 - 사업설계의 적절성) 125
표 5.2-5. 타 공여기관의 對라오스 지원 127
표 5.2-6. 한국의 對라오스 재난 분야 지원 규모 추이 (2016~20년) 128
표 5.2-7. KOICA의 재난안전 분야 유사사업 130
표 5.2-8. KOICA의 재난안전 분야 유사사업 - 사업 요소 131
표 5.2-9. 적절성 평가 결과 132
표 5.2-10. 현지 이해관계자 대상 설문 결과 (효율성 - 사업수행체계 및 의사결정) 133
표 5.2-11. 현지 이해관계자 대상 설문 결과 (효율성 - 사업기간) 135
표 5.2-12. 현지 이해관계자 대상 설문 결과 (효율성 - 사업비용) 135
표 5.2-13. 적절성 평가 결과 136
표 5.2-14. 과업수행계획서 수행 결과 137
표 5.2-15. 현지조사 수행내용 분석 결과 138
표 5.2-16. 홍수 예ㆍ경보체계 및 자동 우량경보시설 구축 수행내용 분석 결과 142
표 5.2-17. 현지 이해관계자 대상 설문 결과 (효과성 - 산출물 달성 여부(1)) 143
표 5.2-18. 홍수 예ㆍ경보체계 및 자동 우량경보시설 검ㆍ보정 수행내용 분석 결과 149
표 5.2-19. 현지 이해관계자 대상 설문 결과 (효과성 - 산출물 달성 여부(2)) 149
표 5.2-20. 대상 유역의 수리ㆍ수문 분석 수행내용 분석 결과 150
표 5.2-21. 현지 이해관계자 대상 설문 결과 (효과성 - 산출물 달성 여부(3)) 151
표 5.2-22. 홍수위험도 분석 및 위험지도 구축 수행내용 분석 결과 151
표 5.2-23. 현지 이해관계자 대상 설문 결과 (효과성 - 산출물 달성 여부(4)) 152
표 5.2-24. 공무원 및 전문가 대상 교육 수행내용 분석 결과 153
표 5.2-25. 현지 이해관계자 대상 설문 결과 (효과성 - 산출물 달성 여부(5)) 155
표 5.2-26. 현지 교육 만족도 조사 결과 (정량) 155
표 5.2-27. 성과보고서 및 기술요약서 작성 수행내용 분석 결과 157
표 5.2-28. 한국어ㆍ영어 홍보 동영상 제작 수행내용 분석 결과 157
표 5.2-29. 사후관리 및 유지ㆍ보수체계 수행내용 분석 결과 158
표 5.2-30. 단기성과 달성 여부 159
표 5.2-31. 현지 이해관계자 대상 설문 결과 (효과성 - 단기성과 달성도) 159
표 5.2-32. 현지 이해관계자 대상 설문 결과 (전반적 만족도) 160
표 5.2-33. 적절성 평가 결과 161
표 5.2-34. 현지 이해관계자 대상 설문 결과 (인적ㆍ기술적 지속가능성) 162
표 5.2-35. 현지 이해관계자 대상 설문 결과 (재정적 지속가능성) 163
표 5.2-36. 현지 이해관계자 대상 설문 결과 (제도적 지속가능성) 164
표 5.2-37. 현지 이해관계자 대상 설문 결과 (범분야) 165
표 5.3-1. ⌜2021년 재난안전 신기술 해외보급(ODA)사업⌟ 종합평가등급 166
표 5.3-2. 참여기업 및 현지 이해관계자 자체평가 결과 167
그림 2.3-1. 평가단 구성 39
그림 3.2-1. 평가 추진 절차 45
그림 3.2-2. 현지 조사원 대상 사전교육 및 자문회의 개최 48
그림 3.2-3. 후아판州 쌈느아 지역(좌) 및 싸이쏨분州 타톰郡(우) 현장 점검 참관 50
그림 3.2-4. 수도 기상수문국 서버 점검(좌) 및 교육(우) 참관 50
그림 3.2-5. OECD DAC 평가기준(2019) 62
그림 3.2-6. 사업 구성 요소별 관련 OECD DAC 평가기준 63
그림 3.2-7. 성과관리 프레임워크와 OECD DAC 평가기준 64
그림 3.2-8. 참여기업 자체평가 설문조사지 97
그림 3.2-9. 현지 이해관계자 자체평가ㆍ만족도 설문조사지 98
그림 3.2-10. 교육 만족도 설문조사지 98
그림 4.2-1. 사업대상지역(1) 위치 및 현황: 후아판州 쌈느아 지역 104
그림 4.2-2. 사업대상지역(2) 위치 및 현황: 싸이쏨분州 타톰郡 105
그림 5.2-1. 라오스 주요 공여국 126
그림 5.2-2. 한국의 對라오스 재난 분야 지원 규모 추이 (2016~20년) 128
그림 5.2-3. 한국의 재난 분야 ODA 지원 규모 추이 (2016~20년) 130
그림 5.2-4. 1차 연기요청 서한 134
그림 5.2-5. 2차 연기요청 서한 134
그림 5.2-6. 사업대상지역(1) 현지조사: 후아판州 쌈느아 지역 남삼강 유역 138
그림 5.2-7. 사업대상지역(1) 현지조사: 후아판州 쌈느아 지역 홍수 취약지 분석 139
그림 5.2-8. 사업대상지역(2) 현지조사: 싸이쏨분州 타톰郡 지역 남산강 유역 140
그림 5.2-9. 사업대상지역(2) 현지조사: 싸이쏨분州 타톰郡 지역 침수 피해 140
그림 5.2-10. 사업대상지역(2) 현지조사: 싸이쏨분州 타톰郡 지역 홍수 취약지 분석 141
그림 5.2-11. 쌈느아 및 타톰지역 수위ㆍ강우계, 경보국 종합 배치도 143
그림 5.2-12. 쌈느아 지역 수위ㆍ우량계 (1) 144
그림 5.2-13. 쌈느아 지역 수위ㆍ우량계 (2) 144
그림 5.2-14. 쌈느아 지역 우량계 (3) 144
그림 5.2-15. 쌈느아 지역 우량계 (4) 145
그림 5.2-16. 쌈느아 지역 우량계 (5) 145
그림 5.2-17. 쌈느아 지역 수위계 (3) 145
그림 5.2-18. 쌈느아 지역 수위계 (4) 146
그림 5.2-19. 쌈느아 지역 수위계 (5) 146
그림 5.2-20. 쌈느아 지역 경보국 (1) 146
그림 5.2-21. 쌈느아 지역 경보국 (2) 147
그림 5.2-22. 쌈느아 지역 경보국 (3) 147
그림 5.2-23. 쌈느아 지역 경보국 (4) 147
그림 5.2-24. 쌈느아 지역 경보국 (5) 148
그림 5.2-25. 타톰 지역 수위계 148
그림 5.2-26. 타톰 지역 우량계 148
그림 5.2-27. 타톰 지역 경보국 148
그림 5.2-28. 쌈느아 현지 인력 대상 경보국 시스템 설명 및 직원 실습 150
그림 5.2-29. 쌈느아 남삼강 유역(좌) 및 타톰 남산강 유역(우) 홍수위험지도 152
그림 5.2-30. 후아판 州 홍수관리 담당자 교육 153
그림 5.2-31. 싸이쏨분 州 홍수관리 담당자 교육 154
그림 5.2-32. 기상수문국 담당자 교육 154
그림 5.2-33. 교육 자료: 영문(좌), 라오어(우) 154