(2004~2006年)
一、引言
本方案适用于全球基金中国艾滋病项目各级执行单位。督导指连续地监督整个项目实施的全过程与进展,评估指定期地回顾性地检查评价项目实施的情况与结果。督导与评估对确保全球基金中国艾滋病防治项目高质量地完成,并达到预期目标至关重要。督导与评估强调项目地区的实施人员在开展项目工作中要收集、分析、保存好一切有关的数据、报告或信息。督导评估还是一个与项目活动密不可分的系统,项目省和项目县应高度重视督导评估工作。
二、目的
1、确保项目工作质量、进度及项目目标的实现。
2、发现成功的经验与存在的问题,推广好的做法,及时调整目标与活动。
三、原则
1、与全国艾滋病综合防治示范区的督导评估工作密切结合。
2、督导评估指标紧扣项目具体目标,过程、覆盖与影响指标结合使用。
3、多部门参与,包括非政府组织的参与。
4、保证受益人群,尤其是感染者和病人全面广泛的参与。
5、加强国家、省和县级艾滋病防治体系督导评估的能力建设,包括信息系统的建设和人员的培训。
6、强调将督导评估的结果用于决策、计划与措施活动的调整,以及决定项目拨款与项目点的调整。
7、推行艾滋病治疗的临床和实验室管理督导,加强艾滋病治疗相关人员的能力建设,规范治疗活动。有关具体方案另行制订。
四、组织与管理
1、督导评估专家组
由国家协调委员会(CCM)组建国家督导评估专家组。专家组由熟悉艾滋病综合防治及督导评估工作的专业人员组成,包括政府多部门、国际组织和非政府组织代表,并邀请一定数量的省级专家参与督导评估工作,专家组成员保持相对固定。督导评估专家组负责审查和指导全球基金项目的督导与评估方案,参与重要的督导评估活动,审阅国家项目管理办公室向全球基金执委会提交的督导评估报告。省级与县级执行机构(疾病控制中心)分别组建本级的督导评估专家组。
2、督导评估活动的组织落实
CCM、中国疾病预防控制中心、全球基金国家项目办公室和督导评估专家组是参与制定国家级督导评估计划的主体。由全球基金国家项目办公室负责安排与组织落实国家级督导评估活动,撰写并向CCM提交督导评估报告,最后由CCM报全球基金执委会。在全球基金国家项目办公室有专人负责督导评估工作。
省、县级项目办公室分别安排本地区项目督导评估工作,包括制定详细的工作计划、定期组织督导评估活动、定期向上一级项目办公室报送有关的督导与评估材料和报告。省县级项目办公室也应有人员专门负责督导评估工作。
3、督导评估的能力建设
全球基金国家项目办定期组织(如每年1~2次)举办省县级项目人员参加的督导评估培训班。省级项目办组织县级培训班,县级则组织乡村级培训班。另外通过相互交流与考察学习的形式加强督导评估人员的能力。
4、信息管理
信息管理是一项常规工作,包括信息收集、分析、报表、报告与档案管理,由各级项目管理办公室负责进行。项目县在按项目计划开展各项工作时,要做好各项工作活动指标的收集、档案管理、自我检查和定期报告。
项目实施的资料报告采用季报与年报形式。县级项目办在每季度末或季度结束后的15天内、年度结束的首月15天内,应将项目实施中的活动及其结果根据统一报表上报(通过电子邮件)省级项目办,并撰写本县的分析报告或工作总结;省级项目办将各项目县上报的资料整理汇总后在每季度结束后的30天内、年度结束后的首月30天内,将本省项目实施进展情况上报(通过电子邮件)国家项目办,并撰写本省的分析报告或工作总结。国家项目办及时整理分析各项目省上报资料,并撰写分析报告或工作总结,按规定要求向CCM/全球基金总部报告材料。各级项目办在整理分析资料时,要及时发现分析,并及时沟通与解决问题,以便在现场督导时更具有针对性。季度与年度的报告时限要求见表1。
表1 各级全球基金项目办公室资料报告的时限要求
|
项目办 |
季报 |
年报 |
||
|
报告的资料要求 |
时限要求 |
报告的资料要求 |
时限要求 |
|
|
县级项目办 |
季报表与季度小结 |
下季度首月的15日前 |
年报表与年度总结 |
次年首月的15日前 |
|
省级项目办 |
季报表与季度小结 |
下季度首月的30日前 |
年报表与年度总结 |
次年首月的30日前 |
|
国家级项目办 |
季报表与季度小结 |
下季度次月的15日前 |
年报表与年度总结 |
次年次月的15日前 |
五、督导评估的频度与时间安排
1、分阶段督导评估
项目督导评估分阶段进行,按时间顺序分为三个阶段:即设计阶段的前期督导评估、实施阶段的过程督导评估和两年执行期末的中期评估(本质上也属于实施阶段的评估)。对设计阶段的督导评估结果为不合格的项目县,将安排专家协助其改进工作,并在提出整改建议后的一个月内对其进行追加督导评估,仍然不合格的项目县不得进入实施阶段。项目的实施阶段要进行多次督导评估,发现问题,及时解决。项目执行的两年期末,进行中期评估,根据评估结果确定是否进入下一个实施阶段。本督导评估方案不包括全球基金项目五年完成后的终末评价,有关方案将另行设计。
2、督导评估的频度
国家对省级每半年一次进行现场督导评估,省对县按季度进行现场督导评估,县对乡村至少每月进行一次现场督导评估。
3、现场督导评估的时间安排
2004年9月项目启动至2006年8月两年期间,共安排国家级现场督导评估工作五次,其中2004年度督导评估两次,分别安排在2005年3月份和8月份;2005年度督导评估两次。2006年6月份完成项目的中期评估工作。各项目省、县根据项目书的具体要求和本地实际情况安排本地的现场督导评估工作的时间。
六、督导评估的内容与指标
1、督导评估的内容
(1) 设计阶段的督导评估
主要针对基线调查和实施方案与计划进行评估。
(2) 实施过程与结果的督导评估
针对项目实施过程与结果进行督导评估,包括项目的进度与管理、项目工作的组织建设、政府各部门协调与配合情况、服务能力、艾滋病人的治疗与综合关怀支持活动、艾滋病传播的阻断、健康教育活动及大众参与等。
2、督导评估的指标
根据全球基金中国艾滋病防治项目2年工作计划中的8大具体目标及有关参考文献制定督导评估指标,包括过程、覆盖与影响3个方面,分为投入、过程、产出、结果与影响指标5类,其中核心指标9个(详见附录1)。
七、督导评估的方法
1、现场督导评估
(1) 督导评估前的培训:统一方法,提高督导评估能力。
(2) 复习上次督导评估报告及项目实施方案(第一次督导评估除外)。
(3) 收集现场督导评估相关的信息:分为定性的方法与定量的方法。
①定性的方法
· 召开座谈会:听取当地示范区工作情况汇报和讨论实施中出现的问题。座谈会由多部门参加。
· 小组访谈。
· 个人访谈。
· 查阅有关档案资料(文件、记录、照片、报表等)。
· 现场考察/观察。
②定量的方法:抽样调查。
(4) 收集信息的对象:包括项目县主要负责人2名、主要执行人员3名以上、熟悉项目县的项目知情人士3名以上(可根据项目涉及的部门而定:如关怀可考虑民政、扶贫、农业的干部,针对吸毒可考虑禁毒干警,性传播可考虑治安、派出所干警、文化部门的干部,青少年可考虑教育部门的干部、学校老师等),熟悉项目受益人的知情人各3名以上,项目受益人各5名以上。
2、非现场督导评估
CCM、国家督导评估专家组和全球基金国家项目办公室按季度和年度评价项目省和项目县的季度与年度工作报表与报告。省级项目办按季度和年度评价项目县的工作报表与报告,项目县则按月评价乡村的报表与报告。各级在评价工作报表与报告中,发现问题要及时联系与沟通,及时解决问题。另外,在常规工作中通过电话、电子邮件等联系方式进行督导评估,及时发现问题和解决问题。
3、相互或交叉督导评估
由全球基金国家项目办公室负责组织7个项目省间人员的相互或交叉督导评估,既可提高项目省督导评估人员的能力,又可起到考察学习、交流经验的作用。省级可以根据情况组织项目县间的相互或交叉督导评估。
八、督导评估结果的判断标准
根据项目的8大具体目标,制定了2年项目阶段拟完成的13项核心工作指标,作为判断项目活动的主要标准。同时,对督导评估的每个指标按季度、半年或年度制定出了数量化的标准,该标准作为督导评估项目进程与效果的依据。以项目县为单位按年度进行总评价,评价等级分为优秀、良好、合格和不合格;对不合格者应限期改进,否则不给予下年度拔款;对优秀与良好者给予奖励。督导评估结果的判断标准见表2。
表2 督导评估结果的判断标准
|
评价等级 |
标 准 |
|
优秀 |
13个核心指标均完成,并完成了其它26个关键指标中的23个以上 |
|
良好 |
完成了13个核心指标中的11个,并完成了其它26个关键指标中的21个以上 |
|
合格 |
完成了13个核心指标中的8个,并完成了其它26个关键指标中的16个以上 |
|
不合格 |
仅完成了13个核心指标中的7个及以下,或仅完成了26个关键指标中的15个以下。 |
注:关键指标共有39个,其中核心指标13个。
九、督导评估报告与结果的利用
1、督导评估报告与反馈
(1) 督导评估小组讨论,整理督导意见。
(2) 撰写督导评估的初步报告:包括优点与经验、存在的问题与不足、建议与解决的方法等。
(3) 现场反馈督导评估的初步结果及提供技术支持。
(4) 与当地项目相关人员座谈,听取地方对督导评估现场反馈的意见。
(5) 撰写督导评估书面报告,提交国家项目办公室,由后者报CCM和GFATM秘书处。
2、督导评估结果的正式反馈与改进时限
将督导评估结果报告以书面的形式正式反馈到被督导的负责单位和省县项目办公室,根据专家提出的建议和解决的方法在规定时限内(如1个月之内)改进。
3、督导评估报告的分发
将督导评估报告分发到相关的单位与人员。
4、督导评估结果的利用
应充分利用督导评估的数据,将督导评估数据用于决策、制定计划,根据督导评估结果调整今后的目标、措施与活动。根据完成任务或指标结果,调整计划或决定下一步拨款。
十、督导评估的经费预算
1、国家级督导评估2年活动经费
约768,176美元,占中央项目活动经费的26.39%。
2、省级督导评估2年活动经费
河北省约为232,214美元,占项目活动经费的8.39%;山西省134,085美元,占10.20%;安徽省171,363美元,占8.35%;山东省171,733美元,占11.19%;河南省394,696美元,占8.58%;湖北省217,508美元,占7.79%;陕西省80,634美元,占9.11%。
全球基金中国艾滋病项目的全部督导评估经费为2,170,409美元,占整个项目活动经费的11.52%。
参考文献:
1、 全球基金督导评估工具包((Monitoring and evaluation Toolkit)
2、 全国艾滋病综合防治示范区督导评估方案
3、 联合国艾滋病规划署《核心指标构建指南》(UNGASS指标)(UNAIDS: Guidelines on Construction of Core Indicators)
4、 联合国艾滋病规划署《国家艾滋病项目督导评估指南》(2000)(UNAIDS: National AIDS Programmes: A Guide to Monitoring and Evaluation)(2000)
5、 世界卫生组织《艾滋病关怀支持项目督导评估指标》(2002)(WHO: Indicators for monitoring and evaluation of HIV/AIDS care and support programme)
附录1
全球基金第三轮中国艾滋病项目核心指标(2005年4月调整)
|
1. |
国家: |
中华人民共和国 |
|
2. |
疾病: |
HIV/AIDS |
|
3. |
协议书编号: |
CHN-304-G03-H |
|
4. |
中央执行机构: |
中国疾病预防控制中心 |
|
5. |
报告开始日期: |
|
|
6. |
报告结束日期: |
|
|
7. |
拔款的数量(美元): |
32,112,550 |
目标1 建立开展艾滋病关怀、治疗和预防活动的有效服务网络
|
关键指标 |
基线数据(如果使用) |
2004年9—12月 |
2005年 (调整后的预期结果/目标) |
2006年 (预期结果/目标) |
数据收集 的频度 |
数据收集 负责单位 |
|||
|
原预期结果/目标 |
实际完成 |
第1季度 |
第2季度 |
第3、4季度 |
|||||
|
1、对培训员和教员,包括项目与资金管理、自愿咨询与检测、干预与外展、治疗、护理、关怀与支持等方面的骨干(师资)开展培训的人数。 |
|
232 |
2014 |
2620 |
3020 |
||||