
二 评估方法
本项评估主要从需求评估、逻辑评估、过程评估和效益评估四个方面开展,这四个方面与一个项目自身的萌芽、设计、诞生、执行、产出、影响遵循同样的时间和发展逻辑,前后贯通、环环相扣、首尾呼应,构成完整、系统的逻辑链条,详见图1。本报告的篇章结构也是按照这一逻辑展开。

图1 评估方法
(一)需求评估
从项目运行的角度来看,公益机构自身的存在就伴随着有自己独特的需求(机构宗旨、使命),与此同时,特定的历史时期、特定地域不同的目标群体有着各种各样的社会需求或社会问题需要解决。公益机构在设计项目时一般从这两个角度出发,彼此兼顾,推出一定的项目或项目组合来回应这些需求或问题。
从评估的角度来看,评估通常是在项目实施一段时间后进行的,也就是说,在评估的时间点上,项目回应的需求是既定的。不能将需求评估误解是在项目还未开展时对社会需求做分析和界定。
需求评估的主要目的是要评价项目回应的那些需求是否具有重要性、长期性和紧迫性,并且项目是不是优先、及时地回应了那些需求,同时,所回应的这些需求是不是符合机构的宗旨,与其他组织相比,机构在做这些项目时是不是有比较优势。
(二)逻辑评估
从项目运行的角度来看,当项目锁定了所要回应的社会需求之后,就要通过设计一系列的干预手段、投入一定的资源来回应和满足这些需求。为了使项目能够良好地运转、解决项目所要解决的现实问题,必须要有稳定的组织架构和运行机制。
从评估的角度来看,逻辑评估就是对这一整套既定设计中的要点进行评价。最重要的目的是要得出以下三个层次的评判结论。
其一,项目所采取的一系列手段是否与项目锁定的需求之间有直接的因果对应关系。比如青少年的需求是性健康,那么进行性健康教育与该需求之间是否有直接或最直接的关联。
其二,如果项目采取的一系列手段与满足需求之间建立了牢固的对应因果关系,就需要一套组织保障来保证项目能够有效启动运转起来。因此,评估时需要梳理和描述项目的组织保障,并评判其合理性在哪里,是否为相对优化的设置,可能的风险在哪里。
其三,如果项目的干预手段直接回应了需求,而且项目建立了合理优化的组织架构,那么剩下的环节就要设计一套标准的推进和运行机制来实际执行项目,评估时首先要考虑的是该机制能否将干预措施高效地送达目标群体,是否有可持续性。
(三)过程评估
从项目运行的角度来看,项目的设计已经完成,接下来自然而然地就是项目的实际执行层面,即项目“落地”的过程。
从评估的角度来看,逻辑评估所面对的是“纸面”上的设计,它解决的问题是评判项目设计与需求之间是否有直接因果关系,以及项目设计能否从理论上保证项目有效地运转。而过程评估所要解决的问题是,由于现实逻辑不一定与理论逻辑一致,而现实是衡量理论的依据,因此必须回答项目设计中的方方面面在现实中落实得如何、存在什么样的问题。其操作方法是,对照逻辑评估中的要点,在现实中通过资料查阅、访谈、问卷调查等方式收集到正反面的证据,对这些要点在现实中的实际情况做出描述和评价。
(四)效益评估
从项目运行的角度来看,执行、落实项目是为了项目的成功“落地”,有效回应当初锁定的目标群体的需求,并且产生一定预期的结果。
从评估的角度来看,效益评估要解决的问题是,评估项目是否达到了预期的目标,在这里,再次回到项目最初锁定的那些需求是否得到了满足。主要从以下几个方面得出结论。
其一,项目产出评估。这强调看得见、摸得着的产出,通常表现为具体的支出金额落实的情况、受益者的数量。与此同时,还必须对支出的空间分布、项目结构及比例等特征进行分析,评价其是否满足了回应需求的优先性要求。
其二,对受益者的影响评估。这强调对受益者本身所带来的直接影响,对受益者来说究竟意味着什么,能够对他们产生什么样的作用和影响。
其三,对社会的影响评估。这强调项目的运行造成了什么样的社会观感,对人们的意识等变化有何作用。