使用发展性评估的五项原则

导读

Foreword

发展性评估颠覆了传统的评估角色，注重利用适时的数据和反馈完善干预措施。盖茨基金会在“社区合作伙伴”计划中，利用发展性评估，动态迭代解决方案。作者根据从该项目中获得的经验总结了五项发展性评估的核心原则：从“证明影响力”转向“学习”、以变革理论为指导、动态优化问题指标与方法、建立共同反思与策略制定机制，以及构建多元化评估团队。

如今，慈善机构和非营利组织比以往任何时候都更加认真地对创新进行投入，从影响力投资到聘用创新官员。然而，作为一个行业，我们却鲜少在复制推广前通过研发（R&D）来优化干预措施。当前亟需建立有目的的流程（intentional process），在进入严格的影响力评估之前，帮助我们承担经过仔细考虑的风险、测试并打磨新方案，最终推出设计为更完善的项目。

大多数由捐赠资金支持的项目，其评估标准往往局限于能否达成预设的静态指标。但对于一个仅基于一系列假设，却尚未经过测试的创新项目——即使你认为它将带来更好的成果——应该如何评估其产出呢？

发展性评估（developmental evaluation，DE）颠覆了传统的评估角色，它注重利用适时的数据和反馈完善干预措施。这好比带有社会使命的产品原型的测试或公测版本。若运用得当，发展性评估将成为社会领域创新的关键驱动力。

我们在评估比尔及梅琳达·盖茨基金会“社区合作伙伴”（Community Partnerships）计划过程中的实践经验，提供了一个发展性评估在实践中的应用示例。

提高低收入青年人的大学毕业率，使他们获得具有公平市场价值的学历证书，是该基金会的教育使命之一。然而迄今为止，各类提升大学毕业率的举措却催生出一个支离破碎的体系，尤其使少数族裔与低收入家庭学生，以及第一代大学生面临掉队风险。为此，基金会希望了解：当整个社区都以提升大学毕业率为目标时，将发生什么？需要哪些条件？由谁来领导？又该如何重构企业、高校与学区之间的协作模式？

自2009年起，该基金会已联合了七个城市近350位社区利益相关者、两家中介机构，并携手OMG中心作为评估合作伙伴，共同对这些问题进行探索。通过深度参与，我们确定了五个发展性评估原则，可以为社会领域的研发工作提供动力：

调整预期，从影响力评估转向学习。发展性评估的核心并非报告投资本身可能带来的影响力，而是利用数据，共同设计出最有可能产生影响力的策略。作为评估者，我们的职责是与资助者、中介机构、受资助者及其合作伙伴并肩工作，记录并评估哪些策略在何种条件下最能有效地促使社区接纳提升大学毕业率的计划，支持学生获得成功。例如，某社区的合作历史或利益相关者之间的熟悉程度对策略和选择适当的衡量标准都会产生影响。

以变革理论为指导。“社区合作伙伴”并不是要测试出一个理想化的模型。事实上，在一开始，变革理论（TOC）的要素仅是四个宽泛的工作领域：建立承诺、使用数据、发展合作伙伴关系，以及推动政策和实践转变。变革理论刻意保持其模糊性，允许各方根据自身情况与认知开展工作，这种模糊性恰恰为真正的研发提供了空间。作为评估人员，我们的职责是通过清晰地阐明变化是如何在不同的背景下发生的，以减少变革理论的模糊性。

动态优化问题、方法与指标。就像变革理论一样，随着我们从实地工作中学到更多东西，评估计划的所有要素也在不断变化。我们会放弃不适用的方法论、引入新的研究问题与衡量指标，同时识别并测量结果。例如，我们最初的目标是衡量项目承诺的履行情况，而现在我们则要识别并跟踪利益相关者是如何因其承诺而采取了不同的行动。市长是否会定期确保新的教育项目支持毕业率的提升？如果某些项目不支持大学入学准备，学区负责人是否会削减这些项目？

建立共同反思与策略制定机制。研发的核心价值在于依据实时信息对策略进行反思与优化。尽管这可能会模糊评估者与合作伙伴之间的界限，但尽可能吸纳多元观点并广泛纳入利益相关方，能够催生更具建设性的对话，形成更贴合不同参与者实际且能产生更多共鸣的策略。这一过程还能增强集体信任与承诺。

构建多元化评估团队。发展性评估是混乱的、快节奏的、复杂的，它需要的技能超出了内容和方法论的专业知识。要使发展性评估发挥作用，需要组建具备以下核心能力的团队：出色的协作引导能力、识别非正式系统与权力关系的洞察力、强有力的战略咨询素养，以及在模糊情境中持续推进的韧性。

践行这些方法虽无法减少解决社会不平等问题过程中的固有挑战，但通过采用类似“社区合作伙伴”计划这样复杂且快速迭代的项目的评估方法，我们将获得关键的结论，从而制定出更具敏捷性的正向社会变化方案——这些方案兼具可测量性、可持续性与可扩展性。

梅格·朗是OMG协作学习中心（OMG Center for Collaborative Learning）的副主任，该中心是一家专注于评估、战略和能力建设的公司，致力于帮助慈善机构和社区合作伙伴进行更明智的投资并加速成果的实现。

来源：《斯坦福社会创新评论》英文网站2012年11月8日

原标题：Impact by Design: Making R&D Work for the Social Sector