影响评估

影响评估提供有关干预措施产生的影响的信息 - 积极和负面,意图和非预期,直接和间接。这意味着影响评估必须建立观察到的改变的原因(在这种情况下,“影响”)被称为因果归属(也称为因果推断)。

如果影响评估未能系统地进行因果归属,则评估会产生不正确的发现并导致不正确的决定产生更大的风险。例如,当程序实际上在某些有限的情况下实际上无效或有效时,决定扩展,或者如果在可以进行限制因素时决定退出时,如果解决了限制因素。

1什么是影响评估?

影响评估提供有关干预产生的影响的信息。

干涉可能是一个小项目,一个大计划,活动集合或政策。

许多发展机构使用的定义影响由此提供经济合作与发展组织 - 发展援助委员会

“积极和消极,初级和次要的长期效应,由开发干预,直接或间接地,意图或意外地产生。”(OECD-DAC 2010)。

该定义意味着影响评估:

  • 超越描述或衡量所发生的影响,以了解制作干预的作用(因果归属);
  • 可以包括广泛的因果归属方法;和,
  • 包括检查意外的影响。

2为什么会影响评估?

可以进行影响评估,以改进或重新定位干预措施(即,为形成目的),或为决定是否继续、中止、复制或扩大干预措施(即,为总结性目的)提供信息。

虽然许多形成性评估关注过程,但如果正在进行干预,也可以使用影响评估。例如,影响评估的结果可用于通过识别要监控和紧密管理的关键元素来改善下次摄入参与者的程序的实施。

最常见的是,影响评估用于总结目的。理想情况下,总结影响评估不仅会产生关于“什么作品”的结果,还提供了有关在不同设置中为不同组进行干预工作所需的信息的信息。

3何时进行影响评估?

只有在能够明确确定其预期用途并可能产生有用结果的情况下,才应进行影响评价,同时要考虑到资源的可用性和对所调查的干预措施作出决定的时间。一个评估评估可能需要先完成以评估这些方面。

为影响评估确定干预措施的优先次序应考虑:评估与组织或发展战略的相关性;其潜在的有用性;高级管理人员或政策制定者对利用其调查结果的承诺;以及/或其可能用于宣传或问责要求。

考虑影响评估的时间也很重要。姗姗来迟时,调查结果为时已晚以通知决策。在完成太早时,它将提供一个不准确的影响的图片(即,当他们在随着时间的推移时不够的时间开发或夸大时,将会受到影响。

问题 影响评估可能是适当的...... 影响评估可能不合适,当…
预期用途和时间 使用该结果有范围可通知有关未来干预的决策。 例如,没有明确的预期用途或预期用户 - 例如,在现有可信证据的基础上已经进行了决策,或者需要在有可能进行可靠的影响评估之前进行。
重点 有必要了解已经产生的影响。 这一阶段的首要任务是理解和提高实施的质量。
资源 有足够的资源进行充分全面和严格的影响评估,包括现有优质数据的可用性以及收集更多数据所需的额外时间和资金。 现有数据不充分,资源不足以填补空白。
关联 它与组织,伙伴关系和/或政府的策略和优先事项明显相关。 它是组织,伙伴关系和/或政府的策略和优先事项的外围。

4谁参与评估过程?

无论评估的类型如何,重要的是要思考谁应该参与,为什么和在评估过程的每个步骤中如何以及如何制定适当和上下文的参与式方法。参与可能会在影响评估过程的任何阶段发生:在决定在数据收集中进行评估,在分析中,在报告中,也可以在管理中。

清楚的是,在影响评估中的参与式方法的目的是管理期望和指导实施的重要第一步。十博官方网站网页版目的是确保人员或政策应得到改善的那些人的声音是调查结果的核心?是为了确保相关的评估重点?是否可以听到人们自己的改变版本,而不是获得外部评估者的指标集?是建立捐助资助计划的所有权吗?这些和其他考虑因素将通过不同组合在影响评估中的利益相关者的不同组合而导致不同形式的参与。

选择参与方式进行影响评价的基本理由可以是务实的,也可以是伦理的,或者两者结合。务实是因为得到了更好的评价(即更好的数据、更好地理解数据、更适当的建议、更好地吸收调查结果);因为这是正确的事情(即,根据联合国以人权为基础的规划方法的规定,人们有权参与告知将直接或间接影响他们的决策)。

参与式方法可用于任何影响评估十博官方网站网页版设计。换句话说,它们不是特定的评估方法或限制定量或定性数据收集和分析。

任何受影响评估的出发点都希望使用参与式方法在于澄清该价值,这将增加评估本身以及将密切参与的人(但也包括他们参与的潜在风险)。十博官方网站网页版每种情况都需要回答三个问题:

(1)利益相关者参与的目的在这种影响评估中致力于什么?

(2)谁的参与事项,何时何地?和,

(3)参与何时可行?

只有在解决这些问题后,才能发出如何使影响评估更加参与。

有关更多信息,请参见:

5如何规划和管理影响评估?

与任何其他评估一样,应当正式计划的影响评估并作为一个离散项目进行管理,其中决策过程和管理安排清晰地描述了该过程的开始。

规划和管理包括:

  • 描述需要进行评估和开发评估简报的内容
  • 识别和调动资源
  • 决定谁将进行评估并参与评估员
  • 决定和管理开发评估方法的过程
  • 管理评估工作计划的发展
  • 管理工作计划的实施,包括报告的开发
  • 分发报告并支持使用

确定因果归属是要求评估影响评估的要求。设计选项(无论是实验,准实验性还是非实验性的)都需要在准备和早期数据收集方面需要大量投资,如果影响评估限制在对干预实施结束时进行的短暂运动,则无法进行。因此,尤为重要的是,作为综合监测,评估和研究计划和制度的一部分,产生影响评估以及提供的一系列证据,以便为决策提供综合监测,评估和研究计划和系统。这也将确保根据需要使用其他M&E活动的数据,例如性能监测和过程评估。

有关更多信息,请参见:

6哪种方法可用于影响影响评估?

框架影响评估的边界

评估目的是指进行影响评估的理由。正在进行支持学习的评估应该是清楚的,旨在从中学习,他们将如何从事评估过程,以确保它被视为相关和可信,以及是否存在此学习的特定决策点预计将适用。为支持问责制的评估应该是清楚谁被持有的责任,对谁和而言。

Evaluation relies on a combination of facts and values (i.e., principles, attributes or qualities held to be intrinsically good, desirable, important and of general worth such as ‘being fair to all’) to judge the merit of an intervention (Stufflebeam 2001). Evaluative criteria specify the values that will be used in an evaluation and, as such, help to set boundaries.

许多影响评估使用经合组织- dac标准(经合组织- dac 2015年访问):

  • 关联:干预目标的目标是与受助者的要求,国家需求,全球优先事项和合作伙伴政策一致。
  • 有效性:考虑到他们的相对重要性,达到了干预目标的目标的程度,或预计将实现。
  • 效率:衡量经济资源/投入(资金,专业知识,时间,设备等)转换为结果的衡量标准。
  • 影响:无论是直接还是间接,意图或意外,干预产生的正负初级和次要长期效果。
  • 可持续性:在主要发展援助停止后,继续从干预中获得好处。干预措施必须在环境和财政上都是可持续的。如果重点不在于外部援助,可持续性可以定义为关键利益攸关方在捐助者停止供资后,通过努力利用当地可用资源维持干预效益的能力。

OECD-DAC标准反映了评估发展援助(OECD-DAC 1991)的核心原则,并被大多数发展机构作为评估良好做法标准。其他,常用的评估标准是股权,性别平等和人权。并且,一些人用于特定类型的发展干预,如:覆盖,协调,保护,一致性等人道主义援助。换句话说,并非所有这些评估标准都在每种评估中使用,这取决于干预的类型和/或评估类型(例如,撞击标准与过程评估无关)。

评估标准应该被认为是在评估中必须解决的“概念”。它们不充分地定义为系统地应用,并以透明的方式应用,以对干预进行评估判断。在每个“通用”标准中,更具体的标准,例如基准和/或标准*-与干预的类型和背景相适应-应得到定义,并与关键利益相关者达成一致。

评估标准应明确反映在评估旨在解决的评估问题中。

*基准或索引是一组相关指标,提供有意义,准确和系统的对性能的比较;标准或标准是一组相关的基准/索引或指标,提供有关性能的社会有意义的信息。

定义影响评估应解决的关键评估问题(KEQs)

影响评估应侧重于回答少数高级关键评估问题(KEQS),这些问题将通过证据组合回答。这些问题应明确涉及评估标准。例如:

KEQ1。 干预设计/内容的质量是什么?[评估相关性,股权,性别平等,人权]
KEQ2。 干预措施的实施和调整情况如何?[评估有效性、效率]
KEQ3。 干预措施是否在短期,中长期和长期内产生了预期的结果?如果是这样,对于谁,在多大程度上和在什么情况下?[评估有效性、影响、公平性、性别平等]
KEQ4。 干预产生了什么意想不到的结果——积极的和消极的?这些是如何发生的?[评估有效性、影响、公平性、性别平等、人权]
KEQ5。 有什么障碍和推动者,使成功和令人失望的干预实施和结果之间存在差异?[评估相关性,股权,性别平等,人权]
KEQ6。 结果是服务提供商,客户,社区和/或组织的结果如何?[评估相关性,股权,性别平等,人权]
KEQ7。 干预措施在多大程度上代表了最佳利用可用资源,以实现对参与者和社区最大价值的结果?[评估效率]
KEQ8。 是否有可能持续存在的积极结果?在什么情况下?[评估可持续性、公平性、性别平等和人权]

然后应阐明一系列更详细的(中级和下层)评估问题以详细解决每个评估标准。所有评估问题都应明确联系起来的评估标准,以确保全部涵盖标准。

keq还需要反映影响评估的预期用途。例如,如果一项评估旨在告知试点项目的扩大,那么仅仅问“它起作用了吗?”是不够的。或“影响是什么?”需要很好地了解这些影响是如何在活动和支持性背景因素方面实现的,以复制成功的试点的成就。公平问题要求影响评价超越简单的平均影响,以查明方案是为谁和以什么方式取得成功的。

在Keqs内,识别所涉及的不同类型的问题也是有用的 - 描述性,因果和评估。

  • 描述性问题询问如何以及发生了什么事,包括描述初始情况以及如何改变干预和其他相关方案或政策的活动,参与者特征和实施环境。
  • 因果问题询问是否以及在多大程度上,观察到的变化是由于评估的干预而不是其他因素,包括其他方案和/或政策。
  • 评价问题询问关于计划或政策是否可以被视为成功,改进或最佳选择的总体结论。

影响评估必须对所有这些问题有可信的答案。

有关更多信息,请参见:

定义的影响

通常理解的影响通常比中级结果发生在一起。例如,在以前的情况下,实现了改善进入土地的中级结果,增加了社区决策的增加水平,并为妇女改善健康和福祉的预期最终影响。结果和影响之间的区别可以是相对的,并取决于干预的指定目标。还应注意,可能会产生一些影响,因此不能预测。

有关更多信息,请参见:

定义成功是做出评估性的判断

评估,根据定义,答案评价问题,即关于质量和价值的问题。这是评估的评价如此有用,而且比仅仅是指标或观察和故事的摘要。

在任何影响评估中,重要的是定义第一个由“成功”(质量,价值)的意义。这样做的一种方法是使用特定的标题,为每个评估标准定义不同级别的性能(或标准),决定将收集哪些证据以及如何合成,以达到可辩护的结论,以获得关于介入的价值的可靠结论。

至少,应该清楚在平衡多重影响或分布影响时,什么样的权衡才是合适的。由于发展干预措施往往具有多重影响,且分布不均匀,因此这是影响评价的一个基本要素。例如,如果一项经济发展方案增加了家庭收入,但也产生了有害的环境影响,它是否应被视为成功?如果平均家庭收入增加,但最贫穷家庭的收入减少,是否应被视为成功?

为了回答评估问题,必须首先定义“质量”和“价值”的意思,然后收集相关证据。质量指的是有多好的东西;价值是指在具体情况方面有多好,特别是考虑到用于生产它的资源以及它应该解决的需求。综合这些要素的评价推理是为了制定可辩护的(即,良好的合理,并且证明)对评估问题的答案。

评价推理是所有评价的要求,不管使用的方法或评价方法。

评估应具有一组有限的高级问题,这是整体性能的。通过询问有关优点的特定维度的更详细问题以及有时甚至更低的问题,应进一步解开这些KEQ。评价推理是将下级和中级问题的答案综合符合可辩护的判断的过程,直接回答高级问题。

有关更多信息,请参见:

使用改变的理论

评价如果不仅调查活动与影响之间的联系,而且调查活动、产出、中间结果和影响之间的因果链上的联系,就会产生更有力和更有用的结果。“变化理论”解释了如何理解活动产生一系列结果,有助于实现最终的预期影响,有助于指导因果归因的影响评估。

在每次影响评估中应以某种形式使用变革理论。它可以与任何旨在推断因果关系的研究设计,它可以使用一系列定性和定量数据,并提供支持从混合方法影响评估中产生的数据。

在规划影响评价和拟订职权范围时,应审查方案或政策的任何现有改变理论是否适当、全面性和准确性,并视需要加以修订。在评估过程中,如果干预本身或对干预如何起作用的理解(或意图是如何起作用的)发生变化,应该继续对其进行修订。

然而,一些干预措施不能提前计划 - 例如,实施的计划,实施必须响应新出现的障碍和机会,以支持挥发性政治环境中立法的发展。在这种情况下,将需要不同的策略来开发和使用影响评估的变化理论(Funnell和Rogers 2012)。对于一些干预措施,可以将新出现的变化理论记录为不同的策略,并进行改编或更换。在其他情况下,可能有一个高级别的理论,改变如何发生(例如,通过提供激励措施),也是关于在特定环境中要做什么的新兴理论。在其他地方,它的根本基础可能会围绕自适应学习,在这种情况下,变革理论应该侧重于阐明各种行动者如何聚集和使用信息,以持续改进和适应。

改变理论可以通过多种方式支持影响评估。它可以识别:

  • 具体的评估问题,尤其是与改变理论的元素有关,但目前没有实质性证据
  • 应包含在数据收集中的相关变量
  • 中间结果,可以用作在评估时间框架期间不会发生利息的影响的情况下成功的标志
  • 应检查的实施方面
  • 可能相关的上下文因素应该在数据收集和分析中处理,以寻找模式。

评估可以证实变革理论,或者可以根据证据分析建议细化。影响评估可以检查沿因果链的成功,如有必要,检查替代因果路径。例如,未能实现中间结果可能表示实现失败;未能达到最终的预期影响可能是由于理论失败而不是实施失败。这对评估出来的建议具有重要意义。在实施失败的情况下,建议提高实施质量的行动是合理的;在理论失败的情况下,有必要重新考虑实现影响的整个策略。

有关更多信息,请参见:

决定评估方法

评估方法规定了如何回答关键评估问题(KEQS)。它指定了因果归属的设计,包括如何构建比较组,以及数据收集和分析的方法。

确定因果归因的策略和设计

因果归属由OECD-DAC定义为:

“观察到(或预期将被观察)变化和具体干预之间的因果关系的归属。”(OECD_DAC 2010)

此定义不要求更改由调查(UNEG 2013)的计划或政策完全或全部制作或全面制作。换句话说,考虑到其他原因也可能涉及,例如,感兴趣领域或某些上下文因素(通常被称为“外部因素”)的其他程序/策略。

影响评估中的因果归因有三种广泛的策略:

  • 与观察到的情况相比,估计反事实(即,在没有干预的情况下发生了什么)
  • 检查在变革理论中明确明确的因果关系的证据一致性
  • 排除了其他解释,通过一个逻辑的,基于证据的过程。

使用这些策略的组合通常有助于增加所吸引的结论的强度。

有三种设计选项可以解决因果关系:

  • 实验设计- 通过随机分配构建一个控制组。
  • 准实验设计- 通过匹配,回归不连续性,倾向分数或其他方式来构建比较组。
  • 非实验设计——系统地研究如果干预产生了影响,证据是否与预期相符,以及其他因素是否能提供另一种解释。

有些个人和组织使用较窄的影响评估定义,并且仅包括含有某种反应性的评估。当决定评估或由合作伙伴或资助者的预期用户被视为可信的方法或研究设计时,这些不同的定义很重要。

有关更多信息,请参见:

➟数据收集,管理和分析方法

为所有类型的评估而选择良好的数据收集和分析方法是必不可少的。影响评估需要超越评估效果的规模(即平均影响),以确定计划或政策成功的方式。What constitutes ‘success’ and how the data will be analysed and synthesized to answer the specific key evaluation questions (KEQs) must be considered up front as data collection should be geared towards the mix of evidence needed to make appropriate judgements about the programme or policy. In other words, the analytical framework – the methodology for analysing the ‘meaning’ of the data by looking for patterns in a systematic and transparent manner – should be specified during the evaluation planning stage. The framework includes how data analysis will address assumptions made in the programme theory of change about how the programme was thought to produce the intended results. In a true mixed methods evaluation, this includes using appropriate numerical and textual analysis methods and triangulating multiple data sources and perspectives in order to maximize the credibility of the evaluation findings.

通过回顾现有数据可以使用到何种程度来开始数据收集计划。在审查了当前可用的信息之后,创建一个评价矩阵(见下文)是有帮助的,它显示将使用哪些数据收集和分析方法来回答每个KEQ,然后确定需要通过收集新数据来解决的数据差距并对其进行优先级排序。这将有助于确认计划的数据收集(和现有数据的整理)将涵盖所有keq,确定不同数据源之间是否有足够的三角测量,并帮助设计数据收集工具(如问卷、访谈问题、数据提取工具,用于文档审阅和观察工具),以确保他们收集必要的信息。

评估矩阵:将数据收集匹配为关键评估问题

关键评估问题的例子(KEQS)

计划参与者调查

关键信息面试

项目记录

观察计划实施

KEQ 1的实施质量是什么?

KEQ 2在多大程度上满足了什么程度?

KEQ 3该计划有哪些其他影响?

KEQ 4程序如何改进?

收集数据有许多不同的方法。虽然许多影响评估使用各种方法,但区分“混合方法评估”是什么系统的整合定量和定性的方法和方法在评价的所有阶段(Bamberger 2012)。使用混合方法的一个关键原因是,当单独使用时,它有助于克服每种方法固有的弱点。当来自不同数据源的信息趋同时(也就是说,它们对研究结果的方向是一致的),它还可以增加评价结果的可信度,并可以加深对项目/政策、其影响和背景的理解(Bamberger 2012)。

良好的数据管理包括开发有效的流程:持续收集和记录数据,安全地存储数据,清理数据,传输数据(例如,在用于分析的不同类型的软件之间),有效地呈现数据,使数据可被他人验证和使用。

特定的分析框架和特定数据分析方法的选择取决于影响评估的目的以及本质上与此内部相关的KEQ的类型。

回答描述为keq是一系列的分析选项,可以分为两个关键类别:定量数据(数字)选项和定性数据(例如,文本)选项。

回答因果关系KEQS,因果归因分析基本上有三种广泛的方法:(1)反事实方法;十博官方网站网页版(2)具有因果关系的证据的一致性;(3)排除替代方案(见上文)。理想情况下,这些方法的组合用于建立因果关系。十博官方网站网页版

回答评价应采用keq,即与所采用的评价标准(如经合发组织-发展援助委员会标准)相联系的具体评价标准,以便综合证据并对干预的价值作出判断(见上文)。

有关更多信息,请参见:

7如何报告调查结果并支持其支持?

评估报告应以反映评估目的和KEQ的方式构建。

在第一审议中,应简洁地说,证明与相关性,有效性,效率,影响和可持续性的相关性,有效性,效率,影响和可持续性以及股权,性别平等和人权的思考相关的具体问题,但有足够的细节证实结论和建议。

特定的评价规则应用于“解释”证据,并确定哪些考虑因素至关重要或迫切。随后应合成有关多维维度的证据,以产生高级评估问题的答案。

评估报告的结构可以极大地促进对评估问题的直接回答的简洁报告,并辅以足够的关于评估推理和方法的细节,使读者能够遵循逻辑和清楚地看到证据基础。

以下建议将有助于为评估推理的评估报告提供明确的期望:

  1. 执行摘要必须包含用于指导整个评估的KEQ的直接和明确的评估答案。

  2. 在呈现调查结果时必须使用明确评估语言(而不是仅描述调查结果的值中性语言)。应提供实例。

  3. 使用清晰和简单的数据可视化,呈现易于理解的“快照”,说明干预在各个方面的效果。

  4. 使用KEQS作为副标题的调查结果部分(而不是经常完成的类型和证据来源)。

  5. 使用的评估推理必须清晰透明,解释对非评估者和对主题没有深入内容专业知识的读者来说都是清晰易懂的。这些解释在报告的正文中应是广泛和简短的,在附件中有更详细的说明。

  6. 如果评估尺寸相对较小,则这些应包括在报告的主体中。如果它们很大,则应在报告的主体中包含至少一两个或两个的简要摘要,并在附件中包含所有Qualrics。

有关更多信息,请参见:

资源

概述/介绍影响评估

联合国儿童基金会影响评价方法论简报和视频

概述简报(1,6,10)以英文提供,法语和西班牙语并由白板动画视频以三种语言支持;简短7(RCT)还包括视频。

UNICEF-BetteRevaluation影响评估网络研讨会系列

在2015年,BetteRevaluation与联合国儿童基金会研究办公室-因诺琴蒂为儿童基金会工作人员开发八个影响评估网络研讨会。目的是提供互动能力建设经验,定制,以重点关注儿童基金会的工作以及在国际发展方案和政策的影响评估的独特情节。网络研讨会基于影响评估系列- 用户友好的13个方法论简报和四个动画视频 - 并由简报的作者呈现。每个页面不仅为八个网络研讨会提供链接,还提供了每个网络研讨会演示的实际问题及其答案。

讨论文件

导游

互动影响评估指导说明和网络研讨会系列

方法实验室出版物

该方法实验室是2012 - 2015年期间在2012 - 2015年期间进行的海外发展研究所(ODI),BetteRevaluity(Bettevaluity(BE)和澳大利亚外交和贸易部(DFAT)之间的行动学习合作。实验室试图开发,测试和制度化影响评估的灵活方法。十博官方网站网页版它专注于由于其多样性和复杂性而难以评估的干预措施,或者传统的影响评估方法可能不可行或适当,更广泛的目的是识别更广泛的应用潜力的课程。十博官方网站网页版查看更多信息这里。该方法实验室制作了多种指导文件,包括:

现实主义影响评估:介绍-本指南解释当实主义影响评估可能是最合适或可行的,用于评估特定计划或政策,并概述如何根据现实方法设计和开展影响评估。阅读更多。

解决影响评估的性别- 本文是用于在调试或进行评估时包括真正关注性别影响的从业者和评估者的资源。阅读更多。

影响评估的评估性评估- 本指南概述了在进行影响评估之前实施评估性评估的实用性和具体指导和工具的概述。阅读更多。

何时以及如何开发面向影响的监测和评估系统- -许多发展方案工作人员有过在项目或方案快结束时进行影响评价的经验,却发现监测系统没有提供关于执行情况、背景、基线或临时结果的充分数据。本指导说明是针对这一共同问题而制定的。阅读更多。

可以找到其他指导文件这里

页面贡献者

此页面的内容由以下内容编译:迎接同观者

这content is based on ‘UNICEF Methodological Briefs for Impact Evaluation’, a collaborative project between the UNICEF Office of Research – Innocenti, BetterEvaluation, RMIT University and the International Initiative for Impact Evaluation (3ie).The briefs were written by (in alphabetical order): E. Jane Davidson, Thomas de Hoop, Delwyn Goodrick, Irene Guijt, Bronwen McDonald, Greet Peersman, Patricia Rogers, Shagun Sabarwal, Howard White.

参考

Bamberger M(2012)。影响评价的混合方法介绍。指导注意3. 3.华盛顿特区:互动。看到的:https://www.interaction.org/blog/impact-evaluation-guidance-note-and-webinar-series/

Funnell S和Rogers P(2012)。有目的的计划理论:有效利用逻辑模型和变革理论。旧金山:Jossey-Bass / Wiley。

OECD-DAC(1991)。原则评估发展援助。巴黎:经济合作与发展组织 - 发展援助委员会(OECD-DAC)。看到的:http://www.oecd.org/dac/evaluation/50584880.pdf.

OEDC-DAC(2010)。基于评估和结果的关键术语词汇表。巴黎:经济合作与发展组织 - 发展援助委员会(OEDC-DAC)。看到的:http://www.oecd.org/development/peer-reviews/2754804.pdf.

OECD-DAC(访问2015年)。评估发展计划。DAC评估发展援助的标准。经济合作与发展组织 - 发展援助委员会(OECD-DAC)。看到的:http://www.oecd.org/dac/evaluation/daccriteriaforevaluatingdevelopmentassistance.htm

Stufflebeam D(2001)。评估值和标准检查表。卡拉马祖:西密歇根大学核对项目。看到的:https://www.dmeforpeace.org/resource/evaluation-values-and-criteria-checklist/

UNEG(2013)。联合国机构评估系统的影响评估:关于选择,规划和管理的指导指导文件。纽约:联合国评价小组(UNEG)。看到的:http://www.uneval.org/papersandpubs/documentdetail.jsp?doc_id=1434.

引用这个页面

Peersman,G。(2015)影响评估。BetteRevaluation。从...获得//www.cancastellar.com/themes/impact_evaluation

特别感谢这个页面的贡献者
作者
董事,评价能力加强,贝蒂索赔。
澳大利亚墨尔本。
评论家
首席执行官,BetteRevaluation。
墨尔本。

注释

rickjdavies的照片
里克。戴维斯

关于经合组织DAC对因果归因任务的看法:观察(或预期观察)变化和具体干预之间的因果关系的归属,这似乎是不平衡和片面的。

Goertz&Mahoney(2012年:42)争辩说有两种同样合法的看法归属:

  • 原因的影响(通常是实验研究的焦点)
  • 结果的原因(通常是定性研究的重点)

这与复杂性的角度来说更符合,因为给定的事件可以具有多种原因和多种后果,我们可以将我们的分析集中在这张照片的任一侧。

Mahoney,J.,Goertz,G.,2006年。两种文化的故事:对比定量和定性研究。政治分析14,227-249。谷歌图书http://goo.gl/2JOPFN.

(此评论不仅仅是要注意Qual和Squy!)

rickjdavies的照片
里克。戴维斯

对不起,参考书错了。它应该是

Goertz,G.,Mahoney,J.,2012年。两个文化的故事:社会科学的定性和定量研究。普林斯顿大学出版社。

http://goo.gl/2jOpfn

Patricia Rogers的照片
帕特里夏·罗杰斯

谢谢,瑞克,为了这个重要的观点。确认多种原因和多种后果(适当的地方)在影响评估中是重要的,设计和方法需要能够解决这些问题。在RAMESES(现实主义和元叙述综合:不断变化的标准)上有一些讨论讨论列表https://www.jiscmail.ac.uk/cgi-bin/webadmin?2 = rameses; 1fc28313.1411。与一个原因的结果相比,期望用不同的方法来确定一个结果的原因是否合理?

Rob Coward的照片
Rob懦夫

这是一个有用的影响评估概述,这与我组织在很大程度上与我的组织对此进行了思考。然而,一个关键差异是在项目规划期间,我们在项目规划期间培养了我们的变革理论(或“术语”的影响“。这在程序开始时以透明方式建立了产出,中间结果和长期影响之间的关系。这种方法还有助于我们与参与者和利益相关者咨询和寻求共识。这使我们能够在我们承诺重大投资之前调整我们的逻辑/假设和目标。当然,使用这种方法通常会产生意外的影响,但似乎增加了所需影响的可能性。

我差不多迟到了回应这一资源,但我对我们的方法感兴趣的是他人的观点。

Patricia Rogers的照片
帕特里夏·罗杰斯

非常高兴听到这个在项目计划期间开发和提出变更/影响链理论的例子。正如你所注意到的,这使得从改变理论中获得更多的价值成为可能。

Dadak的照片
达达克·栗丘

你好帕特丽夏,
谢谢你的回复,这是非常有帮助的。
我已经为改变的理论开发了一个因果联系模型,我想让你回顾一下,并提出一些建议。
无论如何,我可以发给你一个Microsoft Word文件吗?

匿名的照片
穆罕默德阿里

先生,我有问题,我有两年的农业技术通过数据(2006-07基本案例,2018-19终端)由1440名农民访谈组成。720 2006-07每年,2018-19年,同样受访者采访了他们所采访的agriculutre技术。先生,我必须在2006 - 07年和2018-19期间检查农业技术的影响,我如何应用其影响?第二个问题是什么是控制和治疗?我可以说谁正在采用农业技术是对照组?我可以在我的情况下称之为非采用者吗?提前致谢

匿名的照片
EduardoEnriquePérez.

Excelente para mi trabajo deInvestigación!!!!!

匿名的照片
亚伯拉罕·莱布泽

谢谢你的影响评估材料

添加新评论

登录登录并评论为更好的评估成员或只需填写下面的字段。