了解原因

大多数评估需要如何解决有关原因和效果的问题 - 不仅记录了更改的内容但了解为什么。

影响评估,专注于了解干预措施(项目,计划,政策,网络和组织)的长期结果,始终包括注意理解原因。

理解原因在其他类型的评估中也是重要的。例如,在过程评估中,通常需要有一些解释为什么实现的好坏,以便能够建议它可能改善或持续的方式。

近年来,对评估的理解原因有相当大的发展,以及大量讨论和分歧,有关哪些方案的适用于哪种情况。

在这些不同的选项之间进行选择时, 考虑可能涉及的不同类型的因果推断:

  • 一个原因产生一个活力T.- 生产是必要的,可以生产E.的影响

  • 两个或更多原因组合生成效果(例如,两个程序或PROG内存与其他参与者特征(如特定参与者特征)相结合时)-其中一个原因本身是必要的,但不是充分的

  • 两种或更多的原因是产生效果的替代方式- 的任何一方足够,也不是必要的

不同的标签可能用于这些不同类型的因果关系-'因果归因'暗示一个原因,“因果贡献”暗示一种因果因素,和'因果推论的用于指所有这些

考虑可能被问及原因和效果的不同类型的问题也很重要:

  • 干预是否有所作为?

  • 对谁,在什么情况下,干预措施有所不同?

  • 干预的效果有多大?

  • 具体的影响在多大程度上可以归因于干预?

  • 干预是如何产生差异的?

探讨评估中的不同理解方式,下载概述其中列出了不同的方法、设计、过程和方法。十博官方网站网页版你也可以探索以下三种广义的因果推理策略。

任务

1.检查结果与因果贡献一致

该策略应该是所有评估的一部分,包括因果问题。有许多选项和方法可用于检查数据是否与预期的贡献有助于产生观察到的变化十博官方网站网页版。

2.将结果与反事实进行比较

这种策略适用于某些但不是所有评估。有许多选项和方法可以用于制定反事实 - 一个估计在没有干预的情况下发十博官方网站网页版生了什么 - 并将其与干预发生的事情进行比较。

3.调查可能的替代解释

该策略应该是所有评估的一部分,包括因果问题。有许多选项和方法可用于识别可能导致影响的其他因素,并查看是否有可能统十博官方网站网页版治它们。

资源

记录的网络研讨会:Jane Davidson的概述 options for causal inference 在一个在美国评估协会的咖啡休息系列中20分钟的网络研讨会。 Free to all, including non-members. 

因果关系和因果推理的模型。论文芭芭拉Befani.浅谈不同思考因果关系和调查原因的思考。

制造因果索赔。John Mayne撰稿人在思考的逻辑上多种贡献因素产生结果。

注释

匿名的照片
卡西贝尔

你好。我为加拿大的公共部门联盟工作,通过实施为期五年的教育计划。虽然工作人员教育工作者及其监事进行了形成性评估,但立即评估只会正在发展。用于确定该计划的影响和/或结果最有效的评估是什么?

谢谢!

帕特里夏·罗杰斯的照片
Patricia Rogers.

嗨,卡西,

最有效的评价设计或方法将取决于干预的性质、评价的目的和是否有资源,特别是时间、金钱和现有数据。我建议你看看我们关于影响评估的页面,它为你解决各种需要考虑的问题提供了指导,并提供了你可能如何去做的选择。//www.cancastellar.com/en/themes/impact_evaliuation.

史蒂夫蒙古的照片
史蒂夫蒙塔尤

嗨,Cassie / Patricia,

很抱歉6月错过了这一点。我还指出,Patricia和她的同事苏·苏德内尔在改变理论(例如有目的的计划理论PG 352-357)方面已经写过信息/教育原型。在Carleton University在加拿大,我教导 - 我们在努力绘制BetteRevaluation.org和有目的的计划理论作为核心资源 - 我们有许多学生项目研究了信息/教育计划的原因(影响)。我建议在这一领域审查过去的工作。也许是因为我们是加拿大 - 我们倾向于贡献分析 - John Mayne的基于渥太华的贡献方法,以仔细应用程序理论和“因果包”和更新的思想,最近才能获得钥匙的现实方法十博官方网站网页版理论(因果通路)中的链接。作为一个例子https://pubmed.ncbi.nlm.nih.gov/28557934/。在Carleton的“我们”与这一点无关(但它非常符合我们的典型方法 - 见图2) - 所以我觉得我可以毫不犹豫地推荐它。(并告诉我们您是否对沿着道路的学生突出项目感兴趣。我们的团队于今年9月推出 - 但我们将在明年9月再次看。)

希望这可以帮助!祝你好运。

添加新评论

登录登录并评论作为betteRevaluation成员或只是填写下面的字段。