1.32k likes | 1.39k Views
评估. 中国烟草控制基础. 模块五: 评估. 自我介绍. 姓名 项目评估工作的经验. 模块五: 评估. 学习目标. 解释评估的目的和好处 描述评估计划的五个部分 理解项目逻辑模式的组成要素和关系 确定项目利益相关者 定义不同类型的评估 确定评估指标 明确数据收集方法 明确数据来源 理解基本的数据分析技巧和数据解释方法 描述评估报告的目标及其组成要素. 模块五: 评估. 日程:第一天(上午 8:30 – 下午 4:00 ). 模块五: 评估. 日程:第二天(上午 8:30 – 中午 12:00 ). 模块五: 评估. 注意事项.
E N D
评估 中国烟草控制基础
模块五:评估 自我介绍 • 姓名 • 项目评估工作的经验
模块五:评估 学习目标 解释评估的目的和好处 描述评估计划的五个部分 理解项目逻辑模式的组成要素和关系 确定项目利益相关者 定义不同类型的评估 确定评估指标 明确数据收集方法 明确数据来源 理解基本的数据分析技巧和数据解释方法 描述评估报告的目标及其组成要素
模块五:评估 日程:第一天(上午8:30 – 下午4:00)
模块五:评估 日程:第二天(上午8:30 – 中午12:00)
模块五:评估 注意事项 • 停车、洗手间、时间表 • 课堂参与 • 小组纪律 • 《学员手册》
模块五:评估 开始学习评估
开始学习评估 学习目标 • 解释评估的目标和好处 • 描述评估计划的总目标 • 列举和描述评估计划的五个组成部分
开始学习评估 什么是评估? “系统性的收集项目活动、特点和结果的信息,借以对项目情况做出判断,并且/或者对项目未来发展做出有根据的决定。” 来源:美国疾病预防控制中心
开始学习评估 为什么要开展评估? 评估有助于: • 判断一个项目或者一项政策按照计划开展的程度 • 估计项目或政策的结果以及随时间产生的影响 • 提升项目或者政策的表现 • 表明问责以及资源使用的合理性
开始学习评估 评估的其它好处 评估可以提供: • 一个倾听来自项目或政策参与者/受影响者声音的机会 • 提高员工或者支持者的工作热情 • 加大媒体曝光度 • 拓宽项目的可见性和范围
开始学习评估 评估计划 评估计划是什么? 评估计划是评估所包括的步骤和过程的路线图
开始学习评估 评估计划 为什么要有评估计划? 一项评估计划有助于: • 定义评估包括的范围和预期结果 • 明确数据收集和分析所用的策略和方法 • 确定所需的时间和资源 • 开展评估活动 • 将行动和需求区分优先次序
开始学习评估 制定一项评估计划 项目总目标 逻辑模型 项目分目标 利益相关者 过程及结果分析 评估问题 指标 定量、定性数据 数据收集方法 样本人群及抽样方法 分析策略 定量、定性分析 结果解释 报告目标 报告听众 报告类型
开始学习评估 评估计划 1 2
开始学习评估 评估计划 3
开始学习评估 评估计划 4 5
开始学习评估 案例分析 无烟公共场合倡议 通过在公共场所广泛的接受和实施无烟政策,减少市民二手烟草烟雾暴露 • 政策 • 拓展活动 • 教育 • 媒体
模块五:评估 茶歇
模块五:评估 第一部分: 项目介绍
第一部分:项目介绍 评估:项目介绍 项目总目标 逻辑模型 项目分目标 利益相关者 过程及结果分析 评估问题 指标 定量、定性数据 数据收集方法 样本人群及抽样方法 分析策略 定量、定性分析 结果解释 报告目标 报告听众 报告类型
第一部分:项目介绍 评估计划:项目介绍 1
第一部分:项目介绍 项目目标是什么? 项目或政策的目标应当描述以下内容: • 项目或政策的总目标 • 项目或政策期望获得的结果 • 受项目或政策影响的特定目标人群 通过实施项目或政策,你想取得什么成果?
第一部分:项目介绍 什么是逻辑模型? 逻辑模型以图表形式解释了下列因素之间的关系: • 使用的资源 • 开展过的活动 • 项目期间产生的效果或者立竿见影的变化 • 项目带来的益处或者长期的改变
第一部分:项目介绍 逻辑模型——总目标 逻辑模型可以帮助我们: • 确定项目活动是否可以在逻辑上产生想要的结果 • 帮助利益相关者明白项目的总体目标、必需的资源、需要开展的活动,以及影响力 • 提出项目评估需要回答的问题
第一部分:项目介绍 逻辑模型——模板 中期 短期 长期
第一部分:项目介绍 逻辑模型——组成要素 产出:项目活动产生的有形的、直接的结果 结果:项目活动产生的预期结果 活动:实施项目进行的活动 投入:实施项目投入的资源
第一部分:项目介绍 什么是项目投入? • 执行项目所需的资源 举例: • 资金 • 当地政府部门 • 部门领导 • 当地卫生部门 • 当地工作场所 • 当地媒体 • 其它还有哪些?
第一部分:项目介绍 什么是项目活动? • 描述能够使项目达到目标的活动和行为 • 项目期间会发生什么? 举例: • 制定一项模范无烟公共场所政策及其实施步骤。 • 与政府和企业领导会面,进行无烟政策和实施步骤的宣传沟通。 • 组织和实施控烟媒体宣传活动,包括电视、广播、网络以及印刷材料。 • 其它还有哪些?
第一部分:项目介绍 什么是项目产出? • 项目活动产生的有形的、直接的结果 举例: • 针对示范无烟政策及其实施的的培训 • 接触二手烟草烟雾危害的相关信息 • 与政府机关和企业领导会面 • 其它还有哪些?
第一部分:项目介绍 项目成果是什么? • 作为项目的结果,可预期的变化 举例:
第一部分:项目介绍 问题: 结果和产出的区别有哪些?
第一部分:项目介绍 比较产出和结果
第一部分:项目介绍 案例学习:项目总目标 1
资金 当地政府机关 部门领导 当地工作场所 当地媒体 社会大众 制定无烟公共场所政策 与政府机关和企业领导人会面 编写和发放宣传教育材料 规划和实施媒体宣传 与媒体合作 政策文件 政府机关、企业和社区对政策的理解 接受宣传教育材料的政府机关和企业数量 媒体宣传 媒体报道 长期 短期 中期 第一部分:项目介绍 对政策的了解和支持度上升 政策采纳 政策实施 对吸烟行为或烟草推广的接受度降低 实施无烟政策的公共场所数量上升 在公共场所内或周围吸烟行为的减少 戒烟率上升 二手烟草烟雾暴露降低 烟草消费降低 吸烟引起的发病率以及死亡率降低 案例学习:逻辑模型
模块五:评估 第二部分:评估设计
第二部分:评估设计 评估:设计 项目总目标 逻辑模型 项目分目标 利益相关者 过程及结果分析 评估问题 指标 定量、定性数据 数据收集方法 样本人群及抽样方法 分析策略 定量、定性分析 结果解释 报告目标 报告听众 报告类型
第二部分:评估设计 评估计划:设计 2
第二部分:评估设计 项目分目标是什么? • 描述项目行动和活动的结果 • 描述作为项目或政策的结果,我们希望实现的改变 • 必须具体、可衡量、可到达、相关,并且有时间限制
开始学习评估 项目分目标:案例分析 分目标: • 截至2015年9月,75%的市民将报告至少在3个不同的媒体频道上见过控烟信息。 • 截至2015年9月,60%的市民将认为餐馆和公共交通设施(例如飞机场、火车站、公共汽车)应当禁止吸烟。 • 截至2016年1月,禁止在公共场所吸烟的规定将颁布实施。
第二部分:评估设计 利益相关者是什么? 利益相关者指投入到项目中、对项目结果评估感兴趣的个人或机构,并且/或者与评估的结果有利害关系。 利益相关者可以包括: • 项目或政策的参与者或受影响者 • 参与到项目或政策实施的人 • 项目资助者 • 评估结果的预期使用者
第二部分:评估设计 利益相关者与评估 利益相关者可以: • 在评估的每个阶段提供投入 • 帮助实施评估活动 • 帮助提高评估过程的公信度 • 促进评估发现的推广利用 • 提供倡导和支持
第二部分:评估设计 问题: 对于我们的案例分析而言,你们认为谁可以成为我们的利益相关者?
第二部分:评估设计 评估类型 结果评估 过程评估
第二部分:评估设计 评估类型 过程评估: 评估项目或政策的开展或实施过程 结果评估: 评估项目或政策对目标人群的效果 过程:活动、材料、运行、后勤、参与者人数、员工人数,等等。 结果:知识、态度、行动、技巧、行为、政策
第二部分:评估设计 问题: 针对我们的案例学习,请举例说明我们如何运用过程评估? 我们可以如何运用结果评估?
第二部分:评估设计 过程评估 • 评估项目在多大程度上按照计划得以实施 • 记录项目每次实施的特点(按照员工或者地点) • 提供提高项目因素和质量的信息 • 有利于质量控制 • 为项目问责提供信息 帮助你全面理解项目如何运行
第二部分:评估设计 结果评估 通过回答诸如以下问题,关注项目或政策的结果: • 知识、态度和行为是否由于项目或政策实施而发生改变? • 项目或政策是否对目标人群产生预期的结果? 结果评估检测项目或政策对目标人群产生的结果,根据时间跨度可以分为: 短期、中期、长期
第二部分:评估设计 短期结果评估 短期 项目或政策的即时或早期结果,例如: • 目标人群的知识、态度和观念的改变程度大小 • 项目或政策在多大程度上达成短期目标的要求 • 有效的材料或活动证据 • 如何最优化使用资源的建议 知识、态度、技巧
第二部分:评估设计 中期结果评估 中期 评估达成长期目标所需的进一步的进展,包括: • 目标人群为增加知识所作出改变的行动类型 • 关于项目可以在多大程度上帮助参与者将他们所学的运用到实际生活中。 实践、社会习俗、环境