编者注:这篇文章是a 系列，“使用证据进行改进”，该系列着眼于servinnesota的 推进研究实践中心收集和分析数据，以便 不断为参与者提供更好的节目.
彼得·纳尔逊博士.D.他是研究与创新部主任 ServeMinnesota, 他在哪里参与我们的项目组合，以确保有效实施和建立证据的关键原则得以实现. 在这次采访中, 我们讨论了ServeMinnesota的团队如何能够实现一种新的评估策略，以帮助改善学生的学习成果 阅读队.
使用评估来理解问题
ServeMinnesota: 阅读团是一个已经存在了15年以上的项目，目的是帮助小学生达到年级水平的阅读. 该项目的导师使用不同的策略或干预措施来帮助学生. 澳门皇冠国际官方APP客户端评估这些学生的表现?
彼得·尼尔森: 我们通过对学生读写能力的简短测量来了解他们在不同时期的表现. 他们每周五天在每节课上练习, 但也要每周完成一次简短的评估. 每个分数被绘制在一个图表上. 我们将这些分数与我们所说的瞄准线进行比较, 哪条线是从秋季入学到春季的基准，与未来的大学准备和掌握熟练程度有关.
当最近5周中有3周的得分是 高于目标线，其中两个分数高于下一个基准，学生 从程序中退出. 例如3月份退出，则需要3个数据 得分高于你的球门线，其中两个必须高于未来的春季目标. 这是一种严格的方式，让孩子们无法获得额外的支持 队提供了.
我们想要自信，当我们 如果没有读书队的支持，学生就会走上正轨并取得成功.
你最初的问题是什么 我们感兴趣的?
几年来，我们知道有些孩子从雷丁队退学，但没有坚持下去. 你可以看看论文中的概率——我们发现大约34%的学生在做出退出决定后偏离了轨道. 澄清一下, 我们看到孩子们的生活比以前好得多, 但是，一旦雷丁队的支持停止，许多孩子的表现就无法达到我们所希望的水平.
尽管66%的孩子都保持着良好的成长轨迹, 我们非常关心那34%的人.
加权差分法
你怎么知道这是为什么 发生了?
我们考虑了很多因素 理解为什么我们看到孩子们离开后成绩下降 阅读队.
例如，我们想知道，如果这一点 在学年期间，孩子们退出了这个项目，影响了他们的学习 长期增长. 这解释不了. 然后我们研究了儿童的人口统计数据 种族，性别等等，这也不能解释什么.
最终，我们开始少思考 关于预测下降，更多的是关于是否改变决定 指导方针是有用的. 例如，我们花时间思考，应该 我们改变了退出的标准，使其更加严格?
这是一个好方法吗?
我们没有看到太多的潜力 返回这里. 结果证明收益并不值得，因为任何时候 你让孩子们在项目里待得更久，你让另一个孩子离开了. A 那些需要帮助的孩子得不到帮助，而参与项目的学生却得到了 做的很好. 所以我们最终并没有在实践中评估新的退出标准.
所以我们把注意力从孩子离开前的事情转移到离开后我们能做些什么.
评价是解决问题的一种手段
你最后尝试了什么?
我们讨论过的一件事是给孩子 下班后做一些额外的练习. 我们开始思考侵入性最小的形式 在实践中，这已经很方便地融入了孩子们的经历 当他们参加这个项目时，在干预期间，导师每周都进行监督 使用一分钟的阅读流畅性评估学生的进步. So 我们想为什么不在干预之后继续下去呢? Progress 监控是之前被记录下来的东西 能提高学生的学习成绩——但只通过告知的方式 指导或适应他们的需要. 它从来没有作为某种东西被讨论过 这本身就是有益的.
如果你认为进度监控是一项任务, 虽然, 孩子们有机会练习一项技能，他们将在年底接受测试. 在这种情况下，他们被测试的正是阅读一篇文章的技巧. 他们也会得到关于他们做得如何的反馈, 他们会得到一个提醒，提醒他们年底的目标是什么.
这些都是我们在干预中谈到的非常有力的东西——反应的机会, 参与任务的机会, 和反馈. 这就是我们的假设——在孩子们离开读书团后，继续监测他们的进步可以对长期的结果产生影响.
你可以通过a来检验假设 研究飞行员. 发生了什么事?
我们看到10%到14%的增长 学生达到年终基准的概率 退出后进度监测. 我们觉得这是一个很有希望的影响 考虑到所涉及的时间和资源很少.
今年, 我们正在进行一项出院后进展监测的随机对照试验——我们有100个站点, 其中50个将在孩子们离开雷丁队后继续每周监测他们的进步，还有50个网站没有这样做. 这是对编程的一个很小的改变，但却有很大的潜在回报.
我们是如何发现这个问题的 如此迅速地实施变革?
我们能做到这一点很大程度上是因为我们 有支持创新的基础设施吗. 它支持分析——我们 有非常复杂的数据系统，我们知道孩子们的表现如何 成长，但我们也知道他们的经历. 我们知道怎么做 他们得到了多少分钟，当他们得到支持的时候，确切地说 他们在做什么，他们在哪里，他们是什么样的导师 处理. 这是一个非常丰富的数据集. 学术界没有多少人有过这样的经历 获取这类数据. 数以百万计的病例和成千上万的孩子.
另一方面，我们有一个为所有这些孩子服务的项目, 而且它仍然相对灵活. 在一年的时间里，我们可以说，“我们学到了这个，现在让我们改变它。.“没有很多类似的东西. 我不认为在典型的澳门皇冠国际官方APP客户端环境中你会说, “我们发现了这一点, 我们要做这个改变.“我们可以。. 在这种情况下, 我们也许能进入一个小组, 但如果我们今年能找到积极的结果, 我们可以在全国范围内迅速扩大规模, 这很好.
怎样才能决定快速扩张 全国范围内的变化?
如果我们看到任何影响在统计上是显著的, 这意味着，在今年的随机对照试验中接受了退出后进度监控的孩子，在年底的时候比没有参与的类似孩子过得更好, 这足以让我们做出改变. 如果我们能看到同样的效果，那就太好了. 即使只有10%，也足够了. 在成千上万的孩子中，每10个学生中就有一个达到他们的标准, 有什么值得注意的吗.
