作者：加纳学习与评估经理Edwin Asare和学习与评估总监Christopher Stanfill博士
我们的无极铅笔（PoP）的使命是通过提供安全，健康的学校环境，到处都是受过良好训练和支持的老师，为我们服务的社区提供优质的教育。 PoP的教师支持计划旨在为教师提供提高儿童接受教育质量所需的资源和技能。 因此，该组织的关键绩效指标（KPI）特别侧重于学生的素养，因为我们期望更有效的教学将导致学生在阅读阅读流利度和理解力上的表现有所提高。
早期阅读评估（EGRA）是我们评估学生表现的主要工具，是一项针对早期阅读能力的最基本基础技能的独立管理口头评估。 PoP的EGRA用作评估学生成绩的形成性评估工具，是TS计划的间接影响。 这些数据为TS团队提供了许多（即定性和定量数据）信息源之一，可指导决策者进行程序改进。
在本学年开始之前（2018-2019年），使用横截面设计进行PoP中的EGRA，该设计比较单个时间点的人口。 就我们而言，那是一学年。 历史上，在EGRA评估中包括了PoP学校样本，并且每年在基线（即学年开始）随机选择每所学校每个小学年级的8名学生。 使用横断面设计提出了一个中心挑战：下一个学年可能会选择不同的学校和学生，这造成了由于样本不同而无法在年份之间比较EGRA结果的情况。 因此，只能在一个学年内衡量或跟踪学生的表现，而提高成绩时则无法衡量学生的进步。
考虑到我们的方法，我们的团队希望以一种能够反映学生读写能力随着时间的推移而发生的变化的方式来收集数据，考虑到扫盲技能发展的复杂性。 这导致了针对加纳，危地马拉和老挝的纵向研究设计的发展，该研究将随时间推移跟踪单个学生。 考虑到每个国家的差异以及在每种情况下与TS计划相关的假设不同，纵向设计的引入为我们提供了提出复杂且量身定制的研究问题的机会。 这种新方法将有助于为以下特定于国家的问题提供更可靠和有效的发现：
- TS计划对危地马拉的不同语言群体（即西班牙语和玛雅语言）有什么影响？
- 在接下来的几年中，我们将TS计划扩展到4年级和5年级，TS计划对老挝的学生有什么影响？
- TS计划的变化（例如，TS +电子阅读器与TS +书籍）对加纳的学生有什么影响？
案例研究：加纳的纵向设计
从本学年（2018-2019年）开始，将在四年的时间里跟踪两组学生，从今年的1年级和3年级开始。 这意味着PoP将能够在四个学年内收集同一学生的EGRA数据（表1），这将使我们能够可靠地报告学生在一段时间内的学习进度。 这也意味着在所有20个抽样学校中，将对包括成绩在内的整个学生入学率进行评估。 这与横断面方法不同，横断面方法在一学年内仅测试所有年级的八名学生。
在抽样的20所学校中，有15所在TS计划中（治疗样本），而5所不在TS计划中（对照样本）。 下表2列出了按年级和性别分类的学生的详细分布：
为了确保在整个四年中仅跟踪参加纵向研究开始时（第一年的基线）的学生，必须遵守以下规定：
- 如果发生了一年级学生升入二年级并重新招收该班学生的情况，这些新学生将被排除在EGRA评估之外。 如果3年级的学生升入4年级并且又有新的学生入学，则同样适用。
- 如果学生在其同班同学晋升到2年级时重读1年级，则留在1年级的学生将从样本中排除。 这是因为我们将仅测试那些升入2年级的人以跟踪进度，并且同样适用于接下来的年级和年级。
我们认识到，很可能第一年基线的全部样本将不会在整个评估周期（即四年）的完成时得到代表，尽管我们有信心样本量足够大，可以控制总体差异在四年结束时（即我们的样本量表明足够的统计能力）。
如前所述，将通过比较三个不同治疗组的学生表现来评估PoP TS编程的变化。 三个治疗组如下：
- 由PoP建造的学校，在教室中设有TS编程和PoP分布式电子阅读器
- PoP建成的学校，在教室中使用TS编程和PoP分发的书籍
- 非PoP建造的学校，在教室中使用TS编程和PoP分发的书籍
将这三个小组与一个对照组（即没有使用TS编程，电子阅读器或书籍的PoP建造的学校）进行比较，将使我们能够了解每个程序设计的有效性。 这也将使我们能够更好地理解书籍与电子阅读器之间的关系，以及建立PoP的学校对学生学习成果的影响。
值得注意的是，所有15所治疗学校（TS计划中的学校）都在其教师支持计划的第一年，而5所比较学校（对照学校）以前没有用于任何比较评估。 需要特别注意的是，因为我们需要的样品没有被先前的EGRA评估所污染。
耐心等待
加纳的案例研究仅简要介绍了我们各个国家/地区的团队为评估学生的表现而做出的令人兴奋的变化。 PoP一直致力于确保我们的数据和结果真正代表正在执行的工作。 庆祝成立10周年，并相信我们的干预会对学生，教师和社区产生积极影响，因此我们的评估策略现在可以提高与学生表现相关的结果的可靠性和有效性。 为了与全球最佳实践保持一致，我们会定期审查我们的研究方法和工具，以查明我们的计划是否在实现我们确保每个孩子都能接受优质教育的目标的轨道上。 我们的团队期待与全球教育领域的同行组织和其他利益相关者分享我们的方法和成果的机会。
