我们如何评价我们的工作

芝加哥公开演讲学习圈参与者

P2PU在很大程度上是由赠款资助的组织,这意味着我们遇到了很多赠款报告要求。 在过去的几年中,由于传统的报告,评估,评估和数据收集概念与我们的同伴学习,社区和公平价值观相冲突,因此我们经常会遇到紧张。

所有这些都不是说我们不认为评估很重要。 我们知道自己并不完美,因此获得反馈对于我们的成长和发展至关重要。 作为堪萨斯城公共图书馆与博物馆和图书馆服务研究所拨款的一部分,我们着手设计一套既能满足我们的报告要求又能加强(而不是矛盾)我们的价值观的工具。

我们于2018年4月发布了这些工具的首次尝试,详细信息记录在我们在Github上的发行说明中。 下面,我们总结了在此过程中出现的一些主题。 请让我们知道您的想法!

数据收集是错过对话的机会。

Sturla Bjerkaker和Judit Summers在“民主学习”中写道,“对正规部门中的学习者反馈的重视是基于对学生作为消费者的有限观点,被封装在’学习者满意度’一词中,而不是基于对考虑到这一点,我们寻求设计工具,以有意义的方式将人们与其他人联系起来,而不是简单地为自己积累数据或授予评估部门。 我们将尝试两个示例:

  • 欢迎委员会:当主持人建立学习圈时,P2PU通常会好奇他们的目标是什么以及是否有任何顾虑。 我们的第一个直觉是创建一个Google表单,将他们的回答汇总到某处,但这似乎与我们试图向学习圈中灌输的价值观并不一致。 相反,我们创建了一个欢迎委员会电子邮件组,任何人都可以加入。 该委员会将复制到发送给协调人的学习圈创建电子邮件中,并与世界各地的图书馆员进行讨论。 我们最终得到的“文档”是学习圈主持人之间进行的线程化讨论,有助于使新人适应社区。
  • 信函写作活动:在学习圈的尽头,我们从学习者和促进者的角度都对很多事情感到好奇。 在与一群主持人协商后,我们最近开展了一项写信活动,通过该活动,学习圈主持人在会议的最后一周被提示为即将开始的另一个学习圈写一封信。 提示中会说一些具体的内容,例如,“底特律的公共演讲学习圈将在2周内开始。 这样您就可以收集信息作为对话的副产品,而不是以对话为代价。

我们重视您的反馈意见,因此我们不会对其保密。

在我进行过的几乎所有调查中,对我的回答保密都是“评价我的反馈”的代名词。 我们创建安全,可靠的机密对话渠道是100%重要的。 但是,当我们考虑从学习者和主持人那里收集更多反馈时,我们意识到,使人们的反馈达到最佳价值的方法是对他们的经历持开放态度,而不是对其保密。 学习圈结束后,参与者和协助者都会从P2PU进行简短调查,并提出一些问题。 我们没有使用反馈来生成幕后报告,而是让参与者提前了解如何将他们的反馈立即用于改善社区。 一些例子:

  • 课程反馈:向学习者和辅导员都询问了有关他们使用的在线课程的质量,是否发现任何其他有用的资源以及将来可能向谁推荐此课程的问题。 此反馈通过以下方式汇总和共享: P2PU课程页面,以便将来的促进者和参与者可以根据社区做出明智的课程决策。
  • 给未来参与者的提示:我们问学习者对未来学习圈参与者的提示。 这些响应经过汇总,审查,然后包含在参与者注册学习圈时收到的欢迎消息中。
  • 您现在想做什么?:对于许多人来说,学习圈是朝着其他方向迈出的一步。 提示学习者说出他们的目标,反思他们达到目标的程度,并在完成学习圈后讨论他们想做什么,这很适合个人思考,但这也是与我们的图书馆合作的机会合作伙伴,以确定他们如何更好地理解和支持顾客的目标和愿望。

您的反馈就是您的反馈。

P2PU不是唯一可以从反馈和反思中受益的利益相关者。 图书馆系统和成人教育计划最终将提供学习圈子,参与者正在将时间和精力投入到应该为他们提供价值的计划中。 因此,重要的是要确保数据不会卡在P2PU中,而要与其他受益的人迅速共享。 我们将尝试通过几种方式做到这一点:

  • 回馈给学习者的见解:在接下来的几周中我们将开始收集信息时,我们将与学习者一起找出有趣的反馈信息,例如,他们对学习圈的反应与其他参与者的比较,或者是哪些人参加过类似课程的人是在学习圈之后做的。
  • 图书馆的报告:我们可以为基于社区的组织合作伙伴增加更多价值的一种方法是自动化对他们的报告要求。 通过上述干预措施,我们将在学习周期中产生大量见识。 在接下来的几个月中,在Siegel Family Endowment的支持下,我们将与少数图书馆合作伙伴合作,以确定如何最好地利用这些信息来更好地塑造图书馆编程,并更多地了解设计成功的非正规学习程序。
  • 使研究变得更容易:我们还在改进报告工具,以便我们可以更轻松地与外部研究人员进行协作。 当前,我们在进行研究协作时必须非常谨慎,因为提示反馈,整理和清理数据以及建模结果对我们而言是非常耗时的。 通过这个项目,我们寻求极大地提高我们向那些希望进行研究的人公开我们的发现的便利性。