谁真正负责确定跟踪学生的学习成绩
高校如何利用数据和分析来捕获和支持改善学生成绩的努力?到底是谁的工作?
今年早些时候,根据三个行业团体的研究得出的一份报告探讨了三个主要利益相关者团体的作用,他们发现,在衡量学生的成功率方面,他们的责任比预期的重叠得更多。这些团体是机构研究,学生事务和信息技术;收集了900多个回复
Educause分析与研究中心(ECAR)的研究主管D. Christopher Brooks在星期三的小组会议上在丹佛举行的年度会议上讨论了研究结果时说:“该领域的任何一个方面都不拥有学生的成功。” “这需要整个机构之间的合作伙伴关系,打破各自为政的局面,并寻找从流程开始就进行合作的方式。”
来自ECAR的研究人员,机构研究协会(AIR)和NASPA高等教育学生事务管理人员共同评估了来自这三个利益相关方小组成员的900多个问题。他们研究了正在进行的数据项目的类型,以衡量学生的成功率,所采用的结构,协调水平以及这些结果如何影响校园政策。
下面,我们分享了报告中的四个摘录,“机构对学生成功的数据和分析的使用” 和小组讨论。
多少钱-什么样的-数据是否足够?
NASPA研究与政策副总裁Amelia Parnell表示,学生的成功指标包括易于收集的出勤率和人口统计指标,以及难以捕捉的动机和自我效能感等因素。随着大学越来越重视量化学生的软技能水平,能够清晰,始终如一地表明进步将变得越来越重要。
帕内尔说,为了做到这一点而进行数据捕获需要进行战略规划,并指出该研究表明受访者不同意什么构成了“适当的”数据收集量。毕竟,院校针对的是不同的学生背景,这将为不同的干预提供依据。她建议将收集的数据基于要实施的干预类型。
布鲁克斯表示同意,建议大学避免“为了收集而收集所有东西”。
大学范围狭窄
该报告的主要发现之一是,大学将学生的成功研究主要集中于一年级学生。超过一半的接受调查的机构表示,他们开展研究以确定第一年,第一代和转学生的学业进展和成功。
研究人员指出,进一步的研究将探索其发现背后的“原因”。但是,大学更加重视招募第一代和转学学生,这些学生往往面临着成功的障碍。例如,一些常春藤盟校已经实施了1vyG,这是针对第一代大学生的支持网络,其中可以包括教科书捐赠和指导。
成人学习者是大学正在密切关注的另一个学生群体,尽管接受调查的机构将其对“非传统学生”的关注程度低于其他大多数群体(减去学生运动员和LGBTQIA学生)。但是,研究表明,一些大学可能在招募和留住该小组方面做得更多,专家建议采用几种方法来改善推广和成功跟踪。
Parnell说,收集有关学生的数据并将其用于根据自己的感知需求量身定制的学术经验提出了有关数据隐私的重要问题,以及有效执行方面的挑战。她说:“我们现在可以确定哪些学生将从我们的资源中受益最大。” “我们如何与他们沟通并进行适当的衡量?”
她列举了“轻推”和其他通知。EdSurge报道说,尽管它们日益成为常见的学习管理系统(LMS)集成,但大学在设计这些提醒时应谨记学生如何看待它们。
数据治理将变得更加重要
随着大学收集更多的数据,这些信息的所有权变得越来越重要。特别是在大的校园,具有数据采集的几个不同点可能会导致冗余和较差的用户体验-除了数据安全问题。
布鲁克斯说,在调查涵盖的所有三个利益相关者群体中,只有不到20%的受访者制定了数据治理政策,该政策被认为是“一个相当强大的机制,可以处理几乎所有抛出的问题”。
他补充说,更大的份额(45%)有政策,但表示需要改进。剩下的35%的人表示,无论他们是否认为自己需要这项政策,都没有实施。
尽管报告发现这三个小组在职责和活动上存在重叠,但IT部门的作用突出。他说:“这是IT在数据收集和管理前端发挥关键作用的地方。”
缺乏测量
研究人员发现,受访者不可忽略的份额-在任何地方从大约二分之一到近三分之二,这取决于变量-都没有做多少来衡量学生的成功举措的投资或测量成本的回报。
布鲁克斯说:“也许这些事情太复杂了,很难让您留意它们。”他补充说,这是数据治理可以提供帮助的领域。
受访者表示,缺乏跟踪的原因包括难以填补数据和分析角色,缺乏完善的数据基础架构以及不确定需要哪些数据。
至于哪些小组正在跟踪成本,描述性分析的机构关系评分最高,预测措施的教务长办公室以及预警系统的学生事务评分最高。
LMS以外的课件工具的使用,例如出版商提供的资源,可能使捕获全面的数据具有挑战性。根据Brooks和Parnell的说法,可能的结果包括与供应商合作,以确保他们的程序与流行的API兼容,以及标准化学生数据和成功工具的来源。
帕内尔说:“我认为解决方案不是让它们都生活在一个地方,而是拥有足够的中间件。但我认为这不会很快发生。”