投稿问答最小化  关闭

万维书刊APP下载

区域义务教育阶段作业监测指标的设计与实践

2023/7/24 11:26:12  阅读:40 发布者:

【摘 要】作业是落实学科育人目标,检验课堂教学效果的重要一环。近年来,义务教育阶段学生的作业问题成为全社会关注的大问题。为了加强区校作业过程性指导,发现义务教育阶段学校作业设计、布置、完成、批改、讲评等环节存在的问题,对区校作业业务进行规范化引导,了解区域义务教育学生作业负担情况,上海市闵行区统一研制了作业监测指标,通过伴随式数据采集发现作业各环节存在的问题。针对问题,区域教研跟进,对学校作业问题进行针对性的指导和教研,从而促进作业质量的提升,提高作业设计的有效性。

【关键词】作业监测指标  智能作业  作业设计  作业质量

作业是课堂教学任务的延伸和拓展,是检验课堂教学效果、落实课堂教学内容的重要环节,是课堂教学五环节中的关键枢纽,作业在课堂教学中具有非常重要的作用。

闵行区正处在教育数字化转型和智慧教育创建过程中,教育教学的所有业务系统都已开始进入数字化时代。那么,是否可以通过搭建统一的作业业务平台,设计作业监测指标体系,通过对作业平台的伴随式数据采集,实现区域作业业务的统一监管,从而切实落实作业业务监管的要求,对异常指标进行预警和干预,实现对相关政策的监管要求呢?本文对此进行了探索和阐述,以期实现以上目标。

一、搭建区域作业数字化平台

作业是义务教育领域标准化程度比较高的一项业务,而且作业类型、作业内容、作业布置和完成作业的形式较统一,适合进行区域统一建设。在建设过程中,应该遵循以下原则。第一,兼容性原则。在数字化转型的初级阶段,尤其是在对学生视力关注程度日趋高涨的情况下,应兼容传统纸笔作业形式,兼容多学科作业,兼容不同的作业类型,兼容不同的设备。第二,工具性原则。平台应提供师生使用的工具,提供内容上传、发布、管理等功能,辅助师生开展作业业务。第三,开放性原则。系统既可以独立运转,也可以像积木一样和其他教育教学模块进行耦合应用,并预留认证接口、数据交换接口,能够与其他教育教学的业务系统进行横向对接,还可以实现与区域数据中心的数据交换。

在开发原则和相关政策的指引下,我们确定了区域作业数字化平台的基本功能,主要包括作业内容管理模块、作业布置功能、作业完成功能、作业批阅功能(含客观题自动批阅)、作业数据分析和报告功能。其中,作业内容要进行精细化标注,包括作业章节目录、知识点、学习目标、学习水平、学科能力、核心素养、学科体系等,以便进一步进行详细的数据分析。

二、监管指标设计

在区域作业数字化平台中,教师可以布置日常作业,其支持系统内完成作业,支持纸质作业完成后上传,支持区校基于作业数据的教研,能够实现基于作业的过程性评价和学业质量分析。对学生的日常作业,其可以开展伴随式采集和记录作业业务数据(包括精细化标注的内容维度统计数据,信度、效度、难度、区分度数据等)、行为数据(包括作业时间、作业提交频率、作业订正、查看报告、作业顺序等行为数据)、作业结果数据(包括作业分值、正确率、提交率、作业效率等数据)。那么,这些数据是否可以与“双减”文件等一系列相关政策中的监管要求相匹配呢?

近期出台的相关文件在作业方面的要求主要集中在作业量控制、作业难度控制、作业质量控制和作业批改反馈控制等方面,反映了作业负担、作业设计质量和作业批改等概念。

作业负担是学生学习负担的一个下位概念。学业负担是指学生在学习过程中,由于承担学习任务,而在心理和生理上的压力反应。作业负担则是专指学生在承担作业任务时,产生的心理和生理的压力反应。作业设计质量是指作业内容水平的高低。目前对作业设计质量的评价标准还不统一,在宏观上,作业设计应形式多元,体现核心素养,五育并举以及作业的诊断、巩固、学情分析作用;在微观上,作业设计则仅指作业与所对应学科知识点的匹配度、难度、区分度等信息。在作业批改方面,教师要做到作业必须批改,及时反馈,加强面批辅导等。这些维度的数据都可由区域作业数字化平台来获取数据。基于此,区域可设计指向区校作业监管的作业相关指标体系,包括学业表现、作业负担指数、作业习惯、作业态度、作业设计质量、作业批改等,详见表1

1

指标项

指标描述

数据

学业表现

学生在知识点上的学业表现,认知水平、能力水平和知识图谱上的表现

知识状态空间(Kn

作业负担指数(预警指数)

作业时长是否超过规定,作业时间是否超过8:30,作业难度是否超过学生能力

作业时长(t1,小学不超过60分钟,初中不超过90分钟)、作业时间(8:30之前0分,以后每延迟30分钟扣1分,t2)、作业难度(b,整体作业难度不得低于0.3

作业习惯

能够认真完成作业,作业效率较高,作业不拖拉

作业完成率(PC)、作业效率(E)、提前提交作业时长(TP)、总作业时长(TT

作业态度

作业态度认真,及时完成作业;能够认真订正作业

作业完成率(PC)、订正率(CR

作业设计质量

作业设计质量高,符合学习内容和学生能力

信度(α)、信息量达标度(i)、难度和能力匹配度(p:θ)、区分度较好内容占比(bi

作业批改

教师对每一份作业都批改(客观题可自动批阅)和查阅数据报告

批改率(C


学业表现,主要统计和分析学生在知识点上反应的状态,用基于正确率的知识状态数据来表征。作业负担指数是相关政策关注的重心,用作业时长、作业时间、作业难度三个数据来表征。作业习惯和作业态度是学生在作业上表现的行为背后隐含的特征,可以在系统中记录相关数据并对学生行为进行分析,用于学生作业行为的干预和改进。作业习惯,用作业完成率、作业效率、提前提交作业时长、总作业时长来表征;作业态度,用作业完成率和作业订正率来表征。作业设计质量,用作业信度、信息量达标度、难度和能力匹配度、区分度较好内容占比来表征。作业批改比较特殊,鉴于目前技术的发展,很多作业都支持自动批阅,虽然相关政策要求对该项指标进行监测,但是目前暂时无法正确获取教师行为数据,无法通过区域作业数字化业务平台获取数据源。

三、监管指标数据计算与对比

为了能够实现以上指标的监测,测试指标设计数据获取和分析的有效性,我们在区域作业数字化平台中开展了小学高年级语文、数学、英语统一作业业务,该业务采用区域统一作业内容,规定在周末两天内不限时间段由学生自主完成。在2020学年第二学期,我们共开展了三次统一作业,获取了足够的数据,有效支撑了监管指标的数据获取和计算。

1.学业表现

通过统一作业业务,将某个学生在某个知识点上的状态,按照正确率60%80%为阈值,划分为“待巩固”“掌握一般”“掌握熟练”三个等级,以此获取区域、学校、班级的知识状态。借助区、校、班数据的对比,教师可了解本校和本班的教学状态,有助于学校开展补救式教学,提高学生的知识掌握程度。此外,其还可以准确定位学生的掌握状态,对“待巩固”的学生进行教学补救和精准辅导。

2.作业负担

作业负担将作业时长、作业时间和作业难度作为主要数据,小学作业时长阈值为每天不超过60分钟,初中为每天不超过90分钟。每天做作业的时间以20:3024:00为阈值,在20:30~24:00之间的为黄色预警,在24:00~6:00之间的为红色预警。作业难度的阈值为0.30.7,低于0.3或高于0.7难度都不符合要求。按照此算法,我们对闵行区5月、6月的语文、数学、英语的两次统一作业的指数进行了计算,发现作业时长相对较好,两次节点式作业都有学生在24:00~6:00之间做作业,其中6月的五年级英语和数学占比最高,该部分学校、班级和学生需要进行干预。本次作业难度适中,符合阈值要求,预警值为否,详见表2。对于作业负担各项数据进入预警范围的学校则按照“双减”要求进行公示、干预。对于作业时长和作业时间双预警学校,应进行重点关注。

2 区域作业负担对比

范围

节点作业

作业时长预警

比例

作业时间红色预警比例

作业时间黄色预警比例

本次难度是否

预警

全区

五年级语文-6

0.01%

0.08%

17.07%

FALSE

全区

五年级英语-6

0.01%

0.18%

18.00%

FALSE

全区

五年级数学-6

0.00%

0.18%

16.08%

FALSE

全区

五年级语文-5

0.01%

0.15%

6.29%

FALSE

全区

五年级数学-5

0.03%

0.11%

14.68%

FALSE

全区

五年级英语-5

0.01%

0.06%

15.93%

FALSE

 

3.作业习惯

良好的作业习惯为认真、及时、高效率地完成作业,而且先复习后做作业。但由于是否复习无法通过作业平台伴随式获取数据,而采用表单或其他方式就会增加该指标数据的采集难度,且数据权威性存疑,因而我们舍弃了该维度,仅通过平台获取作业完成率、作业完成效率、拖延人数占比、当日作业总时长是否超60分钟等数据。其中,作业完成效率计算较复杂,采用平均正确作对一道题目的时间与作答一道题目的平均用时的比值与正确率的乘积(见图1)。我们利用该指标对6月进行的小学五年级节点式统一作业进行计算,发现在做英语学科作业时,当日作业总时长超60分钟人数占比最多,英语学科作业拖延人数占比最大,平均完成率最低。

4.作业态度

作业态度和作业习惯是相辅相成的,作业习惯注重行为层面的数据采集,作业态度则偏重于从行为中发现态度。本指标仅统计平均作业完成率和平均订正率。如表3所示,在6月的节点式统一作业中,英语平均作业完成率最低,语文的平均订正率最低。由此可见,学生普遍不习惯于订正,订正比率普遍偏低,在后续的相关推进中,教师可以重点对订正率进行干预。

3作业态度对比

范围

节点作业

平均作业完成率

平均订正率

全区

五年级语文-6

99.43%

11.25%

全区

五年级英语-6

99.15%

11.35%

全区

五年级数学-6

99.44%

12.85%


5.作业设计质量

在作业设计质量中,作业信度采用科隆巴赫系数,信度低于0.7不可接受。对于信息量达标题目占比、区分度较好题目占比、落在学生能力内的试题占比、试题与学生能力匹配度等指标维度,我们基于项目反应理论进行计算。以20216月区域统一开展的四、五年级节点式作业为例,我们对该指标数据进行了采集和计算,发现四年级语文信度低于阈值,信息量达标题目占比低于50%,区分度较好题目占比仅有4%,落在学生能力内的试题占比仅有33%,试题与学生能力匹配度为基本匹配,因此该作业内容需要在后续相关推进中进行改进。

四、总结

本文通过对区域统一作业平台中的数据进行采集,经过节点式统一作业的业务验证,实现了数据伴随式采集和指标计算,并对区域总体呈现的指标情况进行了梳理,证明了区域层面通过搭建统一作业平台,对平台数据进行统一采集并按照指标设计进行计算的模式是完全可行的,相关指标的计算值和实际业务开展情况完全匹配。同时,我们还需要在以下方面开展进一步探索。

1.没有对指标体系的二级维度进行汇总计算,无法直观地呈现指标背后隐含的价值,需要进一步设计整合计算的算法,实现指标的直观呈现。

2.相关指标的计算在区域层面的业务跟进模式还不够清晰,不同的指标背后需要干预的业务模式不尽相同,需要相关业务人员将该系统作为辅助手段进行使用。

3.目前该指标体系在区域层面、学校层面、班级层面的应用都比较顺畅,可以实现对班级层面的指标监管。然而,在学生个体层面,作业压力来源众多,不仅有来自学校在平台中布置的作业,还可能有其他渠道作业。因此,需要进一步研究在学生个体层面上更加全面地追踪作业压力数据。

参考文献:

[1]中华人民共和国教育部.教育部办公厅关于加强义务教育学校作业管理的通知[EB/OL].http://www.moe.gov.cn/srcsite/A06/s3321/202104/t20210425_528077.html,2021-04-12.

[2]中华人民共和国政府网.国务院教育督导委员会办公室印发通知明确中小学校“五项管理”督导全覆盖[EB/OL].http://www.gov.cn/xinwen/2021-05/11/content_5605743.htm,2021-05-11.

(本文刊载于现代教学》20221AB合刊,作者系上海市闵行区教育学院  朱靖)

转自:“第一教育专业圈”微信公众号

如有侵权,请联系本站删除!


  • 万维QQ投稿交流群    招募志愿者

    版权所有 Copyright@2009-2015豫ICP证合字09037080号

     纯自助论文投稿平台    E-mail:eshukan@163.com