小学语文学业质量评价研究课件.pptx

小学语文学业质量评价研究,北京教科院基教研中心 李英杰,2003年至今教育部基础教育课程教材发展中心“建立中小学生学业质量分析、反馈与指导系统”（SAAE）语文项目组7000人28万人,北京市义务教育教学质量监控与评价,建立科学的语文学业质量测量、分析和反馈系统,评价框架的建立测试工具的研制测试结果的分析与反馈,对评价的整体、系统设计 通过评价框架的设立保证测量的科学性 评价框架的建立过程,建立评价框架:,评价框架的建立过程,把握“学业质量评价”性质,常模参照测验：根据个体在某个特定群体中的相对位置，来解释个人表现的测验方法。主要目的是对考生的能力作出区分，为选拔升学等提供依据。标准参照测验：参照一个事先规定好的尺度或标准来解释个体行为表现的测验方法。主要用于反馈。,例：A 校5年级语文平均成绩,基于课程标准的标准参照测试。,深入解读课程标准,“素养”是指人通过长期的学习和实践，在不断的修习过程中培养起来的一种个性品质，包括内在的心理品质和外显的行为品质特征。,从经验论的观点看，“素养”是人的经验。,素养的高低，与人的经验的丰富程度和组织化（或称“结构化”）的程度密切相关。,一个人在某一方面的经验越丰富，且这些经验的内在联系性越好（即组织化或结构化程度高），这个人在这方面的素养也就越高。,“语文素养”是一个人的言语活动经验，包括口头言语和书面言语活动的经验,语文素养高的人总是在较为丰富的言语实践活动中不断积累，并不断地组织、优化着自己的言语经验结构,语文素养的形成过程，是人不断地修习语言的过程，是与人的言语实践过程相一致的过程，是人的言语经验的终身发展过程,最基本和最关键的言语活动,课程标准中相关目标的描述,九年义务教育阶段的语文课程，必须面向全体学生，使学生获得基本的语文素养。语文课程应培育学生，指导学生正确地理解和运用祖国语文，丰富语言的积累，培养语感，发展思维，使他们具有适应实际需要的。语文课程还应重视提高学生的品德修养和审美情趣，使他们逐步形成，促进德、智、体、美的和谐发展。,热爱祖国语文的思想感情,识字写字能力、阅读能力、写作能力、口语交际能力,良好的个性和健全的人格,总目标中可转化为评价内容的要求,6、学会汉语拼音。能说普通话。认识字3500个左右常用汉字。能正确工整地书写汉字，并有一定的速度。7、具有独立阅读的能力，注重情感体验，有较丰富的积累，形成良好的语感。学会运用多种阅读方法。能初步理解、鉴赏文学作品，受到高尚情操与趣味的熏陶，发展个性，丰富自己的精神世界。能借助工具书阅读浅易文言文。九年课外阅读总量应在内400万以上。,识字写字,阅读和积累,总目标中可转化为评价内容的要求,8、能具体明确、文从字顺地表述自己的意思。能根据日常生活需要，运用常见的表达方式写作。9、具有日常口语交际的基本能力，在各种交际活动中，学会倾听、表达与交流，初步学会文明地进行人际沟通和社会交往，发展合作精神。10、学会使用常用的语文工具书。初步具备搜集和处理信息的能力。,写作,口语交际,基本框架的建立,识字与写字能力语文积累阅读能力写作能力口语交际能力,（非纸笔测验可检测）,“积累与运用”,我们主要关注三个方面，以这三个方面的表现，反映学生语文积累的水平。识字，理解运用词语识记、理解和简单应用古诗文课外阅读活动中对课程标准推荐读物的了解水平（主要情节、人物等主要信息的识记水平）,字词,课外阅读,古诗文,识字与写字能力的测试目标,课标对小学（一、二学段）的相关规定：2、累计认识常用汉字2500个，其中2000个左右会写。（一学段为6001800个，其中8001000个会写。）3、掌握汉字的基本笔画和常用的偏旁部首，能按笔顺规则用硬笔写字，注意间架结构。初步感受汉字的形体美。4、养成正确的写字姿势和良好的写字习惯，书写规范、端正、整洁。,不容易转化为外显形为,细化,识字与写字能力的测试目标,5、学会汉语拼音。能读准声母、韵母、声调和整体认读音节。能准确地拼读音节，正确书写声母、韵母和音节。认识大写字母，熟记汉语拼音字母表。6、能借助汉语拼音认读汉字。会使用字典、词典，有初步的独立识字能力。（一学段为“能用音序和部首检字法查字典，学习独立识字。”）,合并,识字与写字能力的测试目标（归并）,识字：读准字音认清字形理解汉字（词）的基本意义和语境意义写字：正确工整 美观,对“读准字音”的分析,汉字形、音、意的关系 以义为核心，形-意联系紧密；音相对独立音的可变性高，受时代、地域的影响较大构成：声母、韵母、声调借助汉语拼音注音或识别汉字正确的注音方式,由形而声由义而声,方言,四声和声调的掌握,能读准多音字 能分辨常见误读能用汉语拼音纠正地方音,对“读准字音”的分析,根据不同的意义选择恰当的读音,字形、字音相近;形声字;生活习惯等的影响,结合测试地区,“读准字音”的测试结构 能按普通话的读音标准认读（拼读）常用汉字的字音,阅读评价框架的形成,对阅读能力的构成，国内外不同学者有着多种不同的描述方法课程标准中对阅读目标的描述也是一个比较复杂的多角度的系统,课程标准中的阅读目标,共46条，在评价建议中强调：精读的评价“重点评价学生对读物的综合理解能力，要重视评价学生的情感体验和创造性的理解。根据各学段的目标，具体考察学生在词句理解、文意把握、要点概括、内容探究、作品感受等方面的表现。”“评价略读，重在考察能否把握阅读材料的大意；评价浏览能力，重在考察能否从阅读材料中捕捉重要信息。”,国外相关研究,NAEP（美国国家教育进展评价National Assessment of Educational Progress）PISA（国际学生评价项目 The Programm-er for International Student Assessment）PIRLs（国际阅读素养进展研究Progress in International Reading Literacy Study）,NAEP对阅读的认识,读者、文本以及阅读目的三者是互动的，是动态的互相影响的：每一个读者都会将先前的阅读经验（对流派的认识，对文章的结构、写作技巧、策略的理解）带到当前的阅读中；读者如何理解文本与文本类型有关；阅读目的影响阅读理解的过程，影响阅读策略、技巧的使用，影响个人已有知识与文本内容相联系的程度,NAEP的阅读测试框架,整体感知,就是要求读者必须将文章看成一个整体并有一个较为全面的理解这种整体感知的考查，也许会让学生为文章加个题目、解释文章的写作目的、思考故事的主题,问题示例：写一段话讲述故事内容下面哪个选项最恰当地表说了故事的主题这个文本想告诉你什么,形成解释,就是阅读时读者不能局限于初步印象，要对读物有更进一步的思考。这一过程中，不仅要关注特定的信息，而且要把前后文的信息联系起来。测试阅读的这一方面的问题包括：推理两点信息之间的关系、为行动的原因找到证据。,问题示例：这件事发生的原因是什么？这个观点暗示了什么？,联系自身,要在读者和文本之间建立联系，读者必须将文中的信息与自己的知识背景相联系。这可能包括：将文本中的观点与自己的现实生活相联系。所有学生的回答必须以文本为基础才能得满分。,通常这类问题如下：为什么牛蛙吃蜻蜓？你觉得他们还有别的可吃的吗？运用文中的信息或你已有的知识来回答这个问题。移民的生活方式和我们现在的生活方式有很多不一样的地方，至少举出其中的两点。,作出评价,就是要读者对文本进行批判性地衡量、对比和比较，并了解反语、幽默这类手法的效果这类问题要求读者跳出文本，客观地看待它测试问题会要求读者能根据具体目的决定文本的用处，能评估文本的语言及其结构要素、能评价作者的写作目的和行文风格,有些问题要求读者联系一篇文章的前后文或联系不同的文章来回答。例如，要求学生比较同一主题下的一首诗和一个故事，或者比较一下对同一事件，当事人的叙述与一篇文章中的描写有什么不同,PISA的阅读测试框架,阅读素养是指学生为实现个人目标，发展个人知识和潜能及参与社会活动，而理解、运用和反思书面材料的能力PISA将阅读情境分为以下四类：为个人应用而阅读为公共应用而阅读为工作而阅读为教育而阅读,PISA的阅读测试框架,形成广义的、总体上的理解：广阔的视角、整体获取信息：关注细节，把所提问题与文本中的具体信息建立联系形成解释：在全面阅读文本的基础上，联系各部分相关信息，扩展对文章的理解，形成更为具体和完整的理解反思和评价文本的内容：能把文本信息和从其它渠道获得的知识建立联系，利用自己的已有经验对文本中表达的观点进行评价反思和评价文本的形式：能不受文本影响，客观地评价它的性质和适用性,PIRLs的阅读测试框架,阅读是“理解和运用社会需要的和对个人有价值的书面语言形式，从各种文章中建构意义的过程”,对国际阅读测试项目的分析,从不同的阅读目的出发，设置阅读情境关注整体感知文本、从文本中获取信息、对文本进行解释、对文本进行评价的能力,阅读测试框架,测试情境,4种基本阅读能力,活动过程,非线性,阅读测试框架,提取信息提取信息是基础包括提取单一信息、多个信息提取位置、显隐程度不同的信息在获取信息的基础上，形成整体感知和初步的概括实际上是信息的整合,小时候，家里生活条件不好，吃饺子自然是只能挨到年节。平常的日子，破天荒地包上一顿饺子，就成了全家人的节日。一般，妈妈总是包两种馅的饺子，一种带肉的，一种素的。这时候，妈妈会包花边饺子。她将包好的饺子沿边用手轻轻一捏，捏出一圈穗状的花边，煞是好看，像小姑娘头上戴了一圈花环。我们都不知道妈妈是耍了一个小小的花招，她把肉馅的饺子都捏上了花边，让我和妹妹连吃带玩地吞进肚里，自己和爸爸吃那些素馅的饺子。那些艰苦的岁月，花边饺子给我们留下了难忘的记忆。,整体感知,整体感知包括表层的感知和深层的感知理解表层意义：能够整体感知文章的大概内容；初步感受文章所表达的思想感情领会深层意义：能够分清主要观点和次要细节、能够理解文章各部分相互间的关系，理清文章的思路、能够体会作者的态度和观点,形成解释,能将文章的内容与自己的生活建立联系，能根据文本的具体内容对作品中的形象、情感、观点、态度等做出解释，能够运用文本中的信息，支持自己的观点；能结合具体语境解释重要词语的意思和作用,做出评价,以自己的价值观念为基础能对文章中的事件、形象、情感等有自己的看法能对作者的观点、文章的意义和价值等做出评价和判断能对文章的形式（结构、语言表达方式、写法等）做出评价,目前形成的阅读测试框架,写作,着重考查学生恰当运用语言文字，文从字顺地表达真情实感的能力，同时考查学生书写的情况 3年级：能够根据给定的情境记述一件事情或介绍一种事物能清楚地表达自己的意思能够正确地书写能正确运用学过的标点符号,形成最终评价框架,命题工作的基本流程,双向细目表在命题过程中的位置,试卷各部分比例、难度,每道试题的测试内容、预估难度、题型、分数,试卷的蓝图,阅读命题过程,口语报告,命题人员集中选文,模拟出测试题,学生阅读文章、做题，说出自己思考的过程,拟出不同认知水平的答案、修改预设答案,整理分析问题,筛选或修改文章,测试材料的筛选原则,测试材料用于提供一个尽可能接近学生日常学习活动的具体的情境，以使学生的能力能在具体的、规定性的活动中得以尽可能的展现测试材料要符合学生的经验水平有利于设计测试活动避免各种的不公平（偏向于某一性别、某一区域的社会群体等）为实现测试目标，材料必须进行必要的修改,为获得文学体验而进行的阅读,这类阅读测试主要以文学性文本（童话故事、寓言、小说、写人记事的散文等）作为测试材料，关注学生对作品内容的整体感受，对作品中形象、情感、语言的领会和理解，以及对作品的内容和形式的理解和评价。例,为获取信息而进行的阅读,这类阅读测试主要以说明、解释性的文本（常见的说明事物事理的说明文和科学小品、简单的议论文、新闻报道等）作为测试材料，关注学生对主要事实、观点的把握，对概念、原理、事物特征等的理解和解释。,为完成任务而进行的阅读,这类阅读测试主要以实用性文本（产品说明书、广告等）为测试材料，关注学生从文本中获取相关信息，并利用获得的信息解决实际问题，完成特定任务的能力。,初拟试题,关注测试目标，目的一定要明确关注学生的既有经验水平根据不同的测试内容，考虑学生能力表现的可能性练习,试题编制的理论基础 SOLOStructure of the Observed Learning Outcome（可观测的学习结果的结构）,SOLO学习结果分类系统,1982年香港大学教育心理学教授比格斯（Biggs，John B.）和克莱斯（Collis，Kevin F.）在研究皮亚杰认知发展阶段理论的过程中提出儿童认知发展的阶段 对问题的反应中所表现出来的思维结构。,皮亚杰认知发展理论 对总体认知结构发展的阶段划分 纯理论性的概念 不可直接检测“假设的认知结构”比格斯SOLO 基于皮亚杰认知发展阶段论 总体认知结构发展的每一个阶段，都还会有几个不同的水平。这些水平可以通过学生在回答某个具体问题时所表现出来的思维结构的复杂性来体现，它是可以直接检测的 这种根据学生在问题回答中思维结构的复杂性判断学生认知发展水平的评价方法就称为SOLO学习结果分类评价法,solo分类方法对学生能力水平的描述,前结构,学生缺乏与所面对问题有关的简单知识,或为以前所学的无关知识所困扰,没有形成对问题的理解，找不出任何解决问题的办法，回答问题逻辑混乱,或同义反复,单一结构,学生回答问题时，只能联系单一因素，只关注题干中的相关内容，找到一个线索就立即跳到结论上去多元结构学生找到越来越多的、正确的相关特征，回答问题时，能联系与事件相关的多个因素，但不能将它们有机整合,关联结构,学生能够整合各个因素，了解各因素之间的内在关系，使其成为一个有机整体。能够回答或解决较为复杂的具体问题拓展结构能够归纳问题并进行抽象概括,结论具有开放性且更抽象，能拓展问题本身的意义。这代表着一种更高层次的学习能力,这一层次的学生表现出更强的钻研和创造意识,依据solo编制语文学习能力测试,客观性选择题选项的命制主观试题评分标准的建立这个故事讲了什么道理？（3分）,主观题评分标准：,不要只追求表面的东西，要有真才实学。意思对即可。,3分：能把全文作为一个整体，建立起信息之间的联系，得到“不要只追求表面的东西，要有真才实学”的结论。2分：能联系文章中的几处信息得出结论，比如“自己不会就是不会，要诚实。”1分：能联系文章的单个信息得出结论，比如“书再多，没有读，也不是学问家。”0分：完全脱离文本的，比如“不应骄傲，要谦虚。”,选择题选项,一对三错，相对独立,A 不应骄傲，要谦虚。（前结构）B 不要只追求表面的东西，要有真才实学。（关联）C 自己不会就是不会，要诚实。（多元）D 书再多，没有读，也不是学问家。（单一）,口语报告,基于预测数据的修订,这个故事讲的道理是：A 不应骄傲，要谦虚。（前结构）B 不要只追求表面的东西，要有真才实学。（关联）C 自己不会就是不会，要诚实。（多元）D 书再多，没有读，也不是学问家。（单一）,预测结果,拟合曲线,口语报告,学生反应（部分呈现）,口语报告,试题修改结果呈现,依据SOLO理论和学生口语报告的分析，这道题目修改如下,基于预测数据的修订,下面含有错别字的一项是：（D）A 洪 水 B 富 强 C 艰 苦 D 玩 皮 B 丰富,修改前ICC曲线,修改后ICC曲线,写作题目命制和评分标准的制定,保证所有的学生都有的可写 比如：一天，小狗淘淘走到了一个陌生的地方，它会遇到什么事情呢？请你展开想象，写一个小故事。,常见的作文评分方法,分项法（Analytic Scale）把一篇作文分解为若干要点,如内容、结构、文章连贯性、语法、词汇等,不同的要点也可作不同的加权处理,各要点得分的总和即为全篇得分。整体法（Holistic Scale）让训练有素的评分人员对待评阅的作文通读一遍或几遍,然后依据一定的评分标准,根据这篇作文给评分人员留下的整体或笼统印象,给出一个分数或者等级。,反馈信息更丰富,速度快,国外相关研究 1：“6+1”要素作文（6 plus 1 Traits）,美国俄勒冈州“西北地区教育实验室”（NWREL）提出作文的六个基本特征：想法和内容（ideas and content）组织（organization）口吻（voice）措辞（word choice）流畅（sentence fluency）惯例（conversation）呈现(presentation),想法和内容文章的核心，主要内容、主题、细节能丰富和拓展主题,口吻通过迷人的想法、生动的语言和展示细节来展示作者独特的思想,组织内在结构、意思的中心线索、逻辑性和引人入胜,措辞通过丰富多彩和准确无误的语言来启发读者,通顺流动的节奏、句式的健全、写作不仅仅是看，而且是用耳朵听,规范文章正确性、拼写、语法、用途、段落，大小写和标点,国外相关研究 1：“6+1”要素作文（6 plus 1 Traits）,“想法和内容”关键问题：作者是否关注和分享原创的、新颖的信息或观点,5分：主题集中，行文明晰能吸引读者。事件或细节具体而充实 A题目集中，便于把握 B.有相关的,生动、优质的细节 C准确合理，主题新颖独创 D预想并回答了读者的问题 E.有洞察力 3分：作者有意识去限制话题，尽管仍停留在基础和一般的水平 A.主题相当宽泛 B.有支持性的材料 C.想法合理清晰 D.作者在材料从一般观察到具体准确的提炼上还有一定困难 E.读者还有一些疑问，需要更多信息 F.作者仍停留在一般的话题上1分：文章还没有明确的目的或中心，读者需通过粗略或缺少的细节的推断才能了解 A.作者还停留在搜索话题阶段 B.信息有限或清晰,没有展开 C.主题只是问题的简单重述或简要回答问题 D.作者还没有开始界定话题 E.重点不突出，一切似乎都很重要 F.文章重复，互不联系，包含了很多随意的想法。,样例文,“6+1要素”特点分析,详细描述了每一方面的关键问题和可能的水平提供大量评分参考样例，供评分者练习把握标准，供家长、学生熟悉评分标准可操作性强，能满足不同人群的需要，为教师、学生、家长提供标尺，便于形成共识,国外相关研究 2：NAEP 写作测试评价指标,NAEP写作测试设计原则理念所有的学生都应该写六个总体目标 应该会写不同目的的文章：应该能根据不同目的和对象写作；能根据所给材料，在不同的时间限制里写作；应该能构思、起草、修改和编辑他们的想法和形式；应该能有效选择文章的结构，说明和加工他们的想法，能恰当运用写作规范；学生能评价他们的写作。,NAEP题目举例,叙述类 写一写一个城堡的故事 描述不寻常的一天 给校报写个故事讲讲你帮助别人或别人帮助你的一次经历说明信息类描述你的午餐时间你最喜欢一件物品给新同学写封信说说你的学校是什么样的劝说类说服你想象中的伙伴显形说服图书管理员,NAEP写作测试特点分析,提供自由的表达空间强调写作的目的强调和突出学生想象力、批判力提供详尽地评分标准和评分样例 贴近学生生活和心理实际,我国：概括的评分标准,一类文（2730）：切题，中心明确，内容具体，层次清楚，语句通顺，标点使用比较正确，错别字少，卷面清洁。二类文（2427）：切题，中心明确，内容比较具体，层次较清楚，语句通顺，标点使用比较正确，错别字少，卷面整洁。三类文（1824）：基本切题，中心基本明确，内容欠具体，层次不够清楚，语句基本通顺，标点使用大体正确，错别字多。四类文（1218）：不合题意，中心不明确，内容很不具体，层次不清，语句不通，标点错误和错别字多。五类文（012）：内容有错误，语句表达很差，不会使用标点，错别字很多。评定参考：错别字每个扣0.5分，扣足5分为止；标点错误每个扣0.5分，扣足3分为止；卷面太乱，字迹潦草酌扣12分。,分项：选材、组材、语言表达和其他四项 避免评分点之间的相互干扰 降低评分者效应，提高评价的准确性和客观性 测试之前：详细的作文评价标准 阅卷之前：阅卷员培训手册 例,组卷和专家审查,选择数据情况符合测试要求的试题按命题框架和双向细目重新组成正测卷和备用卷经专家审查，吸收其合理意见进行必要修订正式排版、反复校对，确认可以进入测试程序,完成命题工作,数据本身显示的只是现象，关键是对现象的解释。基于课程标准的要求，关注实践中的各种行为倾向，有针对性地考查教学活动的效果，发挥学业评价的诊断功能，为教学提供具体的、有针对性的改进建议，是数据分析的核心目标。,为教育管理提供决策依据为教学改进提高总体信息,测试群体的整体分析,某省9地市3年级语文水平描述,睡眠时间和学业水平的相关,作业时间与成绩的相关1,作业时间与成绩的相关2,学习压力与学业成绩,总体师生关系与学业成绩,语文师生关系与学业成绩,学生对语文教师的教学评价与学业成绩,为教学改进提供具体的诊断信息,基于试题的分析,A 省三年级学生在“阅读”各情境及能力上的表现,A省三年级学生在阅读能力上的表现,典型题目1：C3AO021下面哪一个字的读音是错的？x s zhun xn A 希 望 B 思 考 C 转 圈 儿 D 扫 兴,考查能力：读准字音能读准多音字,典型题目分析三年级,正确答案：C平均得分率：84.3%,S省四区三年级学生在“典型题目1”上的表现,正确答案：C平均得分率：76.3%,A省三年级学生在“典型题目1”上的表现,典型题目3：C3AO141下面哪一个词语填入画线部分最恰当？联欢会圆满结束后，老师组织学生_离开剧院。A 陆续 B 连续 C 慌忙 D 紧急,考查能力：理解词义能理解常用词语的基本意思，并在较复杂的语境中恰当运用,三年级学生在“典型题目3”上的表现,正确答案：A 平均得分率：69.2%,不同水平的三年级学生在“典型题目3”上的表现,谢谢倾听！不当之处敬请指正！,我的联系方式：E-mail:手机：13701020927,1、有时候读书是一种巧妙地避开思考的方法。23.3.2223.3.22Wednesday,March 22,20232、阅读一切好书如同和过去最杰出的人谈话。03:20:5703:20:5703:203/22/2023 3:20:57 AM3、越是没有本领的就越加自命不凡。23.3.2203:20:5703:20Mar-2322-Mar-234、越是无能的人，越喜欢挑剔别人的错儿。03:20:5703:20:5703:20Wednesday,March 22,20235、知人者智，自知者明。胜人者有力，自胜者强。23.3.2223.3.2203:20:5703:20:57March 22,20236、意志坚强的人能把世界放在手中像泥块一样任意揉捏。2023年3月22日星期三上午3时20分57秒03:20:5723.3.227、最具挑战性的挑战莫过于提升自我。2023年3月上午3时20分23.3.2203:20March 22,20238、业余生活要有意义，不要越轨。2023年3月22日星期三3时20分57秒03:20:5722 March 20239、一个人即使已登上顶峰，也仍要自强不息。上午3时20分57秒上午3时20分03:20:5723.3.2210、你要做多大的事情，就该承受多大的压力。3/22/2023 3:20:57 AM03:20:572023/3/2211、自己要先看得起自己，别人才会看得起你。3/22/2023 3:20 AM3/22/2023 3:20 AM23.3.2223.3.2212、这一秒不放弃，下一秒就会有希望。22-Mar-2322 March 202323.3.2213、无论才能知识多么卓著，如果缺乏热情，则无异纸上画饼充饥，无补于事。Wednesday,March 22,202322-Mar-2323.3.2214、我只是自己不放过自己而已，现在我不会再逼自己眷恋了。23.3.2203:20:5722 March 202303:20,谢谢大家,