实现现代远程开放教育的可持续发展.ppt

《实现现代远程开放教育的可持续发展.ppt》由会员分享，可在线阅读，更多相关《实现现代远程开放教育的可持续发展.ppt（41页珍藏版）》请在三一办公上搜索。

1、实现现代远程开放教育的可持续发展,周先宁2005年11月,认真搞好整改 提升试点水平,一、整改工作的主要进展 二、存在的主要问题 三、以开展教学质量年活动为抓手，推进试点整改 四、关于试点项目总结性评估,一、整改工作主要进展,（一）分校整改工作进展1、试点在学校工作中的地位得到了巩固2、试点四支队伍建设得到了加强3、系统建设有了新的进展4、教学管理和支持服务日趋规范5、教学模式改革和网上教学有所推进6、重视课题研究成果的总结、推广和应用,1、试点在学校工作中的地位得到了巩固,在资源整合中并入地方高校的分校，试点工作地位得到不同程度的确认，整改力度加大。蚌埠学院在整改中，进一步落实了蚌埠电大的建

2、制、校牌、基地、师资、经费五个方面独立，其经验中央电大时讯作了专题介绍；淮北职业技术学院围绕电大整改，狠抓质量过程落实，着力营造迎评氛围，促进试点工作整体向前推进；宣城职业学院领导层统一认识，加强了对电大试点工作的领导力度，加大对试点整改的政策倾斜和资金投入，学院今年决定拿出90万元，重点完善电大教学设施和网站建设，电大工作处教学管理人员由原来的6人增至9人；淮南联合大学明确了05年为学校的基础建设年，狠抓电大建章立制，把电大试点工作纳入学校发展总体规划，重点扶持；本学期，成教处（电大工作属联大成教处）由原来的8人增加到12人。,2、试点四支队伍建设得到了加强,据不完全统计，所督查分校本学期通

3、过多种形式和渠道已引进60余人，主要是计算机、英语、法学、经济等专业学科。合肥电大通过市人事局，面向社会一次性公开选招了11位大学本科毕业生；六安电大在去年引进3名教师的基础上，今年又着手引进3至5名教师，并在当地主要媒体上发布信息，建立了100人以上的兼职教师人才库，对兼职教师引入激励竞争机制，目前已择优聘用了65人。各分校都注意加强试点队伍的整体建设，特别是新进人员的培养和提高。蚌埠电大采取了青年教师导师制度，为助教职称的青年教师进行为期1至3年的指导，淮北、黄山、池州等电大，不仅积极组织专兼职教师参加省校举办的各类培训，还针对性地举办校内各类管理人员二次培训，并要求受训人员撰写心得、参加

4、考核。,3、系统建设有了新的进展,不少地方政府领导深入电大进行调研和指导，电大工作在当地已逐渐走向前台，列入了议事日程。亳州分校的建制问题，几经努力，近期有望解决；池洲电大已正式成为当地远教中心。落实省五厅委8号文件，加快县电大实体化建设方面也有了新的突破。合肥分校的肥东、肥西两县已单独建站并举行了挂牌仪式；宿州分校拿出近9万元经费扶持泗县、灵壁、萧县电大工作站整改；阜阳分校的临泉、太和工作站加强了校领导班子建设，正在积极落实基地和建制问题；宣城分校的泾县和绩溪电大，正在运作资源重组；宣州电大正与当地卫校、职高整合，现已成立了筹备工作领导小组；六安分校经过努力，得到了市、县政府的大力支持，解决

5、了分校和工作站的财政经费调控问题，各工作站也基本完成了实体化建设。,4、教学管理和支持服务日趋规范,省直、合肥、阜阳等分校都采取了一系列措施，进一步规范了面授辅导课的管理；蚌埠、淮北、合肥、巢湖等分校重视学生学习过程的考核，对学生自主学习明确由辅导员和小组长负责督促和监督，提高了形成性考核成绩的真实度；蚌埠、六安分校各个专业都建立了实践基地，设立了放置毕业论文、形成性考核作业册、实践报告、实验报告等的资料室；黄山电大对教学点学生提出九项服务承诺；合肥、池州、淮北等分校采取多种途径为教师开展教研活动提供支持服务；大部分分校都做到定期召开辅导员工作会议，使辅导员工作不断适应试点要求。六安电大还对地

6、处偏远、学员相对集中的叶集实验区，采取班主任跟班，送教上门，取得了良好的社会效益；阜阳临泉县电大，为方便学员就近集中学习，布设了19个面授辅导教学点；阜阳、六安、宿州等分校实行新学期开学工作检查督导制度，加强对县工作站教务、教学管理过程的指导、监控力度。,5、教学模式改革和网上教学有所推进,基于全省电大开展教学模式改革的联动实践，省校提出试点“导学-自学-助学-促学”（“四学”）模式总体框架。各分校围绕“四学”精髓，认真组织实施课程教学一体化设计，以重点课程做支撑，不断探索总结具有本校特色的课程教学模式。有的模式已经初步形成，有的已经进入总结和提高的阶段，正在教学中进一步完善。三级在线平台实名

7、注册率较大幅度提高。蚌埠、淮北、黄山等分校网上教学工作比较扎实，注重网上师生互动过程资料的统计、收集和分析。据省校技术中心统计，巢湖本学期上网人均时数全省第一；淮北今年内在分校和省校平台上学生人均周学时基本达标；师生技能测试合肥较好，顺利进入课程页面。,6、重视课题研究和成果的推广应用,各分校相继成立了远研部门，明确机构建制，设立试点项目专项研究经费，加大试点课题研究攻关力度。目前，绝大部分分校已完成试点课题结题和新课题申报立项工作。黄山等分校领导带头，群众性科研成果显著。不少分校自行开发的管理软件体现了实用价值。,（二）省校试点整改进展情况,1、成立了若干专题工作组分头攻关成立了“十一五”规

8、划工作领导小组、办学资源整合领导小组、系统建设工作领导小组。省校成立了“三个模式，两个体系，一个机制”专题研究小组，专题报告已形成初稿。省校调整了教学督导组，上个月组织了对市县电大评估整改工作的督查工作。省教育厅决定将中小学教师提高学历层次培训工作纳入电大开放教育试点项目统一管理。在我校成立了“安徽省中小学教师远程教育中心”。,2、教学检查和督查,按照中央电大的统一部署，本学期开展了网上教学检查和自查，完成了自查报告，省校开展了对分校网站的第8次检查，开展了集中实践环节、形成性考核、小组活动、网上教学等环节的检查或评价活动，省校督导组开展了对市县电大整改工作的督察，对一些办学规模较大的教学点的

9、进行了专项教学检查。,3、设施及资源建设,数字图书和期刊已完成招标工作，金融网上模拟实验室、IP课件制作软件已投入使用，网上实践平台实现了功能升级，法学等专业充实了大量的案例素材，省校暑假组织开发了5门省管课程网络课程，并从其他电大引进配齐了近30门课程资源，省校平台进行了功能升级，实现了对学生上省校网站的行为统计。,4、队伍建设,省校组织了全省电大兼职教师的培训，召开了全省电大教学模式推广培训研讨会，对系统教务管理人员进行了使用网上实践平台的相关培训。省校除了支持青年教师的在职学历进修，今年还选派了三位中青年教师作为国内访问学者赴重点院校学习。省校今年又引进了三名专职教师，签约了十多名课程责

10、任教师。,5、试点最新成果,2005 年全省多媒体教育软件评奖活动中，高等教育组在全部参赛作品中共评出25 件获奖作品。我校今年开发的网络课程中国古代诗歌选读、英美报刊选读、国家税收分获一、二、三等奖，获奖等次和数量在全省高校中名列前茅。两门课程进京决赛，获教育部三等奖。全国广播电视大学首届优质省建课程评选活动，共评出优质课程29 门、推荐课程27 门。我校参评课程中有两门入选，消费者权益保护法被评为优质课程，会计案例研究被评为推荐课程。,二、存在的主要问题,1、评估整改工作力度不够2、师资队伍的建设和培训工作亟待加强3、少数分校模式探索还没有实质性进展4、对教学全过程的管理和监控不到位5、网

11、上教学现状离试点教学要求差之甚远6、实践教学环节需要进一步落实7、教学过程的原始档案资料不完备,1、评估整改工作力度不够,个别分校、工作站领导对开放教育试点的认识仍然停留在中期评估时的水平，没有随着试点工作的深入而进一步深化；上报省校的整改方案未能按要求落实整改进程，整改内容也没有落实到相关责任部门、责任人。对此次以督查来促进试点整改工作的认识不够，缺乏危机感、紧迫感，对省校提出的整改意见缺乏切实可行的措施。,2、师资队伍的建设和培训工作亟待加强,我省电大师资队伍建设一直是薄弱环节，04年年报年检又提出反馈意见。兼职教师比例过大，高学历、高职称的教师偏少，队伍结构不尽合理等。有的分校开办了本科

12、专业却没有相应的本专业教师，而且许多试点专业教师一学期承担多门辅导课，有的青年教师一学期3门课程还有两门是新课，这样的教学谈不上教学质量，教师本身也难提高。有的试点单位没有教师培训计划，更没有具体措施，对教师队伍的管理也缺乏相应的制度，尤其是对兼职教师培训欠缺。,3、少数分校模式探索还没有实质性进展,少数分校在开展教学模式、教学管理模式及其运行机制的探索、研究和应用方面，没有实质性进展，分校和工作站仍然采用“粉笔+黑板”的模式教学，到课率也低；也有的分校分管教学的领导和教学部门负责人对本校的教学模式改革说不出子丑寅卯，试点到今天，谈教学模式改革还象才接触的新话题；有的分校试点工作很大成分还在谈

13、，还在高高挂起阶段，对省校推广的“四学”模式，尚未进行有效的实践，实际验证少；这些分校的氛围是评估已过，俨然马放南山。,4、对教学全过程的管理和监控不到位,少数分校对教学过程的管理要求不具体，特别是对形成性考核、实践环节的实施、网上学习情况、教学资源的整合和应用等缺乏有效的管理措施。对于入学水平测试、补修课程，有的分校没有相应的实际操作的材料。这次督查虽然只抽查了几个教学点，但是估计很有代表性,唯一学习方式就是一学期集中几次面授，恐怕除了书之外，学生再没见识过其它形式的资源。,5、网上教学离试点要求差之甚远,一些分校在线平台除了上网浏览之外，还谈不上其它应用，教师和学生进入课程讨论区的记录非常

14、少；有的没有解决教学平台的跟踪统计问题，学生网上学习无法统计，两级平台合计人均上网时间离周学时的要求差距甚大；有的分校，几经检查和评估，在线平台还是不在线，平台不能保证正常运行；学生在本地平台实名注册情况有所加强，但在省校和中央电大平台注册情况，离评估标准还有很大的差距。截止到11月10日，在中央“电大在线”实名注册34103人，注册省电大在线平台39983人。有些仅仅只是注册而已，找学生一测，进不了课程页面。,6、实践教学环节需要进一步落实,各分校都制订了落实实践教学环节的制度、规定和要求，但在实际操作上，有的还缺乏具体的措施，尤其是一些单位汇报集中实践教学的情况，没有说服力，实际情况差距很

15、大，不能令人信服；有的缺乏实践环节的实施方案和具体的操作办法，造成对实践教学的考核和管理把关不严，比如毕业论文全文抄袭，指导教师和分校责任人都不能觉察；有的分校报告实践开出率达70%，但看不出是如何统计的，实践基地的建设在不少教学点可能还是盲点。,7、教学过程的原始档案资料不完备,绝大多数分校提供的教学过程原始材料不完整、不规范。对学生上网情况、课程实践教学活动的记录、教学支持服务情况、小组学习情况、教师教研活动、入学教育等各种教学环节缺乏原始的、有说服力的论证材料。有的分校评估半年多了，论证材料的收集基本没进展，包括近期开展的工作，口头汇报或文字写了，也没有形成性材料。,三、以开展教学质量年

16、活动为抓手，推进试点整改,今年全国电大教学工作会议明确提出，2005 至2006 年在全国电大开展“开放教育教学质量年”活动，旨在按照“扩大开放、保证质量、强化特色、打造品牌”的方针，结合试点项目总结性评估指标要求，针对试点教学中的突出问题和薄弱环节，采取切实有效的措施，规范教学管理，落实教学过程，提升教学效果，完善教学质量保证体系。,三、以开展教学质量年活动为抓手，推进试点整改,1、加强教学管理制度建设和执行2、强化课程教学全过程监控 3、推进“四学”教学模式的继续探索实践4、着力改进网上教学5、落实教学资源配置与应用6、探索课程考试方式改革7、加强对基层电大的指导与质量监控,1、加强教学管

17、理制度建设和执行,为了完善我校试点教学的质量保证体系，省校相关部门正在进行制度清理工作，对不适应试点教学要求的及时废止或修订、整合，同时根据试点发展需要及教学工作实际，尤其是针对试点中的突出问题和薄弱环节，抓紧制定相关教学管理制度。省校自试点以来，坚持进行年度试点文件汇编工作，从试点几年的文件汇编，可以看出试点工作的思路和轨迹，也可以看出制度本身为适应试点发展的不断完善过程。试点是由各级电大和合作单位共同参与的系统工程，所以必须严格按照试点的统一要求运作，并落实到部门和岗位职责中，对制度的执行情况要加强检查与督导。各分校和教学点要备齐省校转发中央电大有关文件和配套下发的实施意见，备齐省校试点教

18、学和教学管理文件汇编，并结合学校具体情况，配套实施办法。,2、强化课程教学全过程监控,省校组织对专业和课程实施教学方案进行修订，修订后的教学方案应该是试点成果的一个重要载体，许多好的做法通过教学方案固化下来，并由此逐步形成新的教学规范和模式。各类教学活动特别是教学效果要逐步做到有记录、有反馈、有检查，防止教学环节的缺失和打折扣，并通过多种途径检测自主学习效果。对于上网学习不方便的学员，继续采用学习笔记、小组活动记录或小结的形式进行形成性考核，更能起到监控作用。各教学点都要建立教学过程管理档案，做好形成性材料的及时收集和整理工作。省校本学期开展了集中实践环节、形成性考核、小组活动、网上教学等环节

19、的检查或评价活动，具体情况已做通报。近期还要开展类专兼职优秀教师评选活动，总之，要通过抓实主要环节，强化教学过程质量监控。,3、推进“四学”教学模式的继续探索实践,全省试点实践中的创新成果是丰富多彩的，这是一笔宝贵的资源。省校据此总结凝练出我省试点项目的人才培养模式及其相应的教学、教学管理模式。省电大提出“训导-自主”教学模式和“双主为纲，两个课堂，多元互动，立体评价”的课程教学模式的实践框架。通过组织参加首届“教学创新奖”活动、师资培训等方式，将教学模式改革的典型经验加以推广，经过全省电大继续深入实践，形成我省课程教学改革成果“四学”课程教学模式。目前的“四学”模式还带有形成性，深入推行比开

20、始启动所遇到的问题和困难可能更复杂，各分校要拿出措施，及时吸纳新鲜经验并实现“本土化”。认真总结本校较成熟课程的教改报告，推动更多的课程进行实质性地教学模式改革，使“四学”教学模式从“雏形”逐步走向成熟。,4、着力改进网上教学,开放教育是基于网络的现代远程教育，试点专业学生在三级“电大在线”上实名注册应该如同入学注册。要进一步加大网上学习的组织与监管力度，确保学员网上学习时数达标。省校开发的网上行为统计功能，可监测到注册学生的学习情况，省校为尚未解决网上行为统计的分校，提供在线行为和VOD点播时间统计的技术服务。分校教师要积极参与上级电大主持的网上教研活动，组织学生收看上级电大的直播课堂，参加

21、网上答疑。在本地教学平台上开展答疑、导学、布置批阅作业等教学活动。对教师参与网上教学活动的情况动态检查和评估，作为年度考核的重要内容，对积极使用并卓有成效的教师给予适当奖励。要重视工作站网站建设，切实将在线平台和VOD真正用起来。提高网上资源的利用率和实名注册率。省校自03年首次网站检查，已形成制度化，04年6月起本科工作站纳入检查，从第九次检查开始起，所有工作站的校园网纳入检查范围。,5、落实教学资源配置与应用,中央电大关于做好开放教育试点教学点教学资源资源配置的通知，对多种媒体资源的配置提出了配置套数的底线要求。统设课程资源牵涉到版权问题，想完全通过省校购置再复制，可能难通过。分校应该配齐

22、一套中央电大原版多种媒体资源，教学点长线专业或规模较大的专业应该配一套。配置多种媒体资源这是评估要求更是满足教学需求。80%的省管课程完成了配套建设，力争年底完成配置任务。省校自建的网络课程，准备在在线平台专设栏目，省校直播课堂等视频资源都上传在VOD或挂在省校服务器上,但是所有视频资源或CAI课件都必须配置一套实物，省校最近下发省建资源配置清单。基层教学点的学员，上网不方便，工作站没有VOD 点播和卫星资源接收装置，集中学习机会也少，学生很难接触到本地辅导教师之外的教师或一本书以外的资源，希望抓紧落实资源配置工作，让学员能够听到至少是省电大课程责任教师的讲授，以此为契机推进教学资源的应用。,

23、6、探索课程考试方式改革,课程考核改革不仅仅是自身改革的问题，更重要的是拉动教学改革的深化，促进教学、教学管理、学生学习方式的全面变革，从而保障课程教学质量的不断提高。省管课程的考试方式改革，已经在部分专业的课程开展，如何逐步形成与教学模式、教学管理模式相适应的课程教学评价模式，将是我们必须深入探索的课题。本学期继续对一些省管课程采用开卷、半开卷和计算机无纸化考试和网考等多种考试方式。确定6门省管课程作为网考试点，有关网考还要组织相关培训。对于考核改革的课程，将扩大形成性考核成绩比例，特别是对那些实践性要求较强的课程，有些课程形成性考核成绩可达50%以上。因此形成性考核要在完成作业，或者以统计

24、学生上网点击率、到课率等形式进行的考核基础上，采用更为丰富的阶段性小测验、撰写小论文、案例分析、专题讨论等记录学生的学习进程的形式，使得这部分成绩真实有效。分校应建立相应的学生成绩管理制度、教师工作量和酬金制度，形成良性的课程考核管理机制，达到课程考试方式改革的预期效果。,7、加强对基层电大的指导与质量监控,电大教育分级办学，分级管理。自试点以来，省校坚持春秋两季的教学检查和各种专题检查，并对系统试点人员的开展各类培训，多渠道了解试点情况便于及时纠偏和总结推广经验。但是有些分校，对工作站管理还只是重在进出口上，在教学上没有多少联系，系统优势难以惠及基层。我们必须清醒的认识到，“试点”深入的重点

25、和难点在基层。大部分地区县级电大教学、管理、服务能力与办学规模、层次不相匹配的问题非常突出。乡镇的学生又远离学习教学点，学习支持服务和质量监控的难度都加大。农村和城市，实施远程开放教育的理念和指导思想是一致的，但在手段和措施上却不能照搬。例如，如何组织农村中小学教师学员的集中辅导和小组学习；如何借助网吧和“校校通”工程为基层学员提供上网学习的便利；如何配置适用的多种媒体资源，这些都是基层电大探索教学模式必须考虑和解决的问题。,7、加强对基层电大的指导与质量监控,第一关于教学安排 检查指导各教学点的课程教学安排，特别是面授辅导的安排，要研究如何在保证教学时数的同时提高教学时数的效力。第二资源配置

26、 我省50%以上的学生在县及以下的乡镇，农村远程教育要重视传统学习支持服务手段的应用。广播、电视、录音、录像、函授、短期集中面授和网络学习手段要结合起来。要从实情和实效出发，为学生创造远程、自主学习的条件，每门课程必须至少配备一套视频资源。第三网站建设 中央电大最近行文要求建设县站平台或资源浏览器，优秀本科工作站应该建平台，其它本科或规模在500人以上的站点应购建资源浏览器。所有工作站必须建有自己的主页，能独立的最好，不能独立的在分校网站上建。今年内各县工作站必须建成网络教室，带宽不合要求的工作站，要制定解决网络带宽问题的时间表，开通宽带网。,四、关于试点项目总结性评估,1、自评报告及其论证材

27、料，重点应反映中期评估后试点工作进展情况，如学校特色的专题论证；对照中期评估、年报年检、教学检查等反馈意见进行整改的情况等。2、除了论证材料外，省电大应为专家组提供以下相关材料：（1）全省电大招生专业、学生人数、其他办学形式及人数等基本数据。（2）校本部四支队伍人员统计表，教学人员要按已开设的试点专业分专业列出，还要注明担任试点、非试点课程的名称。（3）直属分校本学期各试点专业教学活动安排表。（4）省教育行政部门对分校、教学点评估的结论、反馈意见及评分等的全套评估材料。（5）各试点分校（教学点）的分布位置示意图。（6）教学点提供教职工和兼职教师名单及本学期课表。专家在业务档案存放部门应能看到学

28、生作业、学习记录、实践报告及毕业论文档案等教学业务档案。,在9月15 日前提交对市县电大评估材料的分析报告。内容是针对省级教育行政部门对试点分校、教学点的评估结论（按照优、良、合格、不合格四级分类）进行分析，重点分析优类分校、教学点的特色、优点，不合格分校、教学点存在的问题、下一步整改的措施办法等。,专家组进校实地考察，对于教学模式改革，着重考察三点，一是要看发展轨迹，也就是按照试点思路推进的历程；二是要看实践验证，就是痕迹，看省校教师参与的情况，包括不同专业、课程教学过程中的具体体现，看教学点实施专业、课程教学工作的情况，没有这两方面的验证，总结的再好也是空的；三是要看教学效果，用人才培养质

29、量检验教学模式的成功与否。,我省试点教学模式在边实践、边总结、边推广的过程中，不断趋于成熟的探索之旅，可分为四个阶段：第一阶段 99秋-2000年，试点启动之初 99秋启动金融专科，00春第一个本科专业金融本启动，这是安徽电大办学层次上的突破。出台了安徽广播电视大学开放教育教学和教学管理暂行办法。系统教师成立了7个学科组，骨干教师率先投入教学改革，尽管由于资源、环境、传统习惯等等因素，使得教学改革有很大的困难，但是改革意识在系统基本形成共识。标志：省校网上教学服务平台、教师用电子教案、分校减少面授课时、接受了形成性考核不仅仅是平时作业。,第二阶段 2001到中期评估 随着中期评估的启动，省校0

30、1年3月提出关于以课程为单元进行教学模式改革的意见，以13门课程作为教学改革重点课程，01年秋季课程教学一体化设计的提法正式使用。形成性考核注入新的内涵，分为学习内容和学习过程考核两个部分。明确提出教师面授辅导时数之外的教学时数的考核和付酬要求，推动了学的模式和教的模式的转变。01年底省校“电大在线”平台投入使用，02年春直播课堂和VOD 点播系统投入使用，所有分校在中期评估之前在线平台和VOD系统相继和省校对接开通。分校专职教师从01秋起逐步投身教学改革，教学改革从机械压缩课时到根据学科特点进行探索，有了质的提升。标志：重视入学教育的教学实施、推进教学一体化设计，重点课程已现模式雏形、形成性

31、考核要求和自主学习手册、初步形成网络教学环境、02年11月通过中期评估。,第三阶段 中期评估结束之后 安徽电大根据教育部评估专家组提出的整改意见，出台了关于落实试点整改深化教学改革的意见安徽广播电视大学关于实践性教学的整改意见安徽广播电视大学关于进一步加强素质教育的意见。2003春非典对于验证和锤炼电大现代远程教育的有效性是一次机遇。基于网络的的多项教学改革举措使得网上教学资源和网上教学活动的数量和质量有了突破性进展。03年中央电大第一次网上教学检查表扬做得好的是浙江、安徽两家电大。主要标志：网上教学活动质量和数量都有很大进展，获得多种阶段性成果。,第四阶段 2004年总结性评估启动之后 省电

32、大在全省电大教学改革实践的基础上，总结提炼出“训导-自主”教学模式，并提出“双主为纲，两个课堂，多元互动，立体评价”的课程教学模式的实践框架。在这个阶段，省电大通过组织参加中央电大首届“教学创新奖”活动、师资培训会、交流研讨会等方式，将试点单位教学模式改革的典型经验加以推广；如获全国电大教学创新奖教师实施的经济数学基础分层导学模式、证据学“二元”教学模式等，经过全省电大继续深入实践，最终凝练出我省课程教学改革成果“四学”教学模式。,四学模式：即在现代信息技术条件支撑下，以学习者自主学习为中心，以教育者引导学习为关键，以支持服务系统助学为基础，以质量监控体系促学为保障，“自学、导学、助学、促学”互动一体、相辅相成的现代远程开放教育课程教学模式。标志：形成代表性的教学模式，出了一批典型课程，加强了实践教学的质量保证体系的建设，加强了系统师资培训，进行了多项管理制度和质量标准建设。,谢 谢！,