基于网络环境下远程开放教育学生自主学习能力评价的研究

2013-02-01 08:50邵珠贵邵珠富
吉林广播电视大学学报 2013年5期
关键词:效度信度远程

邵珠贵 邵珠富

(吉林广播电视大学吉林市分校,吉林市132002;吉林北华大学,吉林市132002)

自主学习能力是进行远程开放教育学习和建立学习型社会的重要前提和保障,直接影响其教育质量和效果。为了有效进行培养自主学习能力的研究和科学的对学生进行教育和管理,需要准确地对学生的自主学习能力进行客观评价。目前国内对自主学习的评价研究,主要集中在传统教育方面,对远程开放教育的自主学习能力的评价研究还不多见。但远程开放教育学生的管理更加自由与松散,学生学习的自觉性与自律性更为重要,学生的学习效果会更加突出的受到学生自主学习能力及学习积极性的影响,对远程开放教育学生自主学习能力的评定与研究具有重要的理论意义和实践价值。

根据“行为主义学习理论认为学生评价只关心人脑所输出的反应(在纸笔测验中就是学生对试题的回答),而避免进入人脑内部的思维过程。就是只关心结果的评价,而忽视对过程的评价。”①本研究采用在教育研究中比较流行的纸笔测验方法(问卷法)。这种方法的基本假设是“分解”与“情境化”。前者认为“人的认知能力能够分解为一个个最小的单位,测试题目只要能够考察到这些最小单位,将这些最小单位上的分值相加,就可以得到认知能力的总体情况。”②后者认为“知识规律具有普遍性和独立性,不依赖其所运用的情境而变化,因此评价时只要单独呈现知识问题本身即可。”③

依据上述理论,编制一份适合于远程开放教育学生自主学习能力评价量表(问卷),以满足当前远程开放教育教学与管理中对学习能力与状况评定的需要。以往对自主学习能力的评价基本是根据一些事实资料的主观描述,缺乏对其量化的评价研究,尤其对现代远程开放教育学生自主学习能力的评价工具更是空白。经过研究我们编制了适合现代远程开放教育学生自主学习能力的评价工具,并对评价工具的信度和效度进行了深入考察。

一、评价工具的制作

1、理论维度的确定

根据参考资料[5]所述的自主学习能力的内涵,结合自主学习现状的实际调查情况,设定评价工具问卷为七个维度:

学习观念(主要为:学习目的、对网络教育的认识);

基础能力(主要为:基本认知能力、专业基础);

技术能力(主要为:计算机使用能力、网络操作能力、学习资源利用能力);

学习能力(主要为:设定学习目标、制定学习计划、选择学习内容、工学矛盾处理等);

协作能力(主要为:控制和组织有利于学习的物质与人际环境,如和教师沟通交流、参加学习小组等。);

实践能力(主要为:理论应用于实际的能力,如参与社会实践和毕业设计等。)

调控能力(主要为:对学习过程的自我监控与自我调节情况;如对学习的自我检查、自我总结、自我评价、自我强化情况。)

2、问卷项目的编制

根据各维度确定的范围并参照参考资料[5]中的“自主学习基本情况调查问卷”共编写出35个项目问题。问卷采用四项选择总加量表的形式,量表从最低一分到最高4分。请业内教师和管理人员对问卷初稿进行审议,根据提出的问题对项目及语义进行修改。用此初步问卷对局部少量学生进行了预试,根据预试结果对问卷修改为32个项目,每个维度2到6个项目。

3、问卷施测

共发放了150份纸质问卷,并在网上设计了网页电子问卷。回收后剔除不合格的问卷,共计回收有效纸质和电子问卷合计160份。为了使问卷能科学客观的反映学员自主学习能力的真实状况,利用数理统计分析软件对问卷数据进行处理。

二、量表的结构分析

1、项目分析

将回收的有效问卷数据输入到SPSS18统计软件中。首先进行各项目间的相关分析,删除掉与总分相关系数小于0.3的低相关项目2,还剩30个项目。

2、因素分析

在项目分析的基础上,用SPSS软件对剩余数据进行探索性因素分析。首先用SPSS18统计软件对问卷数据进行是否适合做因素分析的检验,经过处理得到相关数据:Bartlett球形检验的卡方值为4793.638,相应概率sig为0.000,可以认为相关系数矩阵和单位矩阵有显著差异;测得KMO的数值为0.78,根据Kaiser给出的度量标准一般KMO大于0.8就适合作因子分析。本例中为0.78近似0.8,可以做因子分析。

因素分析采用主成份分析法,旋转方法采用最大变异法,根据因素结构的碎石图和因素解释的总方差百分比的数值选定保留6个因素,这六个因素可以解释总方差的68.810%,其精度可以满足调研的估算要求。根据成份矩阵中各因素表征的项目关系和项目的实际含义,删除掉不归属这六个因素的5个项目重新探索问卷结构为25个项目。

因素分析的结果与问卷设计时的结构大体保持了一致,在一定程度上得到了相互验证。

3、因子命名

根据各因子所对应的内容对其进行归纳命名。第一个因素包括第9,10,11,12,13,14,15,16,17共计9个项目,这几个项目要了解的是学员参与网络教育学习所采取的方式方法,即网络学习所需要的一些具体能力,命名为“网络学习”;第二个因素包括第5,6,7,8共计4个项目,这几个项目内容涉及学生学习应具备的知识基础和实际技能,反映学生学习新知识的内在基础,命名为“基本技能”;第三个因素包括第1,2,3,4共计4个项目,这几个项目内容涉及对远程开放教育的认识和参与学习的目的,这些决定了学员对自主学习方式的自觉接受和内在的学习动力,命名为“学习观念”;第四个因素包括第18,19,20计3个项目,这些项目反映了学生协作交流方面的能力,命名为“协作交流”;第五个因子包括28,29,30共计3个项目,反映了学生对学习过程自我控制调节的能力,命名“学习调控”;第六个因子包括23,24共计2个项目,反映了学生理论联系实际学习和参与实践的愿望和能力,命名“实践应用”。

4、量表分值计算

最终量表一共有25个题项,每个满分是4分,总共正好为100分。具体将得分定为6个档次,以便能形象的衡量被测对象自主学习能力的水平层次。我们用asp.net编制了网络自主学习自测软件,在电脑问卷上输入相应选择,电脑自动计算被测人自主学习能力分数,并输出能力档次及建议。如下表所示:

?

三、量表的验证性分析

模型与现实匹配的程度如何,需要进行验证分析。我们利用LISREL8.70进行验证性分析即结构方程的分析,以此检验模型与实际数据的拟合程度。将问卷数据输入LISREL8.70处理得到如下表参数值:

?

表中数据表明模型的拟合度较好,验证了量表由6个因子构成的结构假设。其中:“χ2/df为卡方值与自由度的比值,一般应该小于2,但大样本情况下小于5即可。RMR是残差均方根,应该小于0.08。RMSEA是近似误差均方根,应该小于0.06。GFI是拟合优度指数应该等于或大于0.90。NFI是规范拟合指数,NFI越接近1越好。CFI是比较拟合指数,其值大于0.90表示模型可接受,越接近1越好。”④

四、量表的信效度分析

1、量表的信度分析

“信度(Reliability)即可靠性。”⑤本研究采用克隆巴赫系数(Cronbach'salpha)方法检视信度。该系数愈高则量表的信度愈高。一般信度介于0.70-0.98均属高信度,而低于0.35则为低信度。本模型克隆巴赫系数为0.81

2、量表的效度检验

“效度(Validity)即有效性,它是指测量工具或手段能够准确测出所需测量的事物的程度。”⑥

(1)内容效度

“内容效度又称表面效度或逻辑效度,是指所设计的项目内容能否表达所要测量的内容或主题。”⑦常采用逻辑分析与统计分析相结合的方法进行评价。为了保证内容效度,我们在问卷编制过程中严格界定问卷的内容范围,对问卷的每个项目内容都仔细斟酌,严格按照自主学习的相关理论研究成果进行筛选,以便能够使问题内容尽可能的全面恰当的反映远程开放教育学员自主学习的实际能力。问卷编制过程中多次将问卷交予从事远程开放教育的一线教师和教学管理人员以及在读学员进行讨论,广泛征求意见,并根据他们提出的意见进行多次修改,以便使问卷的信度满足实际需要。

(2)效标效度

“效标效度是指用不同的测量方式对同一变量进行测量,”将结果与校标比较“如果其他方式也有效,那么它既具备效标效度。”⑧自主学习能力是影响学习效果的一个重要因素,自主学习能力高的学生应该有相对较好的学习成绩。因此,利用学生的考试成绩作为自主学习的效标进行校标效度检验是可行的方法。取100名学员的期末各科考试成绩,分别计算各自的平均分,再取成绩从高到低顺序排列的前后各30的学生的成绩作为优生和差生进行比较。结果是差生得分都在60分以下,优生得分都在80以上。

通过两组成绩的差异检验,表明成绩高的学生比成绩低的学生在量表得分上有显著差异,量表得分越高,学习成绩也越好。从学习成绩方面说明量表能够反映学员自主学习能力的高低。

通过对量表信度、内容效度、准则效度的分析,表明量表达到了比较满意的预期效果。

五、量表讨论

从量表的内容来看,本研究根据自主学习有关理论,结合远程开放教育学生自主学习的实际状况进行问卷设计,所设计的问卷内容比较贴合实际;通过对量表探索性因素分析和验证性因素分析也表明量表结构比较合理,从而保证量表的确定性、稳定性和可靠性,通过信度分析也说明了量表在内容设置上的有效性,对量表各维度进行的相关分析也佐证了这点;通过对量表的效度分析,再次证明了量表的有效性。

从因素分析的结果来看,它与我们的构想存在一定差异,部分项目被并入其他维度,也有的因项目分析或载荷过低被剔除,同时又出现了新的维度。探索性因素分析主要依据数据的状况进行结构的探索,不同的因子选择标准将导致不同的数据结构,在因子选择过程中,我们严格按照碎石图、因子方差贡献率和项目载荷等参照标准,结合理论构想提出了量表六因子的模型,从量表的内部性信度、内容效度、准则效度等量表评价指标来看,虽然因素分析后的量表与之前的理论构想存在差异,但编制的量表能简洁、客观地测量出开放教育学生自主学习能力的实际水平程度。因此我们认为量表的编制是比较成功和有效的。

总体说来,本量表的因子结构简洁清晰,能较好反映自主学习能力的本质,较好体现了自主学习理论和我们关于自主学习的界定。不仅反映学习者在动机上的自主性,也较完整地反映了学习者的学习过程,在学习方法、学习管理和学习求助上都很好地体现了学习者的主动调节性、自主性。

在课题组成员的共同努力下,经过一段时间的辛苦研究工作,制作出关于自主学习能力的评价量表,利用该量表对远程开放教育的学员进行自主学习能力的评价收到了较好的结果,比较客观的反映了广播电视大学远程开放教育学员自主学习能力的实际状况。

注 释:

①②③张延凯.课程实施与教学创新[M].北京:央广播电视大学出版社,2009:64—65.

④张文彤.spss 统计分析基础教程[M].北京:高等教育出本社,2004:178.

⑤⑥⑦⑧周孝正.社会调查研究[M]北京:中央广播电视大学出版社,2010:74—77.

[1]于文秀.开放教育入学指导百问[M].北京:中央广播电视大学出版社,2005.

[2]葛道凯.开放教育入学指南[M]].北京:中央广播电视大学出版社,2009.

[3]黄良文.统计学原理[M].北京:中央广播电视大学出版社,2009.

[4]孟庆茂.教育科学研究方法[M].中央广播电视大学出版社,2010.

[5]邵珠贵.关于网络环境下远程开放教育学员自主学习能力的培养和提高[J].吉林:吉林广播电视大学学报,2012,(11).

猜你喜欢
效度信度远程
让人胆寒的“远程杀手”:弹道导弹
远程工作狂综合征
《广东地区儿童中医体质辨识量表》的信度和效度研究
慈善募捐规制中的国家与社会:兼论《慈善法》的效度和限度
远程诈骗
平衡损失函数下具有时间效应和通胀因子的信度估计
耳鸣残疾问卷中文版的信度和效度检验及其临床应用
中文版脑性瘫痪儿童生活质量问卷的信度
复杂图形测验对区分阿尔茨海默病与非痴呆的诊断效度
一次神奇的远程渗透破袭战