研究生学位论文质量评价指标体系的建立

作者:俞婉琦;吴梦吟;李秀央; 刊名:教育教学论坛 上传者:谢慧云

【摘要】目的:构建研究生学位论文质量评价指标体系,改进现有评价标准。方法:邀请12名相关领域专家作为调查对象,应用Delphi法对初步构建的研究生学位论文质量评价指标体系进行3轮咨询,利用层次分析法确定指标权重并建立综合评价模型,同时采用秩和比综合评价法进行实测评价以分析指标体系的科学性。指标体系的信度评价采用Cronbachα系数,效度评价采用探索性因子分析方法。数据分析采用IBM SPSS 20.0统计软件,以P≤0.05为具有统计学意义。结果:本研究构建了由9个一级指标和52个二级指标构成的指标体系。指标体系整体内部一致性信度高(Cronbachα=0.902),探索性因子分析共提取6个因子,分别命名为"文字表述"、"研究方法"、"资料分析"、"写作规范"、"文献综述"、"选题",累计贡献率为50.32%。该指标体系的实测评价结果与秩和比综合评价法结果呈正相关(r=0.942,P<0.05);秩和比综合评价法回归方程为RR=0.100+0.080×Probit,根据Probit值将实测对象分为优秀、良好、及格和不及格四档。结论:本研究建立的指标体系专家认可程度高,整体信度较好,结构效度尚不理想,且与传统的秩和比综合评价法结果一致性高,说明该指标体系整体上科学、合理、有效,具有应用价值。

全文阅读

研究生学位论文(Graduate Degree Thesis)是高等学校或研究机构的研究生为取得学位,在导师指导下完成的科学研究、科学实验成果的书面报告。其作为连接理论和实践的纽带[1],是研究生就学期间最重要的一项任务,它不仅汇聚了研究生对所学知识的理解和运用,更反映了研究生的工作实践能力和科研技术水平,是衡量高校研究生培养水平最重要的标志[2]。因此,如何科学、客观地评价研究生的学位论文质量至关重要。目前国内高校现行的学位论文质量评价方法存在评价指标粗略、评分标准模糊、受评审专家主观因素影响较大等问题[3-5],急需一套客观、科学、全面的指标体系和评价方法。本研究在深入了解研究生学位论文的特点及内涵的基础上,运用Delphi法、层次分析法及秩和比法建立学位论文质量评价的指标体系和综合评价模型,为研究生学位论文质量评价提供标准和测量工具。一、对象与方法1.对象。根据Delphi法开展研究,邀请符合以下条件的12名相关领域的专家作为调查对象。(1)从事高等教育或科研工作10年及以上。(2)中级技术职称及以上,硕士学历及以上。(3)对本研究积极性较高,愿意参加2—3轮专家咨询。(4)愿意支持研究生学位论文质量评价研究,能够从不同视角提供意见及建议。2.方法。(1)指标筛选。本研究在2016年3—10月期间采用Delphi法对达到入选标准的专家进行三轮问卷调查,调查采用面呈及电子邮件的形式进行。专家资讯问卷采用李克特5点量表的形式,5分为“绝对必要”,4分为“必要”,3分为“无所谓”,2分为“不必要”,1分为“绝对不必要”。专家意见的集中和离散程度通过专家打分的满分频率(K)、算术均数X軍、标准差(s)、变异系数(CV)进行评价。对指标按如下规定进行筛选:(1)满分频率K≥50%,认为该指标必要程度高,可保留。(2)某项指标得分的算术均数X軍≥4,认为必要程度高;3≤X軍<4,结合满分频率和变异系数判断是否剔除;X軍<3,剔除该指标。(3)某项指标变异系数CV≤0.25,认为专家意见一致性较好;CV>0.25时结合满分频率和算术均数判断是否剔除该指标。(2)权重确定。本研究利用层次分析法(AnalyticHierarchy Process,简称AHP)确定指标权重,采用1—9Saaty标度,根据Delphi法得出的专家对各指标的重要性赋值均数进行两两比较(见表1)。假设Zij、Zik分别为某一层次中任意两个指标的重要性分值,根据两者的差值确定Saaty标度的规定如下:若0.25≥Zij-Zik,Zij与Zik同样重要,Saaty标度取1;若0.25<Zij-Zik≤0.5,Zij比Zik稍微重要,Saaty标度取3;若0.75<Zij-Zik≤1.0,Zij比Zik相当重要,Saaty标度取5;若1.25<Zij-Zik≤1.5,Zij比Zik强烈重要,Saaty标度取7;若1.75<Zij-Zik,Zij比Zik极端重要,Saaty标度取9;如差值在两个尺度之间,则Saaty标度取2、4、6、8.根据上述规则,构造各层指标的判断矩阵,确定表1 11—9标度及其描述指标权重,并检验其逻辑一致性。(3)实测评价。本研究以2008—2015学年的研究生学位论文作为实测对象。其中,国内硕博论文通过浙江大学图书馆购买的中国知网(CNKI)数据库进行检索,国外研究生学位论文通过OADT国际硕博学位论文发现系统获得。样本含量计算公式如下:n=u2απ(1-π)δ2×deff(1)式中π=50%,α=0.05,允许误差δ=10%π,复杂抽样的随机效应deff=1.

参考文献

引证文献

问答

我要提问