影响研究生学位论文质量的全要素分析

［摘 要］ 研究生学位论文质量的全要素分析是衡量研究生知识水平、科研能力、综合素质等培养质量的重要依据。目前研究生论文质量要素与评价机制存在缺少规范化表征与客观性验证的问题，亟须通过学位论文质量的全要素分析，构建兼顾定量与定性的评价机制。通过研究生学位论文质量全要素分析，提出一种多准则评价机制。从论文质量及其体现的培养素质层面重新分类细化研究生学位论文影响要素。采用层次分析法设计一种基于全要素分析的多准则评价机制，建立客观合理的评价体系。采用国内某“双一流”建设高校研究生学位论文验证分析，表明所提评价机制能够客观衡量论文水平，为科学评价研究生学位论文质量提供量化依据。

［关键词］ 研究生；论文质量；全要素分析；多准则评价；评价机制

［基金项目］ 2022年度全国工程专业学位研究生教育指导委员会华北区域协作组研究课题“自动化专业人才培养模式研究与实践”（40002011201607）；2021年度教育部产学合作协同育人项目“控制系统设计与实现虚拟仿真教学”（202102464027）；2022年度北京市教育科学规划重点课题“基于双闭环策略的研究生学位论文质量提升研究”（3055-0033）；2021年度北京高等教育本科教学改革创新项目“任务驱动的《自动控制原理》课程创新改革与实践”（140）

［作者简介］ 王晶晶（1995—），女，甘肃平凉人，工学博士，北京工业大学信息学部讲师，主要从事研究生教育研究；侯 莹（1982—），女，北京人，工学博士，北京工业大学信息学部副教授，主要从事研究生教育研究；韩红桂（1983—），男，江苏泰州人，工学博士，北京工业大学研究生院副院长，信息学部教授，博士生导师（通信作者），主要从事研究生教育与管理研究。

［中图分类号］ G643.8 ［文献标识码］ A ［文章编号］ 1674-9324（2024）18-0010-06 ［收稿日期］ 2023-09-19

高等教育作为教育系统的重要组成部分之一，旨在培养高素质人才［1-2］。研究生教育是高等教育中最高层次的学习和研究活动，是高校科学研究和人才培养的重要组成部分。自20世纪以来，我国研究生教育得到了前所未有的发展，博士研究生和硕士研究生招生规模大幅扩大，呈现指数增长趋势。相较于快速增长的招生人数，研究生毕业人数增长相对平缓，这一情况说明，我国高等教育的规模数量增长与高素质人才标准的比例尚未达到需求预期。如何有效提高研究生教育质量，引起了国家的高度重视与社会的广泛关注［3］。作为衡量研究生培养质量的核心标准的研究生学位论文质量，是研究生学位授予的根本依据，是研究生研究能力、创新性及论文价值的集中体现［4-5］；学位论文也是未来研究人员、高校教师和其他高级专业人才的重要评价标准，直接关系到国家高层次人才培养的水平［6-7］。因此，如何有效评价研究生学位论文质量，成为目前学术管理中亟待解决的问题之一。

目前，我国高校开展了大量关于学位论文评价标准、模式、指标体系和方法的研究，其中影响因素分析和评价指标体系的建立大多基于综合质量评价。罗小丹［8］在硕士研究生学位论文质量的综合评价分析中指出，学位类型、前置学校、选题来源、导师的指导次数对学位论文质量存在显著影响。乔少杰等［9］从资料收集与处理分析能力、基础知识、实验框架、编程能力几个方面，分析计算机专业硕士研究生学位论文质量的关键因素。张小民等［10］建立了影响工学博士学位论文质量因素的结构方程模型，通过统计分析说明课程学习、科学研究、导师指导和条件支持四因素对学位论文质量的支撑作用不显著。Lian等［11］将学生特点和培养方式作为影响论文质量评价的关键变量，建立了基于随机森林的质量评价预测模型。

基于研究生学位论文质量影响要素分析，现有的评价机制研究比较分散，包括研究生培养过程质量评价体系、学位论文过程质量评价体系，以及单一要素的评价体系。要提高高等教育标准，提升教育评估质量，应提升学位论文的质量评价体系，进而提高评估的质量和一致性［12］。此外，《关于规范高等学校SCI论文相关指标使用 树立正确评价导向的若干意见》指出，鼓励定性与定量相结合的综合评价方式，探索建立科学的评价体系。刘平等［13］基于细化的目标层、准则层和指标层，建立了一套完整的研究生培养质量评价指标体系。张仲宁［14］从论文选题、开题与评审、答辩、抽检、导师作用等方面阐述了硕士研究生学位论文质量评价体系的构建。周春雷等［15］系统总结了学位论文综述中的常见问题，设计了学位论文综述质量评价体系，指出可以从文献搜集能力、文献组织能力、书面表达能力、引用规范程度及学术道德修养五个方面全面而深入地评价学位论文综述的质量。俞婉琦等［16］采用层次分析法构建了研究生学位论文质量评价指标体系，提高了专家认可度和整体信度。

然而，以上文献大多只考虑了某一类型研究生学位论文质量的部分外部因素，存在评价指标粗略、评分标准模糊、受评审专家主观因素影响较大等问题，亟须通过全要素分析建立全面普适的评价指标和客观、科学、合理的评价机制［17］。同时，应综合考虑不同类型的研究生论文质量以及学生培养质量，建立基于全要素分析的多准则评价体系，以构建形成研究生学位论文的有效监管保障体系，提升学位论文质量。因此，本文通过学术型博士研究生和硕士研究生学位论文质量的全要素分析，提出一种多准则多层次评价机制，如图1所示。在已有评价体系的基础上，综合论文质量层面和培养质量层面，全面分析并重新分类细化学位论文质量要素，构建包括目标层、准则层和指标层的研究生学位论文质量多准则评价体系。利用层次分析法，确定学术博士学位论文和学术硕士学位论文指标层的权重，将定性与定量的评价要素综合为统一评价模型，形成研究生学位论文质量多准则评价机制。同时，本文通过指标体系的信度分析和效度分析以及评价结果的相关性分析，说明所提研究生学位论文质量评价体系的科学性、合理性和有效性。

一、研究生学位论文质量全要素分析

现阶段学术博士和学术硕士的学位论文的评价指标体系主要考虑三个方面：论文选题与综述，论文成果的创新性与效益，以及论文体现的理论基础、专门知识和科学研究能力。该评价体系虽凸显了研究生学位论文的创新性要素，但评价指标要素不够全面，评价效果主观性强，分类模糊，难以规范、客观地反映研究生学位论文质量。

为解决上述问题，本文从研究生培养的过程性环节出发，分析论文选题、论文水平、写作能力和答辩能力等影响研究生学位论文质量的全要素［18-20］。从研究生论文质量与其反映的培养素质层面，分析论文质量层面的影响要素，主要包括：论文选题、文献综述、论文学术水平、写作能力四个方面；论文反映的培养素质层面的影响要素主要包括科研能力和学术道德素养两个方面。

从系统分析的角度出发，依据科学合理、相对独立、重点突出等原则，本文分析了学术博士学位论文和学术硕士学位论文水平的主要影响要素。通过对从事科研教学领域的专家学者等进行征询，构建了包括目标层、准则层和指标层的研究生学位论文质量综合评价体系，如表1所示。

分析研究生学位论文质量评价体系中准则层的选取意义如下。

（一）论文选题

论文选题是研究生进行论文工作的开端，需要研究生进行自我追问与确证过程［18］。只有通过慎重求索与充分论证，才能形成有价值的论文选题。因此，应将论文选题作为单独的评价指标，以引起研究生对选题的重视与思考。

（二）文献综述

文献综述是研究生学位论文的重要组成部分，研究生通过对已有成果进行系统而深入的归纳、总结，梳理出该研究领域的发展脉络并发现存在的问题或空白点，为后续的研究提供依据［15］。文献综述不仅体现研究生对该研究领域现状及问题的认识，也体现研究生的学识水平、学术视野和论文的研究价值，是评审专家评判论文质量的重要观察窗口。

（三）论文学术水平

研究生学位论文的学术水平是衡量质量的主要标准。创新性是体现论文学术水平的重要依据，论文难度、论文方法的科学性、良好的应用前景及经济和社会效益直接体现了论文学术水平的高低［16］。

（四）独立科研能力

科研能力是研究生培养的重要内容，学位论文则是体现其科研能力的主要成果。作为评价研究生素质的核心要素，独立科研能力需要扎实的理论基础、丰富的专业知识，以及发现问题与解决问题的科学研究能力［19］。

（五）写作能力

写作能力是衡量人才的一个重要标准，也是研究生科研素质的要求之一［19］，研究生学位论文质量在很大程度上依赖于写作能力，论文的整体构架是否合理，逻辑结构是否清晰，语言是否具有学术性、逻辑性、流畅性以及规范性等构成了写作能力高低的评判标准。

（六）学术道德素养

学术道德是研究者进行学术研究时应遵守的基本规范和准则。将学术道德素养中几个重要因素作为学位论文质量评价标准，能够有效加强研究生学术规范意识，提升学术素养。

二、研究生学位论文质量的多准则评价机制

合理的研究生学位论文质量评价体系具有良好的信度和效度，能够真实反映学位论文的质量和水平，有助于分析学位质量的影响要素，进而为提升学位论文质量提供保障。在分析研究生学位论文影响要素的基础上，利用层次分析法使定性与定量分析有机结合，层次化、系统化地确定学术博士和学术硕士学位论文的各指标权重［21］。

通过征询从事高校教学一线及科学研究领域的专家，分别构造了学术博士研究生和学术硕士研究生学位论文评价指标间的判断矩阵，两者的论文质量评价准则层和指标层的权重见表2。由表2可见，论文学术水平和独立科研能力是研究生学位论文质量评价的首要考量要素，博士学位论文更强调论文学术水平，硕士学位论文更注重独立科研能力；学术道德素养是科研真实性的评价指标，是科学研究的基础；写作能力、文献综述、论文选题等指标则可以从侧面反映研究生的学术成果水平。

在学位论文质量评价体系中，论文学术水平指标中的创新性是最重要的考核指标，表明科学研究的主要目的为科研创新；在科研能力指标中，理论基础是综合考查研究生对研究领域现状的了解程度，是科研能力的直接体现；在学术道德素养指标中，学术不端是最严重的学术道德问题，反映出现阶段对研究生学位论文真实性考核的重要性。相比博士学位论文，硕士学位论文在创新性上的要求更低一些，更加注重研究基础、论文工作量和写作水平，符合研究生培养需求。指标体系整体权重构建合理，反映了现阶段研究生学位论文的主要考核要求。

此外，在该学位论文质量评价体系中，可将学术道德素养作为预警论文的评判标准，即：若学位论文的学术道德素养评分低，则应标记为预警论文，表明其具有学术不端风险，应进行严格审查。

三、研究生学位论文质量评价体系检验与分析

一套科学的评价指标体系应遵守科学性原则、导向性原则和可行性原则。指标体系设定的目的是对学位论文质量进行客观评价，应具备实效性和完备性。因此，本研究采用分层随机抽样法，对国内某“双一流”建设高校的近两年研究生学位论文进行测评。共抽取606份研究生学位论文，按照学科、导师职称、学位名称、出版时间进行分层随机抽样实测。

为验证所提研究生论文质量评价指标体系的科学性，对其进行信度分析［22］。针对抽取的606份研究生学位论文，指标体系整体克龙巴赫α系数为0.891，表明所提评价指标体系具有较高的可信度。

为分析评价体系的内容效度和结构限度，通过适当性检验判断观测变量是否适合做因子分析，结果显示KMO=0.873，球形检验p＜0.001，表明指标间存在公共因子，适合进行因子分析。通过统计数据量表的结构效度分析，效度系数在0.4～0.6之间，表明量表的效度较高，说明所提评价指标体系的结构准确性较好。