基于聚类分析的期刊多属性评价方法选择研究——聚类结果一致度筛选法

[目的/意义]解决学术期刊多属性评价方法众多、评价结果不一致问题。[方法/过程]提出一种基于聚类分析的多属性评价方法选取方法——聚类结果一致度筛选法。其原理是首先对原始评价指标进行聚类,然后采用可行的多属性评价方法进行评价并对评价结果进行二次聚类,最后根据评价结果聚类与原始指标聚类结果一致度的高低来选择评价方法,优先选取聚类结果一致度最高的评价方法。本文基于JCR2015数学期刊,选取11个指标,分别采用加权线性汇总、TOPSIS、VIKOR、主成分分析、调和平均进行评价,然后基于聚类结果一致度进行评价方法选取,发现调和平均的聚类一致度最高。[结果/结论]可以采用该方法对多属性评价方法进行选择;聚类种类设置对结果影响较小;该方法具有较高的稳健性。     

基于自适应层次分析法的企业专利质量评价研究

[目的/意义] 为满足决策者对企业专利质量评价过程中希望降低外部因素影响,凸显稀缺性指标导向作用的需求,对基于自适应层次分析法的企业专利质量评价方法进行深入研究。[方法/过程] 该方法根据企业专利情报数据的分布特征,对评价指标的权重进行动态调整,降低数据分布集中的指标权重,提升数据分布离散的指标权重。[结果/结论] 实现弱化外部因素影响,凸显稀缺性指标导向作用的目的,同时使定量评价更为科学合理。以北京市海淀区6家高新技术企业专利情报数据为例,检验评价方法的有效性。     

科技评价中关键指标的测度方法研究——以学术期刊评价为例

[目的/意义]在科技评价中,不同评价指标的重要性和地位是不同的,采用科学合理的方法进行关键指标的测度具有重要意义。[方法/过程]用指标信息熵和离散系数表示信息量,用指标权重或模拟权重与指标信息量的几何平均值表示关键指标系数。以JCR 2015经济学期刊为例,采用TOPSIS进行评价,并计算指标的信息量、模拟权重和关键指标系数,发现特征因子、标准特征因子、总被引频次是关键指标。[结果/结论]研究表明,关键指标系数是一种有效的关键指标筛选方法;不同评价方法关键指标是不一样的;本方法同样适用于采用信息量赋权的评价方法;防止遗漏重要指标,保证评价指标的完备性是本文方法的前提条件;关键指标是双刃剑,既是科技管理工作的重要抓手,也要防止其中的不正当竞争。     

图书馆危机管理能力评价指标体系的构建

[目的/意义]构建图书馆危机管理能力评价指标体系,为评估图书馆危机管理能力提供参考。[方法/过程]在理论分析基础上提出初始图书馆危机管理能力评价指标体系,利用德尔菲法修正相关指标,并确定最终图书馆危机管理能力评价指标体系。[结果/结论]图书馆危机管理能力评价指标体系由3个一级指标、9个二级指标和29个三级指标组成。利用29个三级评价指标及其合成权重,可构建图书馆危机管理能力的函数表达式,并计算其大小。     

图书馆职业教育能力评价指标体系的构建

[目的/意义]构建国家或地区层面的图书馆职业教育能力评价指标体系,为评估图书馆职业教育能力提供参考。[方法/过程]在理论分析基础上提出初始的国家或地区层面的图书馆职业教育能力评价指标,利用德尔菲法确立最终的图书馆职业教育能力评价指标体系。[结果/结论]国家或地区层面的图书馆职业教育能力评价指标体系由9个一级指标、44个二级指标组成。利用44个二级评价指标及其合成权重,可以计算图书馆职业教育能力的大小。     

科技报告质量评价指标体系研究

[目的/意义] 针对当前我国科技报告资源体系建设中的质量评价问题,建立一套系统科学的评价指标体系,以为科技报告资源体系的理论研究与实践建设提供借鉴,提高科技报告服务质量。[方法/过程] 综合运用头脑风暴法、专家调查法、层次分析法与Yaahp软件,分析科技报告的质量影响因素,进而选取相应的评价指标,构建科技报告的评价指标递阶层次结构,计算各评价指标的相对权重和加权权重,进行一致性检验,结果满足一致性要求。[结果/结论] 结合现阶段我国科技报告资源体系建设实践,科技报告质量评价指标体系将从资源推荐、交流共享、科研管理3个方面得以应用。     

科技评价指标值与评价属性背离及修正研究——基于多属性评价视角

[目的/意义] 分析科技评价中指标区分度异常、数据分布有偏的深层次原因,认为本质上这是评价指标值与评价属性的背离现象,即评价指标值不能较好地体现评价属性的本质含义。[方法/过程] 提出一种新的降低评价指标值与评价属性背离的方法--对数中位数标准化,并以JCR2016数学期刊为例进行实证分析。[结果/结论] 研究结果表明：引文指标更容易出现评价指标值与评价属性背离问题;可以从多角度判定评价指标值与评价属性背离问题,如指标内涵分析、及格率、离散系数、中位数极大值比、集中度指数HHI等;采用对数中位数标准化可以大幅降低评价指标值与评价属性背离问题;建议评价中如出现指标值与属性背离,采用对数中位数处理后的数据进行评价。     

期刊影响力指标的时间异质性及其重构研究——基于多属性评价的视角

[目的/意义] 在多属性评价视角下,学术期刊影响力指标时间轴并不统一,存在时间异质性,评价对象涉及期刊创刊以来的所有论文被引、过去5年论文被引、过去两年论文被引、评价当年被引等等,迫切需要解决这个问题。[方法/过程] 以CSSCI科技管理类期刊为例,提出了两个新指标：隔年影响因子、隔年h指数,并基于灰色关联分析和期刊被引数据统计,验证了这两个指标的合理性。[结果/结论] 期刊被引指标的设计必须尊重时效性、鲁棒性、年度内评价等原则;多属性评价时,期刊评价被引指标必须尽量保证时间轴一致;来源指标与隔年被引指标数据均来自于期刊载文当年数据,多属性评价时间轴本质上只有一个。     

面向学术图书的Altmetrics指标分析

[目的/意义] 探讨Altmetrics指标对学术图书影响力进行评价的有效性,为学术图书评价工作提出合理建议。[方法/过程] 获取Twitter提及量、Mendeley阅读量、在线书评数量以及馆藏量指标数据,对数据集的覆盖率、分位数等统计量分析后,将被引频数与Altmetrics指标进行了指标间相关系数检验,再对高Altmetrics指标值的学术图书进行年份分布、学科差异及图书主题等实证分析,探究各指标在学术图书影响力评价中的应用。[结果/结论] 传统计量指标被引频数与Altmetrics指标之间的相关性较低,说明Altmetrics可以作为学术图书评价的一个新视角,不同Altmetrics指标反映了学术图书影响力的不同维度。未来的学术图书影响力评价建议结合学术图书的年份、学科等特征,将传统的引文与Altmetrics指标相结合,探索更全面有效的评价机制。     

基于关联数据的科研机构评价指标权重计算方法研究

[目的/意义] 科研评价中指标权重计算的合理性将直接影响科研机构评价结果的客观性和准确性,本文提出利用信息论方法来计算指标权重,为指标权重计算提供一种新的思路。[方法/过程] 基于DBpedia数据集,利用信息论方法计算出的指标权重和上海交通大学世界大学排行榜已有的指标权重,同时对榜单前100名大学机构进行排名,并将排名结果进行对比分析。[结果/结论] 实验发现利用本文提出的权重计算方法得出的机构得分结果与上海交通大学已有指标权重的得分结果皮尔逊相关性为0.980,斯皮尔曼相关性为0.939,并且其排名顺序和上海交通大学给出的排名顺序皮尔逊相关性和斯皮尔曼相关性均为0.939。以上两个排名结果的得分相关性和排名相关性极强,证明本研究中关联数据的权重计算方法的有效性。     

FWG1法在社会化问答平台答案质量评测体系构建中的应用研究

[目的/意义]答案质量越发成为影响社会化问答(SQA)平台使用效果的重要因素。构建评测体系对SQA平台答案质量进行评价,可以优化用户体验和促进平台发展。[方法/过程]结合专家评分法及三角模糊加权平均G1法,构建包含12个指标的SQA平台答案质量评测指标体系。通过对4个领域共40个问题的评价,证实指标体系的科学性。[结果/结论]形成一套可用于整体评价、赋予指标权重的评测体系,了解了国内SQA平台的答案质量和存在的问题,为平台发展及后续研究提供参考。     

被引时间异质性与被引分布均衡性相结合的期刊评价研究

[目的/意义]针对现有评价方法对期刊影响因素考虑不全面的问题,提出一种将期刊被引频次、被引时间异质性与被引分布均衡性相结合的期刊综合评价方法。[方法/过程]首先,基于期刊被引时间的异质性计算加权篇均被引频次;其次,利用改进后的泰尔指数衡量期刊被引分布的均衡性;最后,利用熵权法与灰色关联分析法将被引时间异质性与被引频次均衡性相结合,构建期刊综合评价指数——关联度指数(Relevance Index,简称RI)。[结果/结论]通过对国外图书情报领域的40种期刊进行实证分析,结果发现:相比于JIF和h指数,RI指数能够考虑期刊被引时间的异质性,时效性更强,权重分配更合理;RI指数能兼顾期刊被引分布的均衡性,能够识别平均影响力较强的期刊,评价结果更加客观、全面。     

基于语言评价信息的移动电子商务服务质量评价研究

[目的/意义] 针对现有移动电子商务服务质量评价指标不客观的问题,重点研究移动电子商务环境下评价服务质量的模型及方法,为消费者科学选择电商服务提供参考,为企业改善服务质量提供建议。[方法/过程] 引入群决策理论中的对语言评价信息的处理方法,首先将7粒度短语评价信息转化为三角模糊数,然后收集用户给出的语言短语形式评价信息,计算各个评价指标的质量评价值,最后计算评价值与三角模糊数之间的相似度,相似度最高的语言短语即为其对应的服务质量评价等级。[结果/结论] 以手机淘宝服务质量为评价对象进行实证分析,验证了基于语言评价信息的移动电子商务服务质量评价方法的科学性和有效性。     

基于投影寻踪模型的科技期刊学术水平评价研究

选取8个能综合反映科技期刊学术水平的指标,用投影寻踪模型对我国农业类大学学报的学术水平进行综合分析。结果表明：投影寻踪模型所确定的各指标的投影方向避免了权重的主观赋值所带来的弊端,综合特征值能客观反映期刊实际学术水平,为科技期刊学术水平评价提供了一种新的方法和思路。     

基于组合赋权-TOPSIS法的高校图书馆数字资源服务绩效评价

[目的/意义] 构建科学合理的高校图书馆数字资源绩效评价指标体系，并运用评价模型来开展湖南省高校图书馆数字资源服务绩效的实证评价，为有针对性地采取高校图书馆数字资源服务绩效优化改进措施提供科学的决策依据。[方法/过程] 从投入、过程和影响三大维度出发，构建一个由7个一级指标和19个二级指标组成的高校图书馆数字资源服务绩效评价指标体系。在此基础上，利用主观赋权方法中的层次分析法和客观赋权方法中的CRITIC法相组合的赋权模型，测算绩效评价指标的组合权重，并进一步采用改进型TOPSIS法测算高校图书馆数字资源服务绩效评价值。[结果/结论] 湖南省高校图书馆数字资源服务能力与其学校所属类型高度相关，并且呈现出较显著的差异。从高校图书馆数字资源服务绩效的影响因素来看，各高校图书馆数字资源在投入成本、宣传培训与推广以及学术产出方面存在明显差异，在整体内容、检索系统、配套服务以及利用情况方面的差异略小。今后湖南省各类型高校图书馆除了针对数字资源服务的薄弱环节进行优化改进之外，还需要从投入、过程和影响多维度视角出发，系统全面提升图书馆数字资源服务绩效。     

期刊PR8指数:一个新的跨学科期刊评价指标及其实证研究

[目的/意义] 基于论文被引频次8个区段百分位数排序（percentile rank 8,PR8）赋分,尝试构建新的跨学科期刊评价指标：期刊PR8指数（journal index for PR8,JIPR8）,并检验JIPR8的跨学科期刊评价效果。[方法/过程] 选择JCR中8个学科301种期刊作为研究对象,分别计算每种期刊的JIPR8,并与其他几个跨学科期刊评价指标进行比较,检验JIPR8跨学科期刊评价的敏感度和稳定性,以及与其他跨学科期刊评价指标的相关性。[结果/结论] 在选择的所有指标中,8个学科301种期刊JIPR8的变异程度最低,说明其用于跨学科期刊评价的稳定性最好;不同分区期刊（Q1、Q2、Q3和Q4） JIPR8的组间差异性较为明显,仅次于期刊影响因子百分位（journal impact factor pencentile,JIFP）,表明其对优秀和一般期刊的区分度较好。认为JIPR8是一个非常理想的跨学科期刊评价指标。