综合评价指标体系构建_优度_评价研究
第32卷 第1期2010年2月
武汉理工大学学报・信息与管理工程版JOURNALOFWUT(INFORMATION&MANAGEMENTENGINEERING)
Vol.32No.1
Feb.2010
文章编号:1007-144X(2010)01-0122-04文献标志码:A
综合评价指标体系构建“优度”评价研究
李远远,云 俊
1
2
(1.桂林电子科技大学管理学院,广西桂林541004;2.武汉理工大学管理学院,湖北武汉430070)
摘 要:针对目前指标体系构建缺乏统一的优劣评价尺度的问题,基于指标体系构建原则,度,提出指标体系构建“优度”评价的指标体系,、、指标体系稳定性、协调性和结合性7个方面,优度”设计了最优指标体系的获取流程。关键词:指标体系;优度;综合评价中图分类号:F272.5
I:10.3963/j.issn.1007-144X.2010.01.032
全面
性、而,互独立,造成指标间的信息重叠,指标的个数越多,指标间信息重叠的程度就可能越高;反之,指标个数越少,可以提高指标的独立性,但会影响指标的全面性,因此,需要在指标体系的全面性和独立性之间求得平衡。此外,指标体系反映评价目的的必要性、指标数据获取的可行性、指标体系的稳定
[2]
性等方面都需要进行客观的测度。笔者基于指标体系构建的基本原则,从科学规范的角度,提出指标体系构建“优度”评价指标体系。
[1]
(4)指标获取难度。它可以用指标获取的平
均难度系数来度量,指标获取难度反映指标体系的可行性。
(5)指标体系稳定性。它可以用稳定性系数来量度。
(6)指标体系协调性。一般来说,都是根据指标体系的特性来选择相应的综合评价方法,因此,这一逻辑顺序能保证指标体系与综合评价方法的协调性。
(7)指标体系结合性。对于不同的评价对象和评价目的,选取定量指标或定性指标进行刻画,定量指标与定性指标所占的比例为多少比较合理视评价对象的特性而定。
1 指标体系构建“优度”评价的内容
根据指标体系构建的基本原则,综合考虑指标体系构建中的常见问题,指标体系构建的“优度”评价应当包括以下几个方面:
(1)指标体系必要度。它根据评价目的所选取的评价指标的必要性程度,反映指标体系的目的性。可以通过专家评议结果的集中度、离散度和协调度来刻画。
(2)指标体系覆盖率。它是指所选取的指标占所有评价要素的比例,反映指标体系的全面性。
(3)指标体系重复率。它刻画指标间信息重叠的程度,反映指标的相对独立性。
2 指标体系构建“优度”评价思路
指标体系构建“优度”评价总体思路如图1所示。
3 “优度”评价指标及其计算方法
3.1 指标体系必要度
指标体系必要度是检测各指标存在的目的性,一般用德尔菲法将各指标的重要度划分成为多个等级,并赋予不同的量值,由专家对各指标的必要性进行匿名评议。综合考察专家对各指标必要性的意见,从集中度、离散度和协调度3个方面
收稿日期:2009-08-09.
作者简介:李远远(1982-),女,湖北松滋人,桂林电子科技大学管理学院博士.基金项目:交通部重点软科学基金资助项目(20071g0004).
第32卷 第1期李远远,等:综合评价指标体系构建“优度”评价研究
123
图1 指标体系构建“优度”评价总体思路框图
评价。若指标体系中有m项指标,请p个专家对指标必要性进行评议,将指标的必要度分成5个等级,j=1,2,3,4,5很高、高、一般、低。
(1)集中度为:
=
p
5
n
j
j=1
ij
式中,Fii的集中度;Ej为第i项指标第j级必要度的量值;
nij为将第i项指标评为第j级必要度的专家人数。
因此,Fi即为p个专家对第i项指标必要度的评价期望值,反映了该指标必要度的大小。
指标体系专家意见的整体集中度F为m项指标必要度的算术平均值:
mF=
m
m
度。F为全部指标集中度的均值,Vi越小,K越
大,表明专家意见越协调。
δ由Fi、Vi和K综合分析,决定是否需要进i、
行下一轮咨询。若已满足要求,则以最后一轮各
δ指标的Fi、i的大小为判据,决定保留哪些指标,
删除哪些指标,最后把指标体系确定下来。3.2 指标体系覆盖率
指标体系的覆盖率是反映指标体系全面性的
[6]
重要度量指标。
n个,E{12,…,En},现有mI={I1,I2,…,mE′={E1′,E,k=m,且指标不重复,则表示评价,否则不是一对一的关系。
(1)若各评价要素的重要性相同,则评价要素的覆盖率Se=k/n;
(2)若各评价要素的重要性不同,则可以为各评价要素设定相应的权重,设评价要素集所对应的权重集为W={w1,w2,…,wn},其中wi为第i个要素的权重。而指标集所反映的评价要素集的权重集为W′={w1′,w2′,…,wk′},其中wj为评价′要素集E′中第j个要素的权重,则评价要素覆盖
k
n
i
5
jij
率Su=
∑w∑w
j=1
i=1
。
∑F
i=1
i
=
mpi=1
∑∑En
j=1
(2)离散度。采用标准差δ来刻画离散度的
大小:
δi=
-5
n
1∑
j=1
ij
(Ej-Fi)
2
δ i为专家对第i项指标重要程度评价的分散程度,若δ.63,则可进行下一轮咨询i>0数K表示:
Vi=δi/Fi
[3]
。
(3)协调度。协调度用变异系数V和协调系
Fi越大说明专家认为指标越重要,δi越小说明专家意见越集中,但是这两项指标都是平均指标,有时这两者表示的结果可能不完全一致,这
[4-5]
时,就可以用Vi判别。Fi越大,δi越小,Vi越小,则指标必要度越高。Vi反映专家对第i项指标评价的协调程度。
K=
这里0≤Se(Su)≤1;若Se(Su)=0,指标集为