Research on the Evaluation Method of Power Grid Technology Project Based on Project Group

国外学者在20世纪60年代就开始了对科技项目效果和效益评价的研究，Zaden等学者对评价技术方面取得了较大的成就，Wilhem等^[1]学者在定量评价科技效果和效益方面取得了较大突破。而近年来的研究主要有PauloA.L.D.Nunes等^[2]应用“或有价值评价”对未来生物技术四类发展方向进行了经济评价。

国内学者也在科技项目效果和效益评价方面有所建树，张莉萍^[3]重点研究了科技项目的社会效益作用；王军生^[4]针对科技投入产出建立了评价指标体系，并给出了每一指标的计算方法；胡巨、曾艳等^[5]引入层次分析法，提出了电网企业科技项目后评价指标体系，并以项目为例，阐述了电力企业科技项目在项目管理、项目效果等方面定量评价的方法。

综上所述，对科技项目的价值和效益评价国内外学者形成了丰富的研究成果，推动了科技项目管理的完善与发展。但是大部分成果研究对象为单个科技项目，对于项目群的评价及优选研究较少。因此，本文基于国内外学者的研究，结合云南电网公司科技管理的相关实践，构建了基于项目群的电网科技项目评价体系及方法，分析不同类型科技项目群的特点以及成果价值表现，最终选择基于分位数统计法确定的评价指标隶属度标准，对电网科技项目实施效果进行评价。

对于电网科技项目的分类，参考南方电网“十三五”科技发展规划，将电网科技项目分为基础性、前瞻性重大技术领域，电网安全稳定运行领域，电网节能经济运行领域，设备集成应用领域，客户服务领域以及技术创新平台建设领域六大类。

结合科技项目的分类和投资目的，分析评价指标的确定原则与流程，主要原则为系统性、目的性和可获取性、科学性、分类评价原则、跟踪性与发展性原则。评价指标选择流程如图1所示。

Figure 1.  Selection Process of Grid Technology Project Evaluation Index

对于基础性，前瞻性以及电网主营业务领域的科技项目，在重点考核项目成果创造的同时，需兼顾项目对企业人才培养，创新能力以及管理能力的影响以及项目产生的环境，安全稳定等综合效益。通过反复筛选分析，最终确定科学价值、企业价值、社会价值这3个一级指标和与之对应8个二级指标以及若干三级指标。如表1所示。

根据前文的指标研究可知，三级指标评分有三种方法，一种为项目统计数据累积求和打分。第二种为根据项目实际特性和标准单一指标打分，分值区间为0～10。第三种为专家评定打分，分值区间也为0～10。

采用第一种方法获得的三级指标评价指标得分值，由于不同项目间的指标得分差异很大，值域不统一，难以进行对比。需要通过指标隶属度的设计将指标得分值转换成为指标评价值。隶属度打分考虑分位数统计法：分位数的定义是：当0<p<1时，对于一个随机变量X，如果实数c满足：

式中：c是随机变量x的p分位数，计作V_P。

采用分位数统计法确定评价指标隶属度的基本思想如下：

1)将评价指标得分作为随机变量X。

2)建立评价指标标度(10分制)与评价指标X的概率分布P之间的对应关系。

其中，P＝0.95对应指标X评价值的最高分数(10)，见表2。

3)以电网公司科技项目各项评价指标的有效样本作为基础数据，统计分析该评价指标标度所对应的分位数V_0.1，V_0.2，V_0.3，…V_0.95，作为该指标所对应评价值的隶属度。在实际的统计分析中，假定各评价指标得分X～N(μ，σ²)，可采用统计分析专业软件SPSS V13.0对电网公司科技项目的有效样本进行计算。

通过采取隶属度分析，能进行纵向对比，分析出该科技项目在对应群组的表现；同时，也能进行横向对比，分析该科技项目各项指标的优劣表现。

本章选取云南电网2011—2013年度待评价的300个科技项目作为基础数据。基础资料来源于项目申报书，成果鉴定表，科技项目年度投资计划表，项目总结等。对于需专家打分的项目，结合项目的成果鉴定表及项目总结，邀请了云南电网电科院以及广东电网电科院相关专家对相关指标进行了打分。项目群二级指标的评分情况如图2所示。

Figure 2.  Project Index Score-level 2

通过图2中项目群组之间的横向比较，可见各个项目群在科技价值、企业价值和社会价值评价倾向存在差异。

1)基础性、前瞻性重大技术领域项目在成果数量、成果水平、企业人才培养方面的得分较高。其研究项目对成果学术价值的考察较为重要，为企业作技术储备，发挥成果的持续效益。项目原创性、基础性的特点对企业研究型人才的培养和企业自主创新能力的提升，掌握核心技术方面有积极的作用。

2)电网安全稳定运行领域项目在安全稳定效益、环境效益、成果水平方面的得分较高。其技术研究项目主要目的是为了保证电力系统安全，减少停电事故和损失，因此项目保证电网安全可靠运行是较为重点评价的效益。同时，对企业人才培养以及企业创新能力提升有积极的作用，能够带来一定的企业成长价值。

3)电网节能经济运行领域项目在经济价值、环境效益、企业人才培养、成果水平方面得分较高。其研究项目一方面是为了提升电网运行的经济效益，另一方面是为了节能环保，减少污染，节约用地。因此电网节能经济运行项目重点评价经济效益和社会效益。

4)电网设备集成应用领域项目在成果应用前景、管理及研发提升、安全稳定效益方面得分较高。其研究项目针对企业的设备运维，电网建设，物资技术和信息化建设的方面，因此，成果的对于企业管理能力的提升有显著效果。

5)电网客户服务领域研究项目在经济价值、企业人才培养、成果应用前景、管理及研发提升方面得分较高。其研究项目主要目的是电力营销，提高计量水平，客服技术以及智能用电技术，直接与企业的经济效益挂钩，经济效益评价价值较大。

由上文分析可知，由于不同类型项目的价值倾向不同，在项目指标打分权重的方面应针对不同类型项目设置不同的指标权重。基于各个群组的价值倾向，结合层次分析法(AHP法)，分析与汇总专家群组的意见，确定各个群组中需保留的各类指标及其权重。价值倾向较突出的方面权重较高，设置不同的指标权重。

以单一项目举例，解释该项目通过隶属度分析后，在群组中的表现，以及各个指标的表现情况。“云网高温超导磁储能系统在云电科技园示范工程中的应用研究”是一个云南电网电力科学研究院的省级重点科技项目，该项目属于基础性、前瞻性重大技术领域项目。经过隶属度分析后，该项目表现如表3所示。

该项目在所在项目群中表现突出，各项指标均高于平均分。其中论文数量、成果应用、人才引进、研发能力提升四项指标明显优于其他指标。依据权重计算可知：项目实施效果和效益综合评分为7.77分。项目实施效果和效益达到优良级别。

电网企业科技项目的后评估工作是一个很大的系统工程。本文根据不同类型项目的价值倾向，确定一级指标和二级指标不同的权重，对三级指标采用无量纲分数进行打分，采用同一批次同一类型的所有科技项目该指标隶属度进行差值计算获得指标的评价值，达到可直观分析科技项目的产出效果。目前大多数评价方法是定性评价，本文探索建立了定量评级指标体系，有效地克服了传统科技项目评价的局限性和主观性。本文提出的给予项目群的电网科技项目评价方法研究具有全面性、科学性和客观性，能够作为电网企业进行科研投资配置、后续科研项目管理的决策依据。