信息系统项目应用效果的评价研究

２０１２年１０月第１０卷第１０期

项目管理技术

ＰＲＯＪＥＣＴＭＡＮＡＧＥＭＥＮＴＴＥＣＨＮＯＬＯＧＹ

ＶＯｆ１０ＮＯ．１０

０ｃｌ２０１２

信息系统项目应用效果的评价研究

宁东玲

（云南财经大学中华职业学院，云南

昆明

６５０２２１）

摘要：首先，从四种观点出发对信患系统项目应用效果进行梳理；其次，以两种视角分析信息系统项目应用效果的评价指标体系；最后，给出国内外信息系统项目应用效果的评价方法。信息系统项目应用效果评价具有持续『生和复杂性，任何一种评价从不同的观点出发，给出不同的评价体系和方法，尚无完整的评价体系和广泛接受的方法。探索项目应用效果评价有利于信息系统项目功能改善和项目推广。关键词：信息系统项目；应用效果；评价

０

引言

衡量信息系统项目应用效果。通过梳理国内外文

献，归纳出下面几种观点。

信息系统在企业生产和管理中扮演着重要的

角色，然而，它的开发是一项复杂的系统工程，

１．１

目标观点

持有目标观点的学者认为，信息系统项目应

涉及组织、技术和管理等多种因素，其使用已经

从自动化向信息化转变，从提高效率向追求效益转变，从战术支持向战略支持转变，应用效果评

用效果是企业使用信息系统实现预期目标的程度，可通过对比目标的实现程度来确定。信息系统项目的成功并不取决于企业是否使用信息系统，而关键在于企业是否成功实施信息系统项

目，并且运用此项目实现企业的战略目标。

Ｓｃｏｔｔ和Ｍｏｒｌｏｎ指出信息系统最主要的目标

价变得较为复杂，涉及到了经济学、计算机科

学、心理学和管理学等学科。多数企业认为信息系统是提高企业价值和增强企业核心竞争力的有

效手段。如何通过认识信息系统项目的应用效果

来确认信息系统项目对企业战略目标的贡献程度，制订相应的持续改善的计划，日益成为企业

就是提供决策支持。ＤｏＵ和Ｔｏｒｋｚａｄｅｈ指出系统对组织竞争优势的影响和决策支持的效益决定了信息系统项目应用效果，取决于系统实现预期目标的能力，因而，决策绩效是信息系统应用效果最直接的测量。决策绩效是系统支持或改善决策

关心的问题。

１

关于信息系统项目应用效果的各种

的程度，通常包括效益维度和质量维度，前者关注任务的效益，后者关注决策的质量、１。

１．２收益观点

观点

许多研究从信息系统投入角度考虑信息系统项目应用效果，但是信息系统投人与应用效果之间没有必然的正向关系。以我国企业实施ＥＲＰ来说，只有１０％～２０％能够按期和按照预算成功

持有此观点的学者认为信息系统项目应用效果是信息系统使用所达到的预期目标与实际使用效果之问的差距，是信息系统在多个方面所带来的利益的综合表现。信息系统的投入是为了获取

未来收益，评价应用效果需要考虑成本和收益之间的关系，从而为企业带来最大货币化净收益。

很多学者常用财务成本收益分析来量化信息系统的成本和收益¨。，采用多种不同的方法，如投资回收期、内部报酬率、净现值、净现值率、

实施，实现系统集成；约有３０％～４０％系统没有

实现系统集成或只实现部分集成；约５０％的实施项目遭到失败，而在实施成功的１０％一２０％中，大多是三资企业。因而，从投入角度难以全面地

。基金项目：云南省教育厅科学研究基金项目（２０１０Ｙ１２０），云南财经大学科学研究项目（Ｙｃｌ０Ｄ０２０）。

万方数据

２０１２年第１０卷第１０期宁东玲信息系统项目应用效果的评价研究

投资回报率等。但是，对于无形收益只能以主观的方法度量。

信息系统的投资具有高风险性，传统的财务会计评价指标，如每股收益率和投资报酬率，侧重于短期效益而削弱了长期的投入，忽视了持续的提高和创新，很大程度上无法满足现代企业经营管理的需要。Ｆａｒｂｅｙ和Ｌｅｄｅｒｅｒ等认为信息系统项目应用效果通过产品质量、产品种类、客户服务等多方面来体现，如果仅用财务指标来衡量就会降低信息系统的价值。随后，学者们转向对企业的战略目标、竞争优势等方面对信息系统项目应用效果的评价¨。４。。

１．３

用户观点持有此观点的学者认为用户常常是通过反应速度、方便性、可靠性、个性化等指标来感知系统，因而，用户满意度是基于行为科学理论评价信息系统在企业中的运行情况。关注信息系统对个人满意度和决策行为的影响，从个人或部门对信息系统使用的态度、信息系统在个人或部门业务中的重要程度以及贡献等多个因素研究信息系

统的收益。

用户满意度在信息系统评价中起着主导性作

用。５ｏ。Ｋｉｍ认为用户满意度的测量可以通过用户

对于信息系统本身的态度，用户对于信息系统所产生的数据质量的态度，用户对于系统达到预期目标有效性的态度三方面来衡量。Ｌｕｂｂｅ和Ｒｅｍｅｎｙｉ认为信息系统项目的满意程度体现在用户表达或暗示出来对项目的满意程度，需要考虑信息系统的使用所涉及的利益相关者的态度…。１．４能力观点

持有此观点的学者认为信息系统项目应用效果是企业通过管理机构设置，而不是利用领导的巨大影响，分析管理能力对信息系统项目应用效果的影响。企业内部对信息系统的管理能力，如战略、计划、人事、员工激励、控制、管理机构设置等都可能是影响信息系统项目应用效果的关

键因素。

Ｅｉｎ—Ｄｏｒ率先定量研究了企业信息系统战略和计划能力对其应用效果的影响Ｈ。。其后，不同学者选择金融、政府、教育和医院等行业不断检

万方数据

验Ｎｏｌａｎ的成长阶段模型，并从董事会意识、战略、计划、组织架构、员工激励等角度分析影响信息系统项目应用效果的关键管理能力。周剑等从信息系统项目的领导、计划、组织、控制、人事等管理能力人手分析其对信息系统项目应用效果的影响，结果表明我国组织对信息系统的计划能力、组织能力仍然十分脆弱，无法对信息系统项目应用效果产生直接而显著的影响。…。

信息系统项目应用效果的评价体系

信息系统项目应用效果的评价是通过比较实

际指标与预期指标，进行系统的评估、测试、分析等工作，全面评估信息系统建成后带来的效益，从而有效地实现系统目标一。信息系统项目应用效果评价体系的建立往往是结合上述几种观点，力图建立完善的指标体系，下面从两个视角探索该问题。

效果和效率视角

效率是指信息系统的成功运用为企业提高决

策速度，而效果是客观的准确和主观的质量。

Ｄｏｌｌ和Ｔｔ，ｒｋｚａｄｅｈ认为信息系统项目应用效果可用决策性能、系统利用率和用户满意度来衡量。其中，决策性能可以使用效果和效率两类方法测量，用户满意度是用户从方便性、实用性、界面友好性等多方面综合衡量所获得的满意程度。

Ｋｒｉｓｔｉ和Ｍａｒｔｈａ认为信息系统项目应用效果是多维度结构，依靠系统利用率和用户满意度来衡量信息系统项目应用效果是不合适的。尽管决策性能、系统利用率和用户满意度是相关的，但是它们属于不同的概念，应该分别测量。信息系统项目应用效果评价应建立“以用户为中心”的理念，分阶段建立有关用户的评价指标，且在不同的评价阶段建立不同的评价准则，提高用户的满意度。评价体系包括系统实施前、系统实施过程中、系统实施后三个阶段，总共涉及到１１个二级指标，４９个三级指标““。

０ｚｋａｎ等采用案例研究的方法对社会团体使用信息系统项目进行研究，提出了信息系统项目应用效果评价体系，包括７个大类３９个问题项。

２

２．１

项目管理技氚

２０１２年第１０卷第１０期

其中，７个大类分别为系统质量、信息质量、服务质量、使用、用户满意度、系统收益、组织因素。“。。ｚｅｉｔａｍｌ提出集成性、服务质量、效率、经济性、用途、适应性等多个关键指标来衡量系统的有效性。

尽管学者们对于使用决策性能、系统利用率和用户满意度来衡量信息系统项目应用效果存在争议，然而，大量的研究还在使用决策性能、系统利用率和用户满意度来衡量信息系统项目应用效果。

２．２

系统和战略视角

信息系统项目应用效果可以从两个方面来衡

量：运行过程和运行结果。系统运行视角更注重

信息系统的运行过程，战略视角更关注信息系统的运行结果。战略视角基于平衡计分卡把信息系统项目应用效果划分为利益相关者、流程与能力、学习与成长等一级指标。

（１）利益相关者指标主要是从企业的内部和外部评价企业应用信息系统，是否为利益相关者

带来利益。

利益相关者包括股东利益、客户利益、供应商利益二级指标，股东利益包括信息系统投资回报率、经济价值增加值（Ｅｃｏｎｏｍｉｅ

ＶａｌｕｅＡｄｄｅｄ，

ＥＶＡ）、资金运转效率、库存减少百分数二三级指标，客户利益包括客户对产品交付的满意的增加比例、客户对交付产品投诉的下降比例、通过网络争取到的新客户比例、客户重复下订单比例，供应商利益包括供应商按时交货的比例、过期支付供应商货款的比例、通过网络采购的比例。

（２）流程与能力指标主要是对信息系统的现

状分析，以及提高流程的能力。

流程与能力包括平均订单周期、存货脱销的

比例、订单错误率、在线交付的产品和服务、过量存货的比例、库存处理失误率、平均系统可用率、业务流程改善程度、市场反应速度。

（３）学习与成长指标主要考虑信息系统的未来能否适应业务的能力，提高企业ＩＴ人员的技能。该指标侧重于信息系统的发展潜力。

学习与成长包括接受新技术培训的员工比例、专业ＩＴ人员的比例、预算中对ＩＴ投入和培训费的比例、员工对使用信息系统表示支持的比例。

万方数据

信息系统项目应用效果评价指标包括系统运

行的一般情况、系统功能、工作质量、可靠性、

效率、适应性、实用性、系统的经济性指标。”１。

３

信息系统项目的评价方法

信息系统项目评价的多维度、冲突等特性，

造成评价很困难。我国企业信息化程度逐渐深化，信息系统项目评价研究将成为学术界和企业界的一个热门领域。国内外对于信息系统项目应用效果评价方法很多，但是，每种方法各有优缺点，信息系统项目应用很广泛，被普遍接受的方

法几乎没有。

Ｇｒｅｍｂｅｒｇｅｎ用平衡计分卡的方法，从财务、内部流程、顾客、创新和学习四个方面来评价信息系统的应用效果。同样地，郝晓玲等也利用平衡计分卡方法评价信息系统项目的应用效果，但是，评价视角聚焦于战略与财务、用户、操作、未来四个方面进行评价。”。。

张国伟等利用层次分析法和模糊集相结合的方法，构建５个一级指标和２３个二级指标，对炮兵指挥信息系统项目作战效能进行综合评价，证实电子对抗能力和通信能力需要加以改进。”。。

陈岗等选用６个属性，提出基于三角模糊数的信息系统项目应用效果评价方法，将原本非数

量化的重要性程度用比较合理的方式转化为可分

析的数量化数值，消除因个人主观因素所造成的

不合理性，从问卷调查结果中获得更加客观和准

确的权重值…’。徐绪堪等从系统建设、系统性能、经济效益、礼会效益和使用者价值角度出发，构建信息系统项目绩效评价模型，运用模糊层次法通过信息系统项目的绩效评价项目现有和潜在价值。１…。于秀艳等引入模糊积分和结构方程模型方法，对３０个企业的信息系统实旌过程进行实证研究，有效证明了方法的有效性“。。

Ｓｃｏｔｔ利用数据包络分析以２００多家大型企业

为研究对象，提出评价信息系统项目投资有效性和效率的概念模型¨…。王洪伟等以３０家钢材销售企业的信息系统项目为研究对象，综合考虑财务指标和非财务指标，运用数据包络法，从技术

２０１２年第１０卷第１０期

宁东玲信息系统项目应用效果的评价研究

５５

有效和规模有效角度分析了企业信息系统项目的绩效。１…。郑羿彤等提出一种基于神经网络的方法，通过网络的训练样本，确定变量参数，训练好的网络对信息系统效益进行评价。２…。

总之，大多数研究是基于某一企业或行业，利用某一种或几种方法进行评价，因而，企业需要根据内外部环境，如经济状况、市场环境、行业特点、投资目的、企业文化等方面，选择适合的方法对信息系统项目进行评价。

４

结语

信息系统项日应用效果的评价大多是建立在

评估人员的个人经验、偏好等主观行为的基础上，存在权重确定网难、无法进行大规模的评价等困难。其评价是一个持续的、复杂的过程，由于信息系统项目评价的复杂性，因而，信息系统项目评价方法、评价体系仍然没有统一的标准，

缺少全面的评价指标和模型。

信息系统项目应用效果的评价是信息系统发展的重要保障，通过建立较为完善的评价指标体系和科学的评价方法，对于信息系统建设沿着正确的方向健康发展，以及合理地利用信息资源，发挥信息系统的经济效益都具有重要的意义。通过评价可以让企业的领导者理解信息系统在企业中的使用效果，了解信息系统的优点和不足，为改进信息系统的功能提供建设性意见，同时也有

利于信息系统在行业领域内的推广。

参考文献

冯其友，姜锦虎．信息技术／系统．（ＩＴ／Ｉｓ）应用效果评伟方法综述［Ｊ］情报科学，２００５，２３（３）：４６７—４７２．

［２］

Ｙｕｔｈａｓ

Ｋ，

ＥｉｎｌｎｇＭ

Ｍ，Ａｎ

ｅ。ｐｅｒｉｍｅｎｔａｌ

ｅＶａｌｕａｔｉｏｎ“

ｍｅａｓｕｒｅｍｅｎｔｓｏｆ

ｉｎｆｏｒｍａｔｌｏｎ

ｓｖｓｔｅｍ

ｅｆｆｅｃｔｉｖｅｎｅｓｓ

［Ｊｊ．

Ｊ０ｕｒｎａｌｏｆＩｎｆｏｒｍａｔｉｏｎＳｙｓｔｅｍｓ，１９９５，９（２）：６９＿８４．

［３］

Ｆａｌ＿ｂｅｙＢ，Ｉａｎ【ＩＦ，Ｔａ。ｇｅｔｔ

Ｄ．Ｍｏｖｊ”ｇＩＳ

ｅＶａｌｕａｔｉｏｎｆｂｒｗａｒｄ：

ｋａｒｎｉｎｇ

ｔｈｅｍｅｓ

ａｎｄｒｅｓｅａｒｃｈ

ｉｓｓｕｅｓ

［Ｊ］

Ｊｏｕｒｎａｌ

ｏｆ

Ｓｔｒａｔ８９ｉｃＩｎｆｏｒｍａｔｉｏｎｓｙｓｔｅｍｓ，１９９９，８（２）：１８９—２０７［４］ＬｅｄｅｒｅｒＡＬ，ＭｉｒａｎｉＲ．Ａｎ“Ｉ‘ｉｐａｔｉ“ｇｔｈｅｂｅｎｅｆｉｌｓｏｆｐｒｏｐｏｓｅｄｊｎｆｏｒｍａｔｉｏｎｓｖｓｔｅｍｓ［

Ｊ

］．

Ｊｏｕｍａｌ

ｏｆＩｎｆｏｒｍａｔｉｏｎ

Ｔｅｃｈｎｏｌｏｇｙ，

１９９５

（１０）：５９—６９．

万方数据

［５ｊ

ｚａｈｉｒ１ｒａｎｉ．Ｉｎｆｏｒｍａｔｉｏｎ８ｙｓｔｅｍｓｅｖａｌｕａＩｉｏｎ：

ｎａｖｉｇａｔｉ“ｇ

ｔｈｒｏｕｇｈ

ｔｈ。

ｐｒｏｂｌｅｍ

ｄｏｍａｉｎ

［Ｊ］．

Ｉｎｆｏｒｍａｔｉｏｎ

＆

Ｍａｎａｇｅｍｅｎｔ，２００２，４０（１）：１１—２４．

［６］Ｉ—ｕｂｂｅ

ｓ，Ｒｅｍｅ“ｙｉＤ．Ｍａｎ８９ｅｍｅｎｔｏｆｉｎｆｏｒｍａｔｉｏｎＩｅｃｈｎｏｌｏｇｙ

ｅＶａｌｕａｔｉｏｎｌｈｅ

ｄｅＶｅｌｏｐｍｅｎｔ

ｏｆ

ａ

ｍａｎ８９ｅｒｉａｌ

ｔｈｅｓｉｓｉＪ］．

ＬｏｇｉｓｔｉｃｓＩｎｆｏｒｍａｔｉｏｎ

Ｍａｎ８９ｅｍｅｎｃ，ｌ９９９，

１２

（１／２）：

１４５—１５６

［７］ＰｈｊⅡｉｐＥｊｎ—Ｄｏｒ，Ｅ“ｓ。ｇｅｖ．ｓ￡ｒａｆ。ｇｊ。ｐＪａｎｎｊ“ｇｆｏｒｍａｎ８９ｅｍｅｎｆ

ｉｎｆｏｒｍａｆｉ（＇ｎ

ｓｙｓｔｅｍｓ

［Ｊ］．ＭａｎａｇｅｒｎｅｎｔｓＰｌｅｎｃｅ，

ｌ９７８，

２４

（ｉ５）：１６３１—１６４１．

［８ｊ周剑，李忆，黄俊，等影响信息系统应用效果的关键管

理能力分析［Ｊ：．南开管理评论，２００７，ｌＯ（５）：１００－１０５．［９］徐宝详．信息系统开发方法［Ｍｊ．北京：机械工业出

版社，２００７．

［１０］郑凌．以用户为中心的企、Ｉｐ信息系统评价指标体系

［Ｊ］．情报探索，２００９（１）：２８—３０．

０ｚｋａｎＳ，

ＣａｋｊｒＭ，ＢｉｌｇｅｎＳＡｍａｔｕｒｉｔｙｂａｓｅ（１ｑｕ“ｔａｔｉＶｅ

ｉｎｆｏｒｍａｔｉｏｎｓｖｓｔｅｍｓｅｆｆｅｃｔｉｖｅｎｅｓｓ

ｅｖａｌｕａｔｉｏｎ

ｏｆａ

ｐｕｂｌｉｃ

ｏｒ叠ａｎｉｚａ【ｉｏｎｉｎ

Ｔｕｒｋｅｙ

［Ｊ：Ｊｏｕｒｎａｌ

（’ｆ

Ｃａｓｅｓ

ｏｎ

Ｉｎ＾）ｒｍａｔｉｏｎ

Ｔｅｃｈｎｏｌｏｇｙ，２００８，１０（３）：５８—７１．

［１２］

何德华，陈凯滨．基于ＤＥＡ方法的中小企、Ｉｋ会计信息系统应用效果研究［Ｊ］．中国管理信息化，２００８（７）：４・８．

［】３］郝晓玲，肖薇薇．信息系统绩效全过程评价体系研究［Ｊ］．情报科学，２００６（８）：１２２３一１２２７．

［１４］张围伟，李源源，崔义雄．基于ＡＨＰ—Ｆｕｚｚｙ方法的炮兵指挥信息系统作战效能评估［Ｊｊ，兵Ｔ自动化，２００９，

２８

（６）：５７－５９．

［１５］陈岗，胡克瑾．基于模糊理论的信息系统有效性评价方法及应用［Ｊ］．现代管理科学，２００９（１１）：ｌ３－１４．

［１６：徐绪堪，段振中，郝建．基于模糊层次分析法的企业

信息系统绩效评价模型构建［Ｊ］．情报杂志，２００９

（２）：¨一１３．

［１７］于秀艳，胡克瑾，栾东庆．基丁－ＦＩ—ｓＥＭ集成方法的信息系统实施过程评价研究！Ｊ］．计算机科学，２００９

（８）：２５０一２５３．

［１８］ＳｃｏｆｔＭＳｈａｆｅｒ，ＴｅｒｒｙＡＢｙｒｄ．ＡｆｒａｍｅｗｏｒｋＲ）ｒｍｅａｓｕｒｉ“ｇｔｈｅｅｍｃｉｅｎｃｖｏｆ

ｏｒｇａｎｉｚａｔｉｏｎａｌｉｎｖｅｓｌｍｅｎｔｓ

ｉｎ

ｉｎｆｏｒｍａ“ｏｎ

ｔｅｃｈｎ（１ｌｏｇｙｕｓｍｇ

ｄａｔａ

ｅｎｖｅｌｏｐｍｅｎｃａｎａｌｙｓｉｓ［Ｊ］．

ＴｈｅＩｎｔｅｒｎａｔｉｕｎａｌ

Ｊｏｕｒｎａｌ

ｏｆ

Ｍａｎａｇｅｍｅｎｔ

Ｓｃｉｅｎｃｅ，

２０００，

２８

（２）：１２５—１４１．

［Ｉ９］王洪伟，刘勰，丁佼佼．应用数据包络分析评价信息系统绩效［Ｊ］．Ｔ业Ｔ程与管理，２００９，１４（４）：９ｌ＿９７．

［２０］郑羿彤，王文政．基于神经网络的企业信息系统效益评价研究［Ｊ］．电脑知识与技术，２００６（３６）：１８９－

１９１．圃圃

收稿日期：２０１２一０８—１５

信息系统项目应用效果的评价研究

作者：作者单位：刊名：英文刊名：年，卷(期)：

宁东玲

云南财经大学中华职业学院,云南 昆明,650221项目管理技术

Project Management Technology2012,10(10)

参考文献(20条)

1. 冯其友;姜锦虎 信息技术/系统(IT/IS)应用效果评估方法综述[期刊论文]-情报科学 2005(03)

2. Yuthas K;Eining M M An experimental evaluation of measurements of information system effectiveness1995(02)

3. Farbey B;land F;Targett D Moving IS evaluation forward:learning themes and research issues 1999(02)4. Lederer A L;Mirani R Anticipating the benefits of proposed information systems 1995(10)5. Zahir Irani Information systems evaluation:navigating through the problem domain 2002(01)

6. Lubbe S;Remenyi D Management of information technology evaluation the development of a managerial thesis1999(1/2)

7. Phillip Ein-Dor;Eli Segev Strategic planning for management information systems 1978(15)8. 周剑;李忆;黄俊 影响信息系统应用效果的关键管理能力分析[期刊论文]-南开管理评论 2007(05)9. 徐宝详 信息系统开发方法 2007

10. 郑凌 以用户为中心的企业信息系统评价指标体系[期刊论文]-情报探索 2009(01)

11. Ozkan S;Cakir M;Bilgen S A maturity based qualitative information systems effectiveness evaluation of apublic organization in Turkey[外文期刊] 2008(03)

12. 何德华;陈凯滨 基于DEA方法的中小企、业会计信息系统应用效果研究 2008(07)13. 郝晓玲;肖薇薇 信息系统绩效全过程评价体系研究[期刊论文]-情报科学 2006(08)

14. 张国伟;李源源;崔文雄 基于AHP-Fuzzy方法的炮兵指挥信息系统作战效能评估[期刊论文]-兵工自动化 2009(06)15. 陈岗;胡克瑾 基于模糊理论的信息系统有效性评价方法及应用[期刊论文]-现代管理科学 2009(11)

16. 徐绪堪;段振中;郝建 基于模糊层次分析法的企业信息系统绩效评价模型构建[期刊论文]-情报杂志 2009(02)17. 于秀艳;胡克瑾;栾东庆 基妇 FI-SEM集成方法的信息系统实施过程评价研究 2009(08)

18. Scott M Shafer;Terry A Byrd A framework for measuring the efficiency of organizational investments ininformation technology using data envelopment analysis[外文期刊] 2000(02)

19. 王洪伟;刘勰;丁佼佼 应用数据包络分析评价信息系统绩效[期刊论文]-工业工程与管理 2009(04)20. 郑羿彤;王文政 基于神经网络的企业信息系统效益评价研究 2006(36)

引证文献(1条)

1. 李进基 项目管理在通信专业服务中的应用及评测[期刊论文]-管理学家 2013(17)

引用本文格式：宁东玲 信息系统项目应用效果的评价研究[期刊论文]-项目管理技术 2012(10)

２０１２年１０月第１０卷第１０期

项目管理技术

ＰＲＯＪＥＣＴＭＡＮＡＧＥＭＥＮＴＴＥＣＨＮＯＬＯＧＹ

ＶＯｆ１０ＮＯ．１０

０ｃｌ２０１２

信息系统项目应用效果的评价研究

宁东玲

（云南财经大学中华职业学院，云南

昆明

６５０２２１）

摘要：首先，从四种观点出发对信患系统项目应用效果进行梳理；其次，以两种视角分析信息系统项目应用效果的评价指标体系；最后，给出国内外信息系统项目应用效果的评价方法。信息系统项目应用效果评价具有持续『生和复杂性，任何一种评价从不同的观点出发，给出不同的评价体系和方法，尚无完整的评价体系和广泛接受的方法。探索项目应用效果评价有利于信息系统项目功能改善和项目推广。关键词：信息系统项目；应用效果；评价

０

引言

衡量信息系统项目应用效果。通过梳理国内外文

献，归纳出下面几种观点。

信息系统在企业生产和管理中扮演着重要的

角色，然而，它的开发是一项复杂的系统工程，

１．１

目标观点

持有目标观点的学者认为，信息系统项目应

涉及组织、技术和管理等多种因素，其使用已经

从自动化向信息化转变，从提高效率向追求效益转变，从战术支持向战略支持转变，应用效果评

用效果是企业使用信息系统实现预期目标的程度，可通过对比目标的实现程度来确定。信息系统项目的成功并不取决于企业是否使用信息系统，而关键在于企业是否成功实施信息系统项

目，并且运用此项目实现企业的战略目标。

Ｓｃｏｔｔ和Ｍｏｒｌｏｎ指出信息系统最主要的目标

价变得较为复杂，涉及到了经济学、计算机科

学、心理学和管理学等学科。多数企业认为信息系统是提高企业价值和增强企业核心竞争力的有

效手段。如何通过认识信息系统项目的应用效果

来确认信息系统项目对企业战略目标的贡献程度，制订相应的持续改善的计划，日益成为企业

就是提供决策支持。ＤｏＵ和Ｔｏｒｋｚａｄｅｈ指出系统对组织竞争优势的影响和决策支持的效益决定了信息系统项目应用效果，取决于系统实现预期目标的能力，因而，决策绩效是信息系统应用效果最直接的测量。决策绩效是系统支持或改善决策

关心的问题。

１

关于信息系统项目应用效果的各种

的程度，通常包括效益维度和质量维度，前者关注任务的效益，后者关注决策的质量、１。

１．２收益观点

观点

许多研究从信息系统投入角度考虑信息系统项目应用效果，但是信息系统投人与应用效果之间没有必然的正向关系。以我国企业实施ＥＲＰ来说，只有１０％～２０％能够按期和按照预算成功

持有此观点的学者认为信息系统项目应用效果是信息系统使用所达到的预期目标与实际使用效果之问的差距，是信息系统在多个方面所带来的利益的综合表现。信息系统的投入是为了获取

未来收益，评价应用效果需要考虑成本和收益之间的关系，从而为企业带来最大货币化净收益。

很多学者常用财务成本收益分析来量化信息系统的成本和收益¨。，采用多种不同的方法，如投资回收期、内部报酬率、净现值、净现值率、

实施，实现系统集成；约有３０％～４０％系统没有

实现系统集成或只实现部分集成；约５０％的实施项目遭到失败，而在实施成功的１０％一２０％中，大多是三资企业。因而，从投入角度难以全面地

。基金项目：云南省教育厅科学研究基金项目（２０１０Ｙ１２０），云南财经大学科学研究项目（Ｙｃｌ０Ｄ０２０）。

万方数据

２０１２年第１０卷第１０期宁东玲信息系统项目应用效果的评价研究

投资回报率等。但是，对于无形收益只能以主观的方法度量。

信息系统的投资具有高风险性，传统的财务会计评价指标，如每股收益率和投资报酬率，侧重于短期效益而削弱了长期的投入，忽视了持续的提高和创新，很大程度上无法满足现代企业经营管理的需要。Ｆａｒｂｅｙ和Ｌｅｄｅｒｅｒ等认为信息系统项目应用效果通过产品质量、产品种类、客户服务等多方面来体现，如果仅用财务指标来衡量就会降低信息系统的价值。随后，学者们转向对企业的战略目标、竞争优势等方面对信息系统项目应用效果的评价¨。４。。

１．３

用户观点持有此观点的学者认为用户常常是通过反应速度、方便性、可靠性、个性化等指标来感知系统，因而，用户满意度是基于行为科学理论评价信息系统在企业中的运行情况。关注信息系统对个人满意度和决策行为的影响，从个人或部门对信息系统使用的态度、信息系统在个人或部门业务中的重要程度以及贡献等多个因素研究信息系

统的收益。

用户满意度在信息系统评价中起着主导性作

用。５ｏ。Ｋｉｍ认为用户满意度的测量可以通过用户

对于信息系统本身的态度，用户对于信息系统所产生的数据质量的态度，用户对于系统达到预期目标有效性的态度三方面来衡量。Ｌｕｂｂｅ和Ｒｅｍｅｎｙｉ认为信息系统项目的满意程度体现在用户表达或暗示出来对项目的满意程度，需要考虑信息系统的使用所涉及的利益相关者的态度…。１．４能力观点

持有此观点的学者认为信息系统项目应用效果是企业通过管理机构设置，而不是利用领导的巨大影响，分析管理能力对信息系统项目应用效果的影响。企业内部对信息系统的管理能力，如战略、计划、人事、员工激励、控制、管理机构设置等都可能是影响信息系统项目应用效果的关

键因素。

Ｅｉｎ—Ｄｏｒ率先定量研究了企业信息系统战略和计划能力对其应用效果的影响Ｈ。。其后，不同学者选择金融、政府、教育和医院等行业不断检

万方数据

验Ｎｏｌａｎ的成长阶段模型，并从董事会意识、战略、计划、组织架构、员工激励等角度分析影响信息系统项目应用效果的关键管理能力。周剑等从信息系统项目的领导、计划、组织、控制、人事等管理能力人手分析其对信息系统项目应用效果的影响，结果表明我国组织对信息系统的计划能力、组织能力仍然十分脆弱，无法对信息系统项目应用效果产生直接而显著的影响。…。

信息系统项目应用效果的评价体系

信息系统项目应用效果的评价是通过比较实

际指标与预期指标，进行系统的评估、测试、分析等工作，全面评估信息系统建成后带来的效益，从而有效地实现系统目标一。信息系统项目应用效果评价体系的建立往往是结合上述几种观点，力图建立完善的指标体系，下面从两个视角探索该问题。

效果和效率视角

效率是指信息系统的成功运用为企业提高决

策速度，而效果是客观的准确和主观的质量。

Ｄｏｌｌ和Ｔｔ，ｒｋｚａｄｅｈ认为信息系统项目应用效果可用决策性能、系统利用率和用户满意度来衡量。其中，决策性能可以使用效果和效率两类方法测量，用户满意度是用户从方便性、实用性、界面友好性等多方面综合衡量所获得的满意程度。

Ｋｒｉｓｔｉ和Ｍａｒｔｈａ认为信息系统项目应用效果是多维度结构，依靠系统利用率和用户满意度来衡量信息系统项目应用效果是不合适的。尽管决策性能、系统利用率和用户满意度是相关的，但是它们属于不同的概念，应该分别测量。信息系统项目应用效果评价应建立“以用户为中心”的理念，分阶段建立有关用户的评价指标，且在不同的评价阶段建立不同的评价准则，提高用户的满意度。评价体系包括系统实施前、系统实施过程中、系统实施后三个阶段，总共涉及到１１个二级指标，４９个三级指标““。

０ｚｋａｎ等采用案例研究的方法对社会团体使用信息系统项目进行研究，提出了信息系统项目应用效果评价体系，包括７个大类３９个问题项。

２

２．１

项目管理技氚

２０１２年第１０卷第１０期

其中，７个大类分别为系统质量、信息质量、服务质量、使用、用户满意度、系统收益、组织因素。“。。ｚｅｉｔａｍｌ提出集成性、服务质量、效率、经济性、用途、适应性等多个关键指标来衡量系统的有效性。

尽管学者们对于使用决策性能、系统利用率和用户满意度来衡量信息系统项目应用效果存在争议，然而，大量的研究还在使用决策性能、系统利用率和用户满意度来衡量信息系统项目应用效果。

２．２

系统和战略视角

信息系统项目应用效果可以从两个方面来衡

量：运行过程和运行结果。系统运行视角更注重

信息系统的运行过程，战略视角更关注信息系统的运行结果。战略视角基于平衡计分卡把信息系统项目应用效果划分为利益相关者、流程与能力、学习与成长等一级指标。

（１）利益相关者指标主要是从企业的内部和外部评价企业应用信息系统，是否为利益相关者

带来利益。

利益相关者包括股东利益、客户利益、供应商利益二级指标，股东利益包括信息系统投资回报率、经济价值增加值（Ｅｃｏｎｏｍｉｅ

ＶａｌｕｅＡｄｄｅｄ，

ＥＶＡ）、资金运转效率、库存减少百分数二三级指标，客户利益包括客户对产品交付的满意的增加比例、客户对交付产品投诉的下降比例、通过网络争取到的新客户比例、客户重复下订单比例，供应商利益包括供应商按时交货的比例、过期支付供应商货款的比例、通过网络采购的比例。

（２）流程与能力指标主要是对信息系统的现

状分析，以及提高流程的能力。

流程与能力包括平均订单周期、存货脱销的

比例、订单错误率、在线交付的产品和服务、过量存货的比例、库存处理失误率、平均系统可用率、业务流程改善程度、市场反应速度。

（３）学习与成长指标主要考虑信息系统的未来能否适应业务的能力，提高企业ＩＴ人员的技能。该指标侧重于信息系统的发展潜力。

学习与成长包括接受新技术培训的员工比例、专业ＩＴ人员的比例、预算中对ＩＴ投入和培训费的比例、员工对使用信息系统表示支持的比例。

万方数据

信息系统项目应用效果评价指标包括系统运

行的一般情况、系统功能、工作质量、可靠性、

效率、适应性、实用性、系统的经济性指标。”１。

３

信息系统项目的评价方法

信息系统项目评价的多维度、冲突等特性，

造成评价很困难。我国企业信息化程度逐渐深化，信息系统项目评价研究将成为学术界和企业界的一个热门领域。国内外对于信息系统项目应用效果评价方法很多，但是，每种方法各有优缺点，信息系统项目应用很广泛，被普遍接受的方

法几乎没有。

Ｇｒｅｍｂｅｒｇｅｎ用平衡计分卡的方法，从财务、内部流程、顾客、创新和学习四个方面来评价信息系统的应用效果。同样地，郝晓玲等也利用平衡计分卡方法评价信息系统项目的应用效果，但是，评价视角聚焦于战略与财务、用户、操作、未来四个方面进行评价。”。。

张国伟等利用层次分析法和模糊集相结合的方法，构建５个一级指标和２３个二级指标，对炮兵指挥信息系统项目作战效能进行综合评价，证实电子对抗能力和通信能力需要加以改进。”。。

陈岗等选用６个属性，提出基于三角模糊数的信息系统项目应用效果评价方法，将原本非数

量化的重要性程度用比较合理的方式转化为可分

析的数量化数值，消除因个人主观因素所造成的

不合理性，从问卷调查结果中获得更加客观和准

确的权重值…’。徐绪堪等从系统建设、系统性能、经济效益、礼会效益和使用者价值角度出发，构建信息系统项目绩效评价模型，运用模糊层次法通过信息系统项目的绩效评价项目现有和潜在价值。１…。于秀艳等引入模糊积分和结构方程模型方法，对３０个企业的信息系统实旌过程进行实证研究，有效证明了方法的有效性“。。

Ｓｃｏｔｔ利用数据包络分析以２００多家大型企业

为研究对象，提出评价信息系统项目投资有效性和效率的概念模型¨…。王洪伟等以３０家钢材销售企业的信息系统项目为研究对象，综合考虑财务指标和非财务指标，运用数据包络法，从技术

２０１２年第１０卷第１０期

宁东玲信息系统项目应用效果的评价研究

５５

有效和规模有效角度分析了企业信息系统项目的绩效。１…。郑羿彤等提出一种基于神经网络的方法，通过网络的训练样本，确定变量参数，训练好的网络对信息系统效益进行评价。２…。

总之，大多数研究是基于某一企业或行业，利用某一种或几种方法进行评价，因而，企业需要根据内外部环境，如经济状况、市场环境、行业特点、投资目的、企业文化等方面，选择适合的方法对信息系统项目进行评价。

４

结语

信息系统项日应用效果的评价大多是建立在

评估人员的个人经验、偏好等主观行为的基础上，存在权重确定网难、无法进行大规模的评价等困难。其评价是一个持续的、复杂的过程，由于信息系统项目评价的复杂性，因而，信息系统项目评价方法、评价体系仍然没有统一的标准，

缺少全面的评价指标和模型。

信息系统项目应用效果的评价是信息系统发展的重要保障，通过建立较为完善的评价指标体系和科学的评价方法，对于信息系统建设沿着正确的方向健康发展，以及合理地利用信息资源，发挥信息系统的经济效益都具有重要的意义。通过评价可以让企业的领导者理解信息系统在企业中的使用效果，了解信息系统的优点和不足，为改进信息系统的功能提供建设性意见，同时也有

利于信息系统在行业领域内的推广。

参考文献

冯其友，姜锦虎．信息技术／系统．（ＩＴ／Ｉｓ）应用效果评伟方法综述［Ｊ］情报科学，２００５，２３（３）：４６７—４７２．

［２］

Ｙｕｔｈａｓ

Ｋ，

ＥｉｎｌｎｇＭ

Ｍ，Ａｎ

ｅ。ｐｅｒｉｍｅｎｔａｌ

ｅＶａｌｕａｔｉｏｎ“

ｍｅａｓｕｒｅｍｅｎｔｓｏｆ

ｉｎｆｏｒｍａｔｌｏｎ

ｓｖｓｔｅｍ

ｅｆｆｅｃｔｉｖｅｎｅｓｓ

［Ｊｊ．

Ｊ０ｕｒｎａｌｏｆＩｎｆｏｒｍａｔｉｏｎＳｙｓｔｅｍｓ，１９９５，９（２）：６９＿８４．

［３］

Ｆａｌ＿ｂｅｙＢ，Ｉａｎ【ＩＦ，Ｔａ。ｇｅｔｔ

Ｄ．Ｍｏｖｊ”ｇＩＳ

ｅＶａｌｕａｔｉｏｎｆｂｒｗａｒｄ：

ｋａｒｎｉｎｇ

ｔｈｅｍｅｓ

ａｎｄｒｅｓｅａｒｃｈ

ｉｓｓｕｅｓ

［Ｊ］

Ｊｏｕｒｎａｌ

ｏｆ

Ｓｔｒａｔ８９ｉｃＩｎｆｏｒｍａｔｉｏｎｓｙｓｔｅｍｓ，１９９９，８（２）：１８９—２０７［４］ＬｅｄｅｒｅｒＡＬ，ＭｉｒａｎｉＲ．Ａｎ“Ｉ‘ｉｐａｔｉ“ｇｔｈｅｂｅｎｅｆｉｌｓｏｆｐｒｏｐｏｓｅｄｊｎｆｏｒｍａｔｉｏｎｓｖｓｔｅｍｓ［

Ｊ

］．

Ｊｏｕｍａｌ

ｏｆＩｎｆｏｒｍａｔｉｏｎ

Ｔｅｃｈｎｏｌｏｇｙ，

１９９５

（１０）：５９—６９．

万方数据

［５ｊ

ｚａｈｉｒ１ｒａｎｉ．Ｉｎｆｏｒｍａｔｉｏｎ８ｙｓｔｅｍｓｅｖａｌｕａＩｉｏｎ：

ｎａｖｉｇａｔｉ“ｇ

ｔｈｒｏｕｇｈ

ｔｈ。

ｐｒｏｂｌｅｍ

ｄｏｍａｉｎ

［Ｊ］．

Ｉｎｆｏｒｍａｔｉｏｎ

＆

Ｍａｎａｇｅｍｅｎｔ，２００２，４０（１）：１１—２４．

［６］Ｉ—ｕｂｂｅ

ｓ，Ｒｅｍｅ“ｙｉＤ．Ｍａｎ８９ｅｍｅｎｔｏｆｉｎｆｏｒｍａｔｉｏｎＩｅｃｈｎｏｌｏｇｙ

ｅＶａｌｕａｔｉｏｎｌｈｅ

ｄｅＶｅｌｏｐｍｅｎｔ

ｏｆ

ａ

ｍａｎ８９ｅｒｉａｌ

ｔｈｅｓｉｓｉＪ］．

ＬｏｇｉｓｔｉｃｓＩｎｆｏｒｍａｔｉｏｎ

Ｍａｎ８９ｅｍｅｎｃ，ｌ９９９，

１２

（１／２）：

１４５—１５６

［７］ＰｈｊⅡｉｐＥｊｎ—Ｄｏｒ，Ｅ“ｓ。ｇｅｖ．ｓ￡ｒａｆ。ｇｊ。ｐＪａｎｎｊ“ｇｆｏｒｍａｎ８９ｅｍｅｎｆ

ｉｎｆｏｒｍａｆｉ（＇ｎ

ｓｙｓｔｅｍｓ

［Ｊ］．ＭａｎａｇｅｒｎｅｎｔｓＰｌｅｎｃｅ，

ｌ９７８，

２４

（ｉ５）：１６３１—１６４１．

［８ｊ周剑，李忆，黄俊，等影响信息系统应用效果的关键管

理能力分析［Ｊ：．南开管理评论，２００７，ｌＯ（５）：１００－１０５．［９］徐宝详．信息系统开发方法［Ｍｊ．北京：机械工业出

版社，２００７．

［１０］郑凌．以用户为中心的企、Ｉｐ信息系统评价指标体系

［Ｊ］．情报探索，２００９（１）：２８—３０．

０ｚｋａｎＳ，

ＣａｋｊｒＭ，ＢｉｌｇｅｎＳＡｍａｔｕｒｉｔｙｂａｓｅ（１ｑｕ“ｔａｔｉＶｅ

ｉｎｆｏｒｍａｔｉｏｎｓｖｓｔｅｍｓｅｆｆｅｃｔｉｖｅｎｅｓｓ

ｅｖａｌｕａｔｉｏｎ

ｏｆａ

ｐｕｂｌｉｃ

ｏｒ叠ａｎｉｚａ【ｉｏｎｉｎ

Ｔｕｒｋｅｙ

［Ｊ：Ｊｏｕｒｎａｌ

（’ｆ

Ｃａｓｅｓ

ｏｎ

Ｉｎ＾）ｒｍａｔｉｏｎ

Ｔｅｃｈｎｏｌｏｇｙ，２００８，１０（３）：５８—７１．

［１２］

何德华，陈凯滨．基于ＤＥＡ方法的中小企、Ｉｋ会计信息系统应用效果研究［Ｊ］．中国管理信息化，２００８（７）：４・８．

［】３］郝晓玲，肖薇薇．信息系统绩效全过程评价体系研究［Ｊ］．情报科学，２００６（８）：１２２３一１２２７．

［１４］张围伟，李源源，崔义雄．基于ＡＨＰ—Ｆｕｚｚｙ方法的炮兵指挥信息系统作战效能评估［Ｊｊ，兵Ｔ自动化，２００９，

２８

（６）：５７－５９．

［１５］陈岗，胡克瑾．基于模糊理论的信息系统有效性评价方法及应用［Ｊ］．现代管理科学，２００９（１１）：ｌ３－１４．

［１６：徐绪堪，段振中，郝建．基于模糊层次分析法的企业

信息系统绩效评价模型构建［Ｊ］．情报杂志，２００９

（２）：¨一１３．

［１７］于秀艳，胡克瑾，栾东庆．基丁－ＦＩ—ｓＥＭ集成方法的信息系统实施过程评价研究！Ｊ］．计算机科学，２００９

（８）：２５０一２５３．

［１８］ＳｃｏｆｔＭＳｈａｆｅｒ，ＴｅｒｒｙＡＢｙｒｄ．ＡｆｒａｍｅｗｏｒｋＲ）ｒｍｅａｓｕｒｉ“ｇｔｈｅｅｍｃｉｅｎｃｖｏｆ

ｏｒｇａｎｉｚａｔｉｏｎａｌｉｎｖｅｓｌｍｅｎｔｓ

ｉｎ

ｉｎｆｏｒｍａ“ｏｎ

ｔｅｃｈｎ（１ｌｏｇｙｕｓｍｇ

ｄａｔａ

ｅｎｖｅｌｏｐｍｅｎｃａｎａｌｙｓｉｓ［Ｊ］．

ＴｈｅＩｎｔｅｒｎａｔｉｕｎａｌ

Ｊｏｕｒｎａｌ

ｏｆ

Ｍａｎａｇｅｍｅｎｔ

Ｓｃｉｅｎｃｅ，

２０００，

２８

（２）：１２５—１４１．

［Ｉ９］王洪伟，刘勰，丁佼佼．应用数据包络分析评价信息系统绩效［Ｊ］．Ｔ业Ｔ程与管理，２００９，１４（４）：９ｌ＿９７．

［２０］郑羿彤，王文政．基于神经网络的企业信息系统效益评价研究［Ｊ］．电脑知识与技术，２００６（３６）：１８９－

１９１．圃圃

收稿日期：２０１２一０８—１５

信息系统项目应用效果的评价研究

作者：作者单位：刊名：英文刊名：年，卷(期)：

宁东玲

云南财经大学中华职业学院,云南 昆明,650221项目管理技术

Project Management Technology2012,10(10)

参考文献(20条)

1. 冯其友;姜锦虎 信息技术/系统(IT/IS)应用效果评估方法综述[期刊论文]-情报科学 2005(03)

2. Yuthas K;Eining M M An experimental evaluation of measurements of information system effectiveness1995(02)

3. Farbey B;land F;Targett D Moving IS evaluation forward:learning themes and research issues 1999(02)4. Lederer A L;Mirani R Anticipating the benefits of proposed information systems 1995(10)5. Zahir Irani Information systems evaluation:navigating through the problem domain 2002(01)

6. Lubbe S;Remenyi D Management of information technology evaluation the development of a managerial thesis1999(1/2)

7. Phillip Ein-Dor;Eli Segev Strategic planning for management information systems 1978(15)8. 周剑;李忆;黄俊 影响信息系统应用效果的关键管理能力分析[期刊论文]-南开管理评论 2007(05)9. 徐宝详 信息系统开发方法 2007

10. 郑凌 以用户为中心的企业信息系统评价指标体系[期刊论文]-情报探索 2009(01)

11. Ozkan S;Cakir M;Bilgen S A maturity based qualitative information systems effectiveness evaluation of apublic organization in Turkey[外文期刊] 2008(03)

12. 何德华;陈凯滨 基于DEA方法的中小企、业会计信息系统应用效果研究 2008(07)13. 郝晓玲;肖薇薇 信息系统绩效全过程评价体系研究[期刊论文]-情报科学 2006(08)

14. 张国伟;李源源;崔文雄 基于AHP-Fuzzy方法的炮兵指挥信息系统作战效能评估[期刊论文]-兵工自动化 2009(06)15. 陈岗;胡克瑾 基于模糊理论的信息系统有效性评价方法及应用[期刊论文]-现代管理科学 2009(11)

16. 徐绪堪;段振中;郝建 基于模糊层次分析法的企业信息系统绩效评价模型构建[期刊论文]-情报杂志 2009(02)17. 于秀艳;胡克瑾;栾东庆 基妇 FI-SEM集成方法的信息系统实施过程评价研究 2009(08)

18. Scott M Shafer;Terry A Byrd A framework for measuring the efficiency of organizational investments ininformation technology using data envelopment analysis[外文期刊] 2000(02)

19. 王洪伟;刘勰;丁佼佼 应用数据包络分析评价信息系统绩效[期刊论文]-工业工程与管理 2009(04)20. 郑羿彤;王文政 基于神经网络的企业信息系统效益评价研究 2006(36)

引证文献(1条)

1. 李进基 项目管理在通信专业服务中的应用及评测[期刊论文]-管理学家 2013(17)

引用本文格式：宁东玲 信息系统项目应用效果的评价研究[期刊论文]-项目管理技术 2012(10)