21 123
发新话题
打印

软件测评指标设置与测评方式征询意见

软件测评指标设置与测评方式征询意见

软件测评指标设置与测评方式

档案界档案装备评价体系项目组自成立以来,经过近一年的工作,取得了一些阶段性成果。现将部分成果向大家公布,请各位提出意见与建议。

项目目的:
为档案界广大用户提供方便可行的档案装备测评平台。

项目最终目标
建立档案装备评价指标体系及测评的方式、方法。

项目主要内容
1、确定档案装备的分类。
2、选定首选进行测评的档案装备类别。
3、制定首选测评档案装备指标项
4、探讨摸索档案装备测评方式、方法。
5、由单个类别档案装备测评向多个类别档案装备测评过渡。
6、形成比较成熟的档案装备评价体系及测评的方式、方法。

项目主要工作过程:
项目组根据需要和可能,首选选择了档案管理软件做为第一个测评类别。
项目组先后收集了国内近50个不同功能、不同版本的档案管理软件及相关资料。
在对这些软件及资料进行细致研究,并对多个不同档案管理软件实际用户进行走访调查的基础上,课题组草拟出首在个测评指标系。在使用已有的相关数据对这测评指标系进行了模拟测评后,根据模拟测评的数据再对测评指标进行修改与调整。到目前为止,先后已经产生了4个版本的测评指标系。
今天公布的指标是课题组认为比较合适的一个版本。

档案装备(软件类)测评指标与测评方式

档案装备(软件类)测评指标体系设置三级评价指标:
一级指标:2
(企业竞争性评价)+(用户适用性评价)

二级指标:7
(资质各项之和+人均服务用户比+生存依存度+专利)+(满意度评价+功能性评价+完备性评价)

三级指标:29项(见下表)

TOP


三级指标:29项(见下表)

评价指标体系与方法20100614

一级指标

二级指标
三级指标

分值

数据来源与计算方式

企业竞争性评价

(1)资质(10)
工商注册

5

企业介绍。以证书编号为准。可在相关颁发机关查询验证。
行业认证

1

质量认证

1

信用等级

1

高新或创新认证

1

档案部门准入认证

1

(2)人均服务用户比(终端用户数/每10人)
员工数(人)

实际数

企业介绍。
商品品种数

实际数

用户终端数量

实际数

(3)生存依存度
合作伙伴数

实际数

企业介绍。

支撑产品数

实际数

(4)专利
申请数量

实际数

企业介绍。以证书编号为准。可在国家专利局网站查询验证。
有效授权数

实际数

用户适用性评价

(1)满意度评价(5)

5

5

网络调查。
每项均按很好(5)、好(4)、一般(3)、差(2)、很差(2)五级进行评价。

(2)功能性评价(10)
安装、卸载是否方便

1

10

界面是否有亲和力

1

界面是否可以定制

1

使用是否容易上手

1

在测试中是否出现Bug

1

安装包的大小

1

用户操作细节设计上的考虑是否完备

1

除一般功能之外,是否具有独特的功能。如修复功能。

1

是否包括快捷键

1

内存占用是否过高。

1

(3)完备性评价(5)

是否有足够的用户提示及完备的帮助文档

1

5

是否需要第三方应用程序才能运行

1

是否有24小时响应服务

1

能否实现24小时内到达现场服务

1

是否具有远程服务

1


TOP

评介指标项目说明:
(1)资质项=工商注册+行业认证+质量认证+信用等级+高新或创新认证+档案部门准入认证
工商注册设置为核心项,分值为5,其他项为参考项,分值为1。
数据来源:企业介绍。
评介方式:1.第三方依据公开可核实的企业介绍资料。

2.
软件开发公司自己填写.

(2)人均服务用户比
数据来源:企业介绍。
评介方式:1.第三方依据公开可核实的企业介绍资料填写换算而来。

2.
软件开发公司自己填写换算而来。
(3)生存依存度
数据来源:企业介绍。
评介方式:1.第三方依据公开可核实的企业介绍资料填写计算而来。

2.
软件开发公司自己填写计算而来。

(4)专利=按实际获得专利数据计,一项1分
数据来源:企业介绍。
评介方式:1.第三方依据公开可核实的企业介绍资料。

2.
软件开发公司自己填写.

(5)用户评价=各项值之和。
其中满意度评价按很好(5)、好(4)、一般(3)、差(2)、很差(1)五级进行评价取值。其他各项值均为1。
数据来源:网络调查。
评介方式:用户直接评价。

请各位网友提出宝贵意见。


                                            档案界档案装备评价体系项目组

TOP

请广大会员多提建设性意见。

TOP

档案部门准入证就不存在,如何评价?
分值应该建模型计算权重,而不是主观赋值。

TOP

“内存占用是否过高。”是什么性功能?
“在测试中是否出现Bug”这属健壮性问题,不属“用户适用性”吧?
“完备性”是指这些啊?如果软件做得不好也只好7X24了,作得好用就不那么重要了。

TOP

引用:
原帖由 longzhengyi 于 2010-11-10 09:19 发表
那么,究竟哪些功能才是“一般功能”呢?
您说得很对,我觉得应该列出功能表。档案管理软件涉及用户有很大不同,有综合档案馆、档案室,其功能也相差甚远。

TOP

另外,满意度是一个非常主观的判断。我的建议是附一个标准软件,与使用这个软件的满意度进行对比。假如对标杆软件设定为50分,感觉待测软件比标杆软件更好,则可给出70分,否则低于50分。

TOP

应该有软件成熟度的评价

TOP

“界面是否可以定制”基本是鸡肋,没有实用性,徒增操作难度。

TOP

 21 123
发新话题

郑州档案数字化