上一期我们对“第三方软件评测机构”及“第三方软件评测资质”两点做了详细介绍,今天将从“第三方软件检测报告”、“第三方软件评测收费”、“知识点普及”三个方面为大家说透第三方软件评测。
Part 1 第三方软件检测报告
先说说第三方软件测评报告有什么用途。
一、报告用途
出具了第三方软件测评报告,报告有什么用呢?用途还是挺多的。
1、鉴定测试(科技成果鉴定),测试依据GB/T 25000.51-2016,鉴定测试可用于申报国家、省、市科技政策奖补,如《科技项目验收》《科技成果鉴定》、《安徽省重点研究与开发计划》《安徽省关键共性技术项目》等,为项目提供有力的证明。
2、验收测试:验收测试一般是针对招投标、技术开发合同、需求规格说明书的验收依据,确认系统功能正确的情况下,是否满足招投标、技术开发合同、需求规格说明书的要求。常用于技术开发合同类项目。作为软件开发方与使用业主方为找不到合适的第三方检测机构而苦恼,当新软件产品研发出来了,面临的就是产品即将上市售卖、报批科研项目、参与市场竞争招投标等,很多要求的文件中明确指出产品需要提供第三方检测机构出具的第三方检测报告。
二、机构筛选
那应该如何寻找第三方检测机构呢?
1、看实验室的资质,是否具备中国合格评定国家认可委员会CNAS,中国计量认证认可CMA;
2、看实验室性质,在国内存在科研院所、民营股份制检测公司、国外检测认证公司等;
3、看实验室资质的认可范围,检测标准是否在资质认可范围之内;
4、看实验室从事检测认证行业的背景,服务案例,人员资质,检测设备是否符合测试要求;
5、主要需要问好检测报告是否可以出具CNAS、CMA双标识检测报告;
6、检测报告中是否有检测结论,该检测结论是否满足我们产品验证的要求;
7、看实验室位置,如果是异地项目,有没有本地化服务,沟通配合是否存在问题;
8、看多久可以出具检测报告,是否满足交付的周期;
9、看检测服务速度,是否可以快速高效地安排测试进度,出具检测周期排期日程表等。
最后提醒大家注意的是选择检测机构时,不能仅仅只考虑价格,需要结合资质、机构情况、能力项目、客户项目情况等综合评价选取。
三、目前市面上存在的报告乱象
目前市面上存在的检测报告情况如下:
情况1:软件检测报告中,只有检验检测章,未加盖CNAS、CMA章——表明此报告仅供内部学习参考使用,无其他任何证明作用,也不用承担任何法律责任。
情况2:软件检测报告中,除了检验检测章,加盖CNAS章——表明此报告出具过程满足CNAS要求,此报告的技术能力是认可的。社会上针对仅加盖CNAS章检测报告的效力有两种说法:
说法1:CNAS第一方实验室或者CNAS第二方实验室不给自己出具的软件检测报告,再说CNAS报告仅仅是一种技术能力的认可,至于别人拿着这份检测报告干什么事,不是实验室所能左右的。
说法2:163号令规定,所出具有证明作用的数据、结果的报告均需要加盖CMA标识,这是强制规定。也就是说市面上流通的检测报告必须要有CMA标识,否则不能作为一种证明或认证。CNAS第一方实验室或者CNAS第二方实验室出具的软件测试测试报告只有企业内部使用。
现在很多CNAS第一方实验室出具的测试报告也可以在社会上流通,比较谨慎的客户都要求双章,规避软件检测报告给自身带来的风险。
情况3:软件测试报告中,除了检验检测章,只有CMA章——表明此报告符合CMA,并具有法律效力,在中国国内流通测试报告无任何问题,出具的检测报告一定是第三方的,检测机构为测试报告背书,承担相应责任。注:在实际项目甲乙双方针对软件出现争议需要打官司时,此时检测报告一定要用加盖CMA。
情况4:软件测试报告中,除了检验检测章,还有CMA章、CNAS章,简称为:盖双章。这类报告无论技术认可还是法律保障均涵盖了,因此,一般报告的双章的费用也略高,承担的责任也不一样。
Part 2 第三方软件评测收费
经常有客户问“我需要一个第三方软件评测报告,请问多少钱?”
首先,检测机构内部存在收费标准,但是每次遇到项目情况不尽相同,也不可能做到严格按收费标准来(有政策支持的机构除外),在实际项目报告过程中,内部的收费标准还是作为指导,仅供参考,由负责报价人(客服)或组织进行综合评估后决定。
而第三方软测行业内更没有一个明确的、统一的收费标准,不同地域之间的收费不同,各个检测单位的报价也略有差异。第三方检测报告的收费标准需要根据具体的测试需求而定。
但针对第三方软测的费用预估还是有评估方法:
第一种:按项目建设费用的2%进行收费或预算计划。
第二种:依据具体委托内容进行评估,如只有功能性测试,则需要提供具体功能清单,根据功能数量进行评估,若还有非功能指标,如性能效率、信息安全性等需提供完整要求进行报价,价格区间一般是几千到几万不等。
第三方软件评测机构针对项目的报价,不能仅仅只考虑技术成本,风险与质控才是第一位的,接下来才考虑技术实施成本。因此一个第三方软测的最终报价由【风险】+【成本】+【其它】共同构成,进行综合评定。
为了第三方检测机构更科学的、合理的为每一位客户进行报价,一般来说,第三方检测机构会对对所有可能风险因素进行收集,为最终报价提供依据,如用章需求、目前甲乙双方针对软件是否存在纠纷、报告用途(用于招投标、系统上线、内部结题、项目验收等)、检测项需求(涉及多少质量特性,每个质量特性又包括哪些子检测项)、是否涉及出差(如果需要现场测试,异城就涉及出差费用)、报告是否加急(如果时间要求比较急,要求短时间出具检测报告,优先安排)、整个项目金额(根据项目金额评估项目规模)。
经常有客户说:“我就要一份报告,工作量感觉就几页纸,费用尽量少点”,或者说:“能不能不测试直接出具报告,费用照样给”。
说这话的客户,对第三方软件测试业务应该是不了解,我在这里解释一下:
其一:您收到的仅仅是一份“软件检测报告”,但第三方评测机构根据CMA/CNAS的体系要示,需要编写各种原始记录,最主要的包括技术记录(测试计划与方案、测试用例与执行记录、测试缺陷报告、最终测试报告),还包括各种质量记录(合同评审、环境记录单、设备仪器使用记录等等),要求所有检测记录有据可查。
其二:第三方出具检测报告就是给项目进行背书的,如果因为那点费用出具虚假报告、不实报告,一经发现所承担的资质风险、法律责任、资金损失都将是无法承受的。不值得。
第三:不测试直接出具测试报告,价格也会越做越低,路越走越窄,相关口碑可以在行内快速知晓,所面临风险将越大。如果检验检测机构在认真经营的情况下,“不测试直接出具报告”的做事方式肯定是行不通的。
针对有些测试报告的费用超低现象,无非就以下几种情况:
1、测试机构正在业务推广,不计成本
2、第三方测试机构已无法经营,已在注销阶段
3、10人以下的小型检测机构,对风险认识不足
4、仅写了测试报告,未按体系要求完成相关的原始记录,成本低。
5、检测报告未纳入检测公司的质量控制体系,说白了查不到。
最终大家可以发现,低价格的检测报告所面临的风险明显高于正规渠道的。只要您能接受这些风险,那当然无所谓了。
另一方面,再讲讲认真做事的第三方评测机构,从机构领导层到底层员工,都强调服务于客户,提升软件质量,在测试过程中,尽可能发现软件的各种质量问题,协助客户解决,并进行回归测试。这样的整个项目周期延长,成本肯定增加。再加上真正能发现问题的检测工程师,工作经验一般都是超过3—5年以上的,人工成本也是相对较多。
Part 3 知识点普及
第一、二、三方实验室的区别:
1、第三方实验室(社会实验室):独立于第一方实验室和第二方实验室,为社会提供检测或校准服务的实验室,数据为社会所用。
目的:提高和控制社会产品质量。一般使用国家标准或国际标准。
2、第一方实验室(供方实验室):组织内的实验室,检测或校准自己生产的产品,或委托某实验室代表其检测或校准自己生产的产品,数据为我所用。
目的:提高和控制产品质量,一般使用企业标准或国家标准国际标准。
3、第二方实验室(需方实验室):
组织内实验室或委托某实验室代表其检测或校准供方提供的产品,数据为我所用。
经CNAS认可的第一方和第二方实验室能否开展外部客户委托检测服务?这些实验室认为通过CNAS的实验室认可有对外出具的检测报告的资质?
问:企业内部(第一方或第二方)实验室通过CNAS认可,可否作为第三方对外出具证书报告?
CNAS官方的回答如下:
CNAS认可,是对实验室能力的认可,可否作为第三方机构对外出具证书报告,还要符合国家法律法规的要求。例如国家计量法规定作为第三方检测机构对外出具检测报告要通过计量认证。