交通运输标准实施评价方法试点交通运输部.docx

交通运输标准实施评价方法试点交通运输部.docx

《交通运输标准实施评价方法试点交通运输部.docx》由会员分享，可在线阅读，更多相关《交通运输标准实施评价方法试点交通运输部.docx（17页珍藏版）》请在冰豆网上搜索。

交通运输标准实施评价方法试点交通运输部

附件2

交通运输标准实施评价方法（试点）

一、评价目的

针对单项交通运输标准，全面评价该标准的实施状况、实施效果和科学性，以此促进标准的推广应用，并找出标准本身及其实施中存在的问题，为标准的进一步完善提供充分的信息支撑，也为标准化管理工作的改进提供决策支持。

二、评价内容及指标

交通运输标准实施评价的内容包括标准的实施状况、实施效果和科学性三个方面。

开展标准实施状况评价，主要针对标准化管理机构和标准应用单位推动标准实施所开展的各项工作，目的是通过评价改进推动标准实施工作；开展标准实施效果评价，主要针对标准应用所取得的效果，为改进标准化工作提供支撑;开展标准科学性评价主要针对标准内容的科学合理性，反映标准的质量和水平。

针对标准实施评价的内容，构建评价指标体系如图1。

图1交通运输标准实施评价内容及指标

实施状况评价内容包括标准使用各方（产品生产方/服务提供方、产品使用方/服务对象、产品质量/服务监管方、评价方等）的应用情况、使用人员执行标准和对标准的掌握程度，以及被政策、法规、标准等的引用情况及合同引用情况等。

实施效果评价内容包括标准实施后给交通运输行业所带来经济（如对产品质量、运输服务效率和企业效益的影响）、社会（如对安全、健康等的影响）和环境（如节能减排、循环利用）等方面的效果。

标准科学性评价内容包括标准内容的协调性、适用性、先进性。

协调性指标准与相关规范性文件、政策、国际标准和国内标准之间符合程度；适用性指标准中规定的指标、方法是否科学合理，条文是否准确，应用中是否可操作；先进性指标准是否符合国家技术经济政策，是否采用了可靠的先进技术或科研成果，是否达到国际先进水平。

评价工作目的是加强和改进标准化管理工作，促进标准的实施。

因此评价工作必须要突出目的性，评价的结论要与标准化管理工作有机结合，根据需要来开展评价工作。

上述三类评价，是为从不同方面反映交通运输标准化工作的情况而划分的。

进行单项评价还是进行综合评价也要根据工作的需要来进行选择，单项评价是指对标准的实施状况、实施效果和科学性中的一项进行评价，综合评价是指在标准的实施状况、实施效果和科学性分别进行评价的基础上，综合其评价结果，得出标准实施评价的综合结论。

三、标准评价分类

在试点工作中，主要对安全应急、节能环保、运输服务、信息化等领域中的基础标准、产品标准、管理服务标准进行评价。

基础标准、产品标准、管理服务标准的评价内容和指标设计见表1。

表1评价内容和指标

评价类型

与指标

标准

类型

实施状况评价

效果评价

科学性评价

经济

效果

社会

效果

环境

效果

协调

性

适用性

先进

性

基础标准

√

—

—

—

√

√

√

产品标准

√

√

√

√

√

√

√

管理服务标准

√

√

√

√

√

√

√

注:

“√”表示适用于用相应指标进行评价；

“－”表示不适用用对相应指标进行评价。

四、标准评价方法

（一）标准实施状况评价

标准实施状况评价内容见表2，各项指标的评价结果划分见表3。

表2标准实施状况评价内容

标准应用状况

评价内容

单位应用状况

1.是否将所评价的标准纳入到单位的管理体系中；

2.所评价的标准在管理体系中是否"受控"；

3.是否开展了相关的宣贯、培训工作。

使用人员掌握

标准状况

1.使用人员是否掌握了所评价标准的内容；

2.使用人员是否能准确应用所评价的标准。

政策法规引用状况

所评价的标准被行业主管部门或地方政府制定的政策或法规引用情况。

其他标准引用状况

所评价的标准被其他标准引用的情况。

合同引用状况

所评价的标准被政府或企业在招标、采购、合同等文件中引用作为技术支持的情况。

表3标准实施状况指标评价结果划分

标准应用

状况

评价结果

划分标准

单位应用

状况

优

1.所评价的标准已纳入单位的管理体系当中；

2.单位采取多种措施积极宣传所评价的标准，并组织全部有关人员参加培训。

良

1.所评价的标准已纳入单位的管理体系当中；

2.单位组织部分有关人员参加培训。

中

1.所评价的标准已纳入单位的管理体系当中；

2.单位未组织有关人员参加培训。

差

达不到"中"的要求。

使用人员掌握标准状况

优

相关人员熟练掌握了标准的内容，并能够准确应用。

良

相关人员掌握了标准的内容，并能够应用。

中

相关人员基本掌握了标准的内容，但不能够应用。

差

达不到"中"的规定。

政策法规

引用状况*

有

所评价标准有被行业主管部门或地方政府制定的政策或法规引用。

无

所评价标准没有被行业主管部门或地方政府制定的政策或法规引用。

其他标准

引用状况

有

所评价标准有被其他标准引用。

无

所评价标准没有被其他标准引用。

合同引用

状况

有

所评价标准有被政府或企业在招标、采购、合同等文件中引用作为技术支持。

无

所评价标准没有被招标、采购、合同等文件引用作为技术支持。

标准在单位的应用状况、使用人员掌握标准状况可划分为“优、良、中、差”四类评价结果，分值划分见表4。

相关配套措施制定状况、政策法规引用状况、其他标准引用状况、合同引用状况等仅需确定评价结果为“有”或“无”，分值见表5。

表4指标评价结果对应分值表

评价结果

优

良

中

差

分值区间

[9,10]

[8，9）

[6，8）

[0，6）

注：

指标分值可精确到小数后1位。

表5指标评价结论对应分值表

评价结论

有

无

分值

0.25

0

标准实施状况评价分值按公式

（1）计算。

标准实施状况的评价等级按表10确定。

………………

（1）

式中:

Qs——标准实施状况分值；

αi——各类状况在标准实施状况中的权重系数〈按表6确定）；

Si——标准实施状况各指标评价结果对应的分值；

A——政策法规引用状况评价结果对应的分值；

B——其他标准引用状况评价结果对应的分值；

C——合同引用状况评价结果对应的分值。

表6标准实施状况内容权重系数α取值表

实施状况

标准类标

单位应用标准状况

使用人员掌握标准状况

基础标准

0.5

0.5

产品标准

O.4

0.6

管理服务标准

O.4

0.6

表7标准实施状况评价等级分值表

Qs值区间

[9，11]

[7,9）

[5,7）

[0,5）

评价等级

优

良

中

差

注:

Qs的分值取整数，小数部分四舍五入。

（二）标准实施效果评价

实施效果评价采用相应的评价指标进行。

产品标准和管理服务标准将所涉及每个环节的经济效果、社会效果、环境效果分别进行评价，再综合确定所评价标准的实施效果。

标准实施效果评价的内容见表8，各项指标评价结果的划分和对应分值见表9和表10。

表8标准实施效果评价内容

指标

评价内容

经济效果

1.是否有利于提高服务效率或提高产品质量；

2.是否有利于增加企业效益。

社会效果

1.是否对交通运输安全产生影响；

2.是否对交通运输行业技术进步产生影响；

3.是否对从业人员，服务对象，产品的生产、运输和使用人员的人身健康产生影响；

4.是否对社会公众利益产生影响。

环境效果

1.是否有利于行业能源资源节约、合理利用或循环利用；

2.是否有利于减少行业污染物排放。

表9标准实施效果指标评价结果划分标准

指标

评价结果

划分标准

经济

效果

优

标准实施后对于企业效益和服务效率（或产品质量）都产生有利影响，没有不利影响。

良

标准实施后对于企业效益和服务效率（或产品质量）一项产生有利影响，其他没有不利影响。

中

标准实施后对于企业效益和服务效率（或产品质量）没有不利影响。

差

标准实施后造成了企业效益减少、服务效率降低（或产品质量降低）等不利后果。

社会

效果

优

标准实施后对于交通运输安全、行业技术进步、人身健康及公众利益等至少三项产生有利的影响，其他项目没有不利影响;或者对其中二项产生较大的有利影响，其他项目没有不利影响。

良

标准实施后对于交通运输安全、行业技术进步、人身健康及公众利益等至少两项产生有利的影响，其他项目没有不利影响;或者对其中一项产生较大的积极影响，其他项目没有不利影响。

中

标准实施后对于交通运输安全、行业技术进步、人身健康及公众利益没有不利影响。

差

标准实施后对于交通运输安全、行业技术进步、人身健康及公众利益产生负面影响。

环境

效果

优

标准实施后对于交通运输行业能源资源节约、合理利用和降低污染物排放等其中至少两项产生有利的影响，没有不利影响。

良

标准实施后对于交通运输行业能源资源节约、合理利用和降低污染物排放等其中一项产生有利的影响，没有不利影响。

中

标准实施后对于交通运输行业能源资源节约、合理利用和降低污染物排放没有不利影响。

差

标准实施后产生了能源资源浪费，行业污染物排放增加等负面影响。

表10指标评价结果对应分值表

评价结果

优

良

中

差

分值

[9,10]

[7,9）

[5,7）

[0,5）

注：

指标分值可精确到小数后1位。

标准实施效果评价的分值按公式

（2）计算，等级按表12的确定。

…………………………

（2）

式中:

Qy——标准实施效果分值；

αi——经济效果、社会效果、环境效果在标准实施效果中的权重系数，见表11；

Si——经济效果、社会效果、环境效果等级对应的分值。

计算产品标准和管理服务标准的实施效果评价分值时，将该标准所涉及的运营管理、行业监管、安全或服务评价、运输服务等各环节的经济效果、社会效果、环境效果的评价结果分值对应进行算术平均后，采用公式

（2）进行计算。

表11标准实施效果内容权重系数α取值表

评价指标

标准类别

经济效果

社会效果

环境效果

产品标准

O.6

0.2

O.2

管理服务标准

O.4

0.3

O.3

表12标准实施效果评价等级分值表

QX值区间

[9,10]

[7,9）

[5,7）

[0,5）

评价等级

优

良

中

差

注:

QX的分值取整数，小数部分四舍五入。

（三）标准的科学性评价

基础标准、产品标准和管理服务标准的科学性评价的内容见表13和表14，等级划分见表15和表16，结果对应分值见表20。

表13基础标准科学性评价内容

科学性

评价内容

1.标准内容是否得到行业的广泛认同、达成共识；

2.标准是否满足其他标准和相关使用的需求；

3.标准内容是否清晰合理、条文严谨准确、简练易懂；

4.标准是否与其他基础标准相协调。

表14产品标准和管理服务标准科学性评价内容

指标

评价内容

适用性

1.标准中规定的指标和方法是否科学合理；

2.标准条文是否严谨、准确、容易把握；

3.标准在实际中应用是否方便、可行。

协调性

1.标准内容是否符合国家政策的规定；

2.标准内容是否与同级标准不协调；

3.如果是行业标准，还应评价是否与国家标准不协调。

先进性

1.是否符合国家的技术经济政策；

2.标准是否采用了可靠的先进技术或适用科研成果；

3.与国际标准或国外先进标准相比是否达到先进的水平。

表15基础标准科学性评价等级划分标准

科学性

评价

等级

划分标准

优

标准内容清晰合理，条文严谨准确、简练易懂，能够满足其他标准和相关使用的需求，同时得到行业的广泛认同、达成共识，与其他基础标准相协调。

良

标准内容清晰合理，条文严谨准确、简练易懂，能够满足使用的需求，同时基本得到行业认同、达成共识，与其他基础标准相协调。

中

标准内容基本合理，能够满足使用的要求，同时基本得到行业认同、达成共识，与其他基础类标准相协调。

差

达不到"中"的要求。

表16产品标准和管理服务标准科学性指标评价结果划分标准

指标

评价

结果

划分标准

适用性

优

标准中规定的指标和方法科学合理，标准条文严谨、准确、容易把握，标准在实际中应用方便、可行。

良

标准中规定的指标和方法基本合理，标准条文严谨、准确，在实际中应用可行。

中

标准中规定的指标和方法基本合理，在实际中应用可行。

差

达不到"中"的要求。

协调性

优

标准内容能够有利促进国家相关政策的实施，符合法律法规的规定，并与相关标准（同级）相协调（行业标准还要与国家相关标准相协调）。

良

标准内容符合国家相关政策的规定，并与相关标准（同级）相协调（行业标准还要与国家相关标准相协调）。

中

标准内容符合国家相关政策的规定，与相关标准不相协调，但没有不利影响。

差

达不到"中"的要求。

先进性

优

标准符合国家技术经济政策，采用了先进技术或适用科研成果，达到国际先进水平。

良

标准符合国家技术经济政策，并采用了先进技术或适用科研成果。

中

标准符合国家技术经济政策，所应用的理论和技术不落后。

差

达不到"中"的要求。

表17单项类和综合类标准科学性指标评价结果对应分值表

评价结果

优

良

中

差

分值

[9,10]

[7,9）

[5,7）

[0,5）

注：

指标分值可精确到小数后1位。

产品标准和服务标准的科学性分值计算方法见公式（3），等级分值确定见表19。

……………………（3）

式中:

Qy——标准科学性分值；

αi——适用性、协调性、先进性在科学性中的权重系数见表18；

Si——适用性、协调性、先进性评价等级对应的分值。

表18标准科学性内容权重系数α取值表

标准科学性

标准类别

适用性

协调性

先进性

产品标准

0.5

O.3

O.2

管理服务标准

0.5

O.3

O.2

表19标准科学性评价等级分值表

Qy值区间

[9,10]

[7,9）

[5,7）

[0,5）

评价等级

优

良

中

差

注:

Qy的分值取整数，小数部分四舍五入。

（四）综合分析

通过综合分析，为推动标准实施工作总结经验，提出改进措施。

综合分析应在标准实施状况评价、实施效果评价、科学性评价得出结论的基础上，分类进行全面剖析、总结、评价，指出存在的问题，提出实施改进措施。

进行两类及以上评价的综合分值按公式（4）计算，综合评价等级按表21确定。

…………………………（4）

式中:

T——综合分值；

αs、αx、αy——实施状况、实施效果、科学性权重系数，按表20确定；

Qs、Qx、Qy——标准实施状况、标准实施效果、标准科学性分值。

表20综合评价类型权重系数α取值表

评价指标情况

实施状况

实施效果

科学性

涉及实施状况、实施效果和科学性

0.2

0.4

0.4

涉及实施状况和实施效果

0.3

0.7

－

涉及实施状况和科学性

0.3

－

0.7

涉及实施效果和科学性

－

0.45

0.55

表21综合评价等级分值表

T值区间

[9,10]

[7,9）

[5,7）

[0,5）

综合评价等级

优

良

中

差

对各评价类别分别进行专项分析遵循的原则和分析内容包括:

（1）对于评价等级为"优"的评价类别，要总结经验，当有个别指标未达到“优”的要求，应分析其原因；

（2）对于评价等级为“良”的评价类别，要全面分析，提出推动标准实施工作中注意的问题，以及需保持的经验做法，对未达到“良”的个别指标，应分析原因；

（3）对于评价等级为“中”的评价类别，要逐指标分析原因及各指标间的关联影响，提出改进措施；

（4）对于评价等级为“差”的评价类别，要逐指标分析原因，要结合评价标准所需要的经济、自然条件和政策条件等，分析标准实施存在的问题，提出改进措施。

当进行了两个及以上类别评价时，在完成专项分析后，再进行综合分析。

综合分析原则及内容如下：

（1）综合评价等级为“优”，全面总结经验；

（2）综合评价等级为“良”，在分析所评价的类别之间存在的关联影响的基础上，提出应注意的问题；

（3）综合评价等级为“中”，在分析所评价的类别之间存在的关联影响的基础上，提出改进的具体措施；

（4）综合评价等级为“差”，要分析其他因素对标准实施的影响，提出改进的具体措施。

完成评价工作后，评价工作组应进行专项分析和综合分析。

五、评价指标信息采集方法

标准实施效果评价应采取专家调查法、实地调查法、抽样问卷调查法。

专家调查法：

为保证信息采集的有效性，评价工作组应根据所评价内容拟定调查提纲，选择专家进行调查；专家应有合理的规模，所选择专家应熟悉所评价的标准，有丰富的标准应用实际经验。

实地调查法：

评价工作组根据评价内容，在使用标准的全部单位和个人中，确定调查目标群体，抽样确定调查对象，然后带着调查提纲赴实地进行调查，确保对标准实施评价的客观性。

抽样问卷调查法：

评价工作组根据所评价内容编制调查问卷，根据评价类别，在使用标准的全部单位和个人中，确定调查目标群体，抽样确定调查对象，发放问卷进行调查，问卷返回的数量应能保证评价结论的准确性。