安全绩效

定义

安全绩效:由其安全绩效目标和安全绩效指标界定的国家或服务提供者的安全业绩。 引用民航生产经营单位安全绩效管理指导手册(MD-AS-2017-01)


关联术语

安全绩效指标:用于监测和评估安全绩效的以数据为基础的参数。

安全绩效目标值:安全绩效指标在一特定时期的预期目标。

安全绩效警戒值:未达到安全绩效目标值,但能够对相关安全风险不可控或不可接受的趋势作出预警的安全绩效水平。

安全行动计划:为达成预期安全绩效目标而制定的具体措施和实施计划。

安全绩效管理:对组织的安全绩效进行监测和评估,对组织中影响安全状态的因素进行管理,使组织的安全状态达到可接受的安全水平。

引用民航生产经营单位安全绩效管理指导手册(MD-AS-2017-01)


安全责任

全员安全责任制

责任载体 责任
民航生产经营单位 (2)制定、评审并有效地沟通传达本单位的安全政策和安全目标,建立与本单位运行类型、规模和复杂程度相适应的安全绩效指标和安全绩效目标,监测本单位安全绩效,验证安全风险管控的有效性和安全目标的达成情况。

引用《关于落实民航安全责任的管理办法》(AC-398-05)


流程要求

总体要求

航空运营人应当制定安全绩效管理的制度程序,明确相关机构和岗位开展安全绩效评估与监测的职责,并规定安全绩效指标的设定、目标值和预警规则设定、安全绩效监测和改进等内容。安全绩效管理原则上不应作为人事考核的主要依据。

引用航空运营人安全管理体系(SMS)建设要求


指标分类

安全绩效指标可以分为高后果指标、低后果指标、安全管理类指标和安全基础类指标。

高后果指标:衡量和监测发生严重后果事件的安全绩效指标,如事故或征候等。高后果指标也被称为反应性指标。

低后果指标:衡量和监测发生较小后果事件或活动的安全绩效指标,如其他不安全事件、过程状态偏差等。低后果指标也被称为主动性指标、预测性指标或过程类指标。

安全管理类指标:衡量和监测安全管理工作开展情况、工作质量和效果的安全绩效指标,如安全检查执行情况、安全培训考核情况等。

安全基础类指标:衡量和监测组织安全基础状况的安全绩效指标,如人机比、机队机龄等。

引用航空运营人安全管理体系(SMS)建设要求


流程关联

7.6.3 合格证持有人应将 CRM 培训的普及性和有效性作为其自身 SMS 安全绩效指标(SPI)进行持续监控。

引用《机组资源管理(CRM)训练指南》(AC-121-FS-41R1


表单

航空运营人应当记录并保存安全绩效评估和监测的相关工作,包括安全绩效指标体系、安全绩效监测、针对预警采取的管理措施等。

引用航空运营人安全管理体系(SMS)建设要求


合规标准

SMS审定

编号 审定内容
1.11 程序是否规定,航空运营人安全绩效监测与评估的职责,人员资质要求以及开展安全绩效管理的要求和流程?规章要求:《航空运营人安全管理体系(SMS**)****建设要求》(****AC-121-FS-****26R1)8.3.1.2.1检查方法:**查阅航空运营人公司安全管理手册或制度程序中安全绩效监测相关内容。**判断标准:**航空运营人的安全管理手册或制度程序满足:(1)规定了相关机构和岗位开展安全绩效监测与评估的职责,其中安全管理部门负责组织开展本单位层级的安全绩效管理,并对各生产运行部门的安全绩效管理进行协调、指导和监督,生产运行部门按照“三管三必须”原则,开展本部门级的安全绩效管理工作;(2)明确从事安全绩效管理工作的人员资质和能力要求;(3)规定安全绩效指标的设定(分类、层级、设计方法等)、目标值和预警规则设定、安全绩效监测和改进、记录保存等内容。

*引用安全属性检查单(SAI)1.2.1 SMS审定【2024】(OP) *


SMS监察

编号 监察内容
1.11 航空运营人是否能够根据自身情况建立一套系统、科学的安全绩效指标体系,评估组织的安全状态,监测安全目标的实现情况?**规章要求:《航空运营人安全管理体系(SMS)建设要求》(AC-121-FS-26R18.3.1.2.1检查方法:**检查航空运营人(1)安全绩效指标体系;(2)安全绩效指标监测记录;(3)安全绩效指标预警及闭环管理记录;(4)安全绩效指标体系评审改进记录。判断标准:(1)运营人根据运行复杂程度和规模建立了安全绩效指标体系,涵盖重点运行和安全管理过程;(2)安全绩效指标体系包含了高后果指标、低后果指标、安全管理类指标和安全基础类指标;(3)运营人明确了安全绩效指标的目标值和预警规则,目标值以历史数据为依据,并充分考虑了运行量、运行环境、安全保障能力及可预期的变化;(4)运营人确定了每个安全绩效指标的监测信息来源和监测频次要求,并持续对安全绩效目标的实现情况、安全绩效指标的趋势进行监测;(5)运营人针对预警的指标应及时制定并实施了纠正和预防措施,并对措施的落实情况和效果进行了跟踪验证和闭环管理;(6)运营人定期对安全绩效指标体系的充分性、适用性和有效性进行了评审,并适时改进修订;(7)运营人设置的安全绩效指标体系能够在发生事故、征候等严重不安全事件前出现有效预警。

引用 绩效检查单(EPI) 1.2.1 SMS监察【2024】(OP)


SMS审核

文件符合性(P)

审核对象 效能审核评判要点及标准 证明材料 审核方式
单位和部门层面 1.制定了本单位或本部门的安全绩效管理制度,明确了安全绩效管理的职责、指标建立、指标监控、预警处理、闭环管理等要求。□ 未建立安全绩效管理制度□ 已建立安全绩效管理制度,但管理制度仅包含上述3个及其以下要点□ 已建立安全绩效管理制度,但管理制度仅包含上述4个-5个要点□ 已建立安全绩效管理制度,管理制度包含上述6个及以上要点 单位或部门安全绩效管理制度或工作程序 文件审核
单位和部门层面 2.制度中规定持续开展安全绩效监测,以评估本单位的安全水平并验证安全风险控制措施的有效性。□ 不符合□ 符合 单位和部门安全绩效管理制度或工作程序 文件审核
部门层面 3.部门安全绩效管理制度(含职责)与单位的安全绩效管理制度(含职责)之间衔接顺畅,不存在冲突或不一致。□ 存在与5个制度(含)以上明显冲突、不一致的地方□ 存在与3-4个制度明显冲突、不一致的地方□ 存在与1-2个制度明显冲突、不一致的地方,但不影响实际运行□ 不存在不一致□ 不适用 单位和部门安全绩效管理制度或工作程序 文件审核

适宜性(S)

审核对象 效能审核评判要点及标准 证明材料 审核方式
部门层面 4.部门安全绩效管理制度(含职责)与单位的安全绩效管理制度(含职责)之间衔接顺畅,不存在重叠或缺失。□ 存在与5个制度(含)以上明显重叠或缺失的地方□ 存在与3-4个制度明显重叠或缺失的地方□ 存在与1-2个制度明显重叠或缺失的地方,但不影响实际运行□ 不存在重叠及缺失□ 不适用 单位和部门安全绩效管理制度或工作程序 文件审核
单位和部门层面 5.安全绩效管理制度与单位或部门的运行业务、运行规模、复杂程度和人员能力相适应。□ 安全绩效管理制度5处(含)以上不符合本单位或部门运行实际□ 安全绩效管理制度3-4处不符合本单位或部门运行实际□ 安全绩效管理制度1-2处不符合本单位或部门运行实际□ 安全绩效管理制度均符合本单位或部门运行实际 安全绩效管理制度或工作程序,通过文实符合性检查,结合专业审核员的能力判定 现场审核

执行性(O)

审核对象 效能审核评判要点及标准 证明材料 审核方式
单位和部门层面 6.安全绩效管理制度与安全检查、报告、内部审核、风险分级管控、安全隐患排查治理等之间建立了顺畅的接口、协调机制,不存在冲突或者不一致。□ 未建立与上述制度的接口□ 仅建立了与1-2个制度的接口,且接口畅通,不存在冲突或者不一致□ 仅建立了与3-4个制度的接口,且接口畅通,不存在冲突或者不一致□ 建立了与全部制度的接口,且接口畅通,不存在冲突或者不一致 单位或者运行部门安全绩效管理制度或工作程序 文件审核
单位和部门层面 7.按照本单位或者本部门的安全绩效指标建立、指标监控、预警处理、闭环管理、指标更新完善等要点开展安全绩效管理。□ 存在5处(含)以上要点不符合□ 存在3-4处要点不符合□ 存在1-2处要点不符合□ 实施了所有的要点 安全绩效管理台账记录、安全绩效指标库 现场审核
单位和部门层面 8.设立了本单位或者本部门安全绩效指标、指标的目标值、预警值、行动计划等要点。□ 未涵盖上述要点□ 仅涵盖上述1-2个要点□ 仅涵盖上述3个要点□ 涵盖了上述所有要点 安全绩效指标库 现场审核
单位和部门层面 9.安全绩效指标类别全面,包括安全管理类指标、运行结果类指标、运行过程类指标。□ 未涵盖上述指标□ 有上述1类指标□ 有上述2类指标□ 有上述3类指标 安全绩效指标库或安全目标责任书 现场审核
单位和部门层面 10.日常开展了安全信息收集和安全绩效监测。□ 未定期实施安全信息收集和安全绩效指标监控□ 定期实施安全信息收集和安全绩效指标监控,但部分指标安全信息收集不准确、不全面□ 定期实施安全信息收集和安全绩效指标监控,但个别指标安全信息收集不准确、不全面□ 定期实施安全信息收集和安全绩效指标监控,安全信息收集准确、全面 安全绩效管理台账记录,抽取10个绩效指标的信息收集和监测记录 现场审核
单位和部门层面 11.针对安全绩效指标预警的问题,通过SMS按照安全风险管理和隐患排查治理的原则进行闭环管理。□ 未对发现的问题进行了闭环管理□ 对70%以下的问题进行了闭环管理□ 对70%-85%的问题进行了闭环管理□ 对85%以上的问题进行了闭环管理 安全绩效指标预警问题清单,抽取10个预警问题的闭环管理记录 现场审核
单位和部门层面 12.定期对安全绩效指标体系开展评审、修订,不断优化安全绩效指标体系。□ 不符合□ 符合 安全绩效指标体系修订记录 现场审核
单位和部门层面 13.专职或兼职的安全绩效管理人员的能力、精力投入满足安全绩效管理工作要求。□ 人员的能力、精力不能满足工作需要,多项工作有遗漏□ 人员的能力、精力基本满足工作需要,个别工作有遗漏□ 人员的能力、精力能够满足工作需要,工作质量较高□ 人员的能力、精力能够满足工作需要,工作质量很高 根据规定的工作量、实际完成的工作量和工作效果,结合中层问卷进行综合判断 现场审核、调查问卷、人员访谈

有效性(E)

审核对象 效能审核评判要点及标准 证明材料 审核方式
单位层面 14.抽样针对安全绩效触发警告的问题,已经纳入安全隐患清单或者危险源清单的比例。□ 50%以下□ 50%到70%□ 70%到85%□ 85%以上 抽取10个安全绩效触发警告的问题中发现的问题,危险源、隐患清单 现场审核
单位层面 15.安全绩效触发警告的问题体现在安全隐患清单或者危险源清单中的隐患治理措施和安全风险控制措施体现为新增或者修改制度或程序、软硬件系统、培训大纲等的比例。□ 50%以下□ 50%到70%□ 70%到85%□ 85%以上 危险源、隐患清单,制度或程序、软硬件系统、培训大纲 现场审核
单位和部门层面 16.安全绩效指标体系与本单位或本部门的安全目标相关联,能够支撑本单位或本部门安全目标的实现(实现安全绩效指标、目标即可达成相应的安全目标)。□ 50%以下的安全绩效指标与本单位或本部门的安全目标相关联□ 50%-70%的安全绩效指标与本单位或本部门的安全目标相关联□ 70%-85%的安全绩效指标与本单位或本部门的安全目标相关联□ 85%以上的安全绩效指标与本单位或本部门的安全目标相关联 安全绩效指标库、安全目标责任书 现场审核
单位和部门层面 17.安全绩效指标比较全面,涵盖了本单位安全管理关键事项、安全运行关键环节、安全薄弱环节等。□ 覆盖了50%以下□ 覆盖了50%-70%□ 覆盖了70%-85%□ 覆盖了85%以上 近1-2年安全绩效指标库,根据审核员的专业知识和审核经验判断 现场审核
单位和部门层面 18.各安全绩效指标的预警规则选择、预警值设置,科学、合理,与目标值设置相一致。□ 50%以下科学、合理□ 50%-70%科学、合理□ 70%-85%科学、合理□ 85%以上科学、合理 近1-2年安全绩效指标库 现场审核
单位和部门层面 19.安全绩效指标监测结果,切实预警了安全问题,符合本单位的实际安全状况,能够准确反映单位的安全状况。□ 通过安全绩效管理,没有反映本单位的实际安全状况□ 通过安全绩效管理,部分反映了本单位的实际安全状况□ 通过安全绩效管理,基本反映了本单位的实际安全状况□ 通过安全绩效管理,完全反映了本单位的实际安全状况 安全绩效管理台账记录、安全信息等提示:若安全运行状况不好,而并未通过安全绩效管理发现任何问题,则表明其结果不一致 现场审核
单位和部门层面 20.针对触发预警的安全绩效指标,通过整改有效降低了问题的发生率。□ 安全绩效管理发现的问题,整改后仍发生了相关问题或不安全事件□ 安全绩效管理发现的问题,整改后未发生相关问题或不安全事件 抽查几个案例,重点检查一段时间内相关问题或事件发生率是否在目标范围内 现场审核
单位层面 21.无事故运行时间(2011年1月1日至今)。□ 发生事故□ 未发生事故 事故信息 现场审核
单位层面 22.单位管理机构出现违反民航行业信用管理相关规定,发生与民航运行安全有关的严重失信行为次数。□ 高于行业平均值□ 行业平均值(含)以下 严重失信行为次数 现场审核
单位层面 23.近3年本单位责任原因一般征候万时率(或万架次率)。□ 高于行业平均值□ 同一类型单位的行业平均值(含)以下 近3年本单位责任原因一般征候数量、飞行小时数(飞机起降架次) 现场审核
单位层面 24.近3年本单位责任原因严重征候万时率(或万架次率)。□ 高于行业平均值□ 同一类型单位的行业平均值(含)以下 近3年本单位责任原因严重征候数量、飞行小时数(飞机起降架次) 现场审核
单位层面 25.近3年公司机械原因一般征候万时率。□ 高于行业平均值□ 行业平均值(含)以下□ 不适用 近3年公司机械原因一般征候数量、飞行小时数 现场审核
单位层面 26.近3年公司机械原因严重征候万时率(厂家原因除外)。□ 高于行业平均值□ 行业平均值(含)以下□ 不适用 近3年公司机械原因严重征候数量、飞行小时数 现场审核

引用民航安全管理体系审核检查单


参考

参考指标

  • 高后果指标
    • 严重/一般差错万时率
    • 严重/一般(质量)偏差万时率
    • I类/ II类事件万时率
  • 低后果指标(关联核心风险)
    • 可控飞行撞地
    • 着陆构型建立晚
    • 着陆襟翼构型错
    • ILS下滑道偏离
    • ILS航向道偏离
    • 下降率大
    • 进近速度大
    • 进近速度小
    • 进近滚转角大
    • 着陆滚转角大
    • 接地俯仰角大
    • 接地俯仰角小
    • GPWS warning – Too low flaps/ Dont sink/ Terrain/Sink rate/Pull up/Too low gear/ Too low terrain/ Glideslope/Terrain pull up
    • 未正确处置起飞风切变/前方风切变
    • 机组在进近的最低下降高/决断高时决策错误
    • 未按规定调整/确认气压基准
    • 地形数据库未按期进行更新
  • 冲偏出跑道
    • 减速装置故障(反推/减速板/刹车)
    • 舱单错误
    • 性能数据计算错误/未进行修能修正
    • 起飞形态设置错误
    • 起飞推力设置不正确
    • 使用反推晚
    • 使用转弯手轮早
    • 起飞航向偏差大
    • 着陆速度大
    • 着陆航向变化大
    • 着陆坡度大
    • 接地距离长
    • 脱离跑道速度大
    • 认错滑行道/跑道/跑道方向
  • 空中冲突
    • 机载通讯设备故障
    • TCAS系统故障
    • FPL与计算机飞行计划不一致
    • 导航数据库未更新或错误或未提示机组
    • TCAS RA 警告
    • 调错通讯频率
    • 通讯音量小/未佩戴耳机
    • 未守听应急频率
    • 误听管制指令
    • 未按规定调整/确认气压基准
    • 调错高度
    • 飞错进离场
    • 未经ATC允许绕飞雷雨、偏航
  • 安全管理类
    • 飞行/签派/维修人员SOP、工卡、检查单违规率
    • 安全信息报告迟报、漏报、瞒报、报告不准确率
    • 风险控制措施闭环率
    • 纠正预防措施闭环率
    • 风险控制措施/纠正预防措施抽查合格率
    • 安委会决议闭环率
    • 安全培训教育抽查合格率
    • 人均自愿报告数量
    • 安全检查/法定计划完成率
  • 安全基础类
    • 故障保留率(*精准监管指标)
    • 疲劳系数(*精准监管指标)
    • 复杂航线占比(*精准监管指标)
    • 教员、机长、副驾驶人员结构(*精准监管指标)
    • 新获得资质飞行员占比(*精准监管指标)
    • 引进机长数占总机长人数的比值(*精准监管指标)
    • 客舱乘务员变化数量(*精准监管指标)
    • 航空安全员变化数量(*精准监管指标)
    • 维修放行人员疲劳情况(*精准监管指标)
    • 航线维修人员三年以上工作经历人数比例(*精准监管指标)
    • 航线维修人员持照人数占比(*精准监管指标)
    • 航线维修人员流动人数占比(*精准监管指标)
    • 工程技术工程师流动人数占比(*精准监管指标)
    • 离职人员占比(*精准监管指标)
    • Sc=100-(A整改+B处罚+ C信用)(*精准监管指标)
    • 健康高风险等级(C级)飞行人员比例
    • 航空器重复性故障万架次率
    • 飞机系统/结构故障SDR报告千时率

参考监测方法

Step1:计算上一年平均值(Average):1.50%

Step2:计算 上一年标准偏差(STDEVP):0.21%

Step3:设定本年度年目标值:1.42%

Step4:设定指标监测周期(月度)

Step5:设定预警规则

警戒值

警戒值 1:目标值 + 1_标准偏差 = 1.63%

警戒值 2:目标值 + 2_标准偏差 = 1.84%

警戒值 3:目标值 + 3 * 标准偏差 = 2.05%

**预警规则

方法一(均值法)

  • 当月平均值 > 1.42%
  • 累积平均值 > 1.42%

方法二(标准偏差法)

  • 某个月 > 2.05%
  • 连续 2 个月 > 1.84%
  • 连续 3 个月 > 1.63%
  • 累积平均值 > 1.42%

问题数据库

  • 绩效考核等同于安全绩效监测
  • 监测指标与风险管理脱节
  • 绝大部分指标是结果类、管理类,缺少运行过程类指标
  • 预警规则不符合逻辑
  • 监测的客观数据不足;监测结果都是0或100%
  • 安全报告、检查审核、事件调查隐患排查等与绩效监测没有关联
  • 缺少对数据信息的综合分析、系统评价
  • 没有对目标、指标的合理性、有效性等进行评审、修订