Chapter 5

评估考核

掌握CBTA胜任力评估、ICAO九大核心胜任力、73项行为指标和ORCA评估模型

🔴 CBTA 胜任力评估框架

📊 CBTA评估核心

CBTA是ICAO Doc 9868定义的现代评估框架,将传统的"任务清单"式评估转变为"胜任力行为指标"式评估。CBTA关注学员"如何做"和"为什么",而非仅仅"做了什么"。

🏆 ICAO 胜任力评级量表(1-5级)

等级名称描述表现特征
5优秀表现始终展示几乎所有适用OB,示范性表现增强安全性,可作为榜样
4高于标准经常展示大多数适用OB,有效表现安全结果,超出基本要求
3标准经常展示许多适用OB,足够表现安全结果,达到基本要求
2低于标准偶尔展示部分OB,最低可接受表现未导致不安全,需要改进
1不可接受很少展示OB,无效表现导致不安全情况
合格标准:3分或以上为合格。型别等级培训目标是在课程结束前达到4分或5分。评分为1-3的胜任力必须输入评论说明。
📑 九大核心胜任力与行为指标

📑 73项可观察行为指标 Observable Behaviors

每个核心胜任力都有一组可观察、可测量的行为指标。评估时教员根据学员的行为表现与行为指标的匹配程度进行评级。

1. 知识应用 KNO(7项)

编号行为指标
KNO.1展示有关限制、系统及相互作用的实用和适用知识
KNO.2展示所需的已公布的运行规定的知识
KNO.3展示有关物理环境和空中交通环境的知识
KNO.4展示有关适用法规的适当知识
KNO.5知道从哪里获得所需信息
KNO.6表现出对获取知识的积极兴趣
KNO.7能够有效地运用知识

2. 程序应用 PRO(7项)

编号行为指标
PRO.1确定在哪里可以找到程序和法规
PRO.2及时应用相关的运行规定、程序和技术
PRO.3遵循SOP,除非更高的安全性指示需要适当偏离
PRO.4正确操作飞机系统和相关设备
PRO.5监控飞机系统状态
PRO.6遵守适用法规
PRO.7应用相关的程序知识

3. 自动航径管理 FPA(6项)

编号行为指标
FPA.1根据已有飞行管理系统、引导系统,恰当使用以匹配当时的情况
FPA.2监控并识别与预计飞行航径的偏差,并采取适当措施
FPA.3管理飞行航径以实现最佳运行表现
FPA.4使用自动化功能保持预计飞行航径,同时管理其他任务和干扰
FPA.5根据飞行阶段和工作负荷,及时选择适当的自动化级别和模式
FPA.6有效监控飞行引导系统,包括接通的状态和自动模式的转换

4. 人工航径管理 FPM(7项)

编号行为指标
FPM.1根据情况,以适宜的方式,准确、平稳地人工控制飞机
FPM.2监控并识别与预计飞行航径的偏差,并采取适当措施
FPM.3使用飞机姿态、速度和推力之间的关系,以及导航信号或目视信息来人工控制飞机
FPM.4管理飞行航径以实现最佳运行表现
FPM.5在人工飞行期间保持预计飞行航径,同时管理其他任务和干扰
FPM.6根据已有飞行管理系统、引导系统,恰当使用以匹配当时的情况
FPM.7有效监控飞行引导系统,包括接通的状态和自动模式的转换

5. 问题处理/决策 PSD(9项)

编号行为指标
PSD.1及时识别、评估和管理威胁与差错
PSD.2从适当的来源寻求准确和充分的信息
PSD.3识别并核实出现的问题及原因
PSD.4在保证安全的前提下,坚持不懈地解决问题
PSD.5确定并考虑适当的选项
PSD.6应用适当和及时的决策技巧
PSD.7根据需要,监控、回顾以及调整决策
PSD.8在缺乏指导或程序的情况下能够随机应变
PSD.9遇到意外事件时表现出足够的韧性/复原力

6. 沟通 COM(10项)

编号行为指标
COM.1确定接收者已准备好并且能够接收信息
COM.2恰当选择沟通的内容、时机、方式和对象
COM.3清晰、准确、简洁地传递信息
COM.4确认接收者展示出对重要信息的理解
COM.5接收信息时积极倾听并展示理解
COM.6询问相关且有效的问题
COM.7适当升级沟通以解决已发现的偏差
COM.8以适合组织和社会文化的方式使用和解读非语言沟通
COM.9遵守标准的无线电通话用语和程序
COM.10使用英文准确阅读、解读、构建和回应数据链信息

7. 领导力/团队合作 LTW(11项)

编号行为指标
LTW.1鼓励团队参与和开放式沟通
LTW.2展示主动,并在需要时提供指导
LTW.3让他人参与计划
LTW.4考虑他人的意见
LTW.5建设性地给予和接受反馈
LTW.6以建设性方式处理和解决冲突与分歧
LTW.7在需要时行使果断的领导力
LTW.8承担决策和行动的责任
LTW.9遵照执行指令
LTW.10应用有效的干预策略来解决已发现的偏差
LTW.11管理文化和语言方面的挑战

8. 情景意识与信息管理 SAW(7项)

编号行为指标
SAW.1监控并评估飞机及系统的状态
SAW.2监控并评估飞机的能量状态及预计的飞行航径
SAW.3监控和评估可能影响运行的总体环境
SAW.4验证信息的准确性并检查过失误差
SAW.5保持对参与操作或受运行影响的人员以及他们按预期表现的能力的意识
SAW.6根据与威胁与差错相关的潜在风险,制定有效的应急预案
SAW.7对情景意识下降的迹象做出响应

9. 工作负荷管理 WLM(9项)

编号行为指标
WLM.1在所有情况下都做到自我控制
WLM.2对任务进行有效地计划、优先级排序和安排
WLM.3在执行任务时有效地管理时间
WLM.4提供帮助
WLM.5委派任务
WLM.6在适当情况下寻求并接受帮助
WLM.7认真监控、回顾、交叉检查行动
WLM.8核实任务是否已达到预期结果
WLM.9在执行任务时有效管理干扰、分心、变化和失败,并从中有效恢复
🔍 ORCA评估模型

🔍 ORCA标准化评估流程

波音定义的标准化评估流程,确保评估的一致性和客观性:

Observe 观察观察学员行为
不做判断
Record 记录记录具体行为
使用ORCA模板
Classify 分类将行为与
胜任力指标匹配
Assess 评估基于行为指标
给出1-5级评分
ORCA的关键原则:先观察记录,后分类评估。避免在观察过程中就做出判断,确保评估基于客观的行为证据而非主观印象。

📝 ORCA观察记录填写示例

以下是一次V1后发动机故障训练中,教员对学员PSD(问题处理/决策)胜任力的ORCA记录示例:

ORCA步骤记录内容
Observe 观察V1+5秒左发故障后,PF在3秒内识别故障并喊出"发动机失效"。PF保持飞行路径控制,偏差在±200英尺和±10节以内。PM在5秒内开始执行发动机火警检查单。PF在500英尺时未执行航路偏移,直接转向备降场。
Record 记录时间14:32 - PSD.1 及时识别威胁
时间14:33 - PSD.4 坚持解决问题
时间14:35 - FPM.1 飞行路径控制平稳
时间14:38 - PSD.6 决策及时但未考虑所有选项
Classify 分类PSD.1 ✓ 及时识别评估威胁
PSD.4 ✓ 在保证安全的前提下坚持解决问题
PSD.5 △ 确定选项时未充分考虑备降场选择
PSD.6 ✓ 应用及时决策技巧
Assess 评估PSD评级:4(高于标准)
评论:学员在发动机失效后反应迅速,飞行路径控制良好。建议在Debriefing中讨论备降场选择的决策过程,考虑更多可用选项。

📈 评分边界案例:如何区分3分和4分

评分中最常见的问题是3分(标准)和4分(高于标准)的边界判断。以下以PSD胜任力为例说明:

行为指标2分(低于标准)3分(标准)4分(高于标准)5分(优秀)
PSD.1 及时识别威胁延迟识别,需要PM提醒识别威胁但反应略慢主动识别并立即开始管理预判威胁并提前准备
PSD.5 确定并考虑选项只考虑一个选项考虑2-3个选项但选择理由不够充分系统评估多个选项并选择最优创造性提出额外选项
PSD.9 表现出韧性在压力下表现明显下降在压力下维持基本表现在压力下保持良好表现在压力下表现反而提升
评分黄金法则:问自己"如果这位飞行员作为我今天的副驾驶,我是否放心?"如果答案是"放心",至少3分;如果"很放心",4分;如果"非常放心且能学到东西",5分;如果"不太放心",2分或以下。

⚠ 评估中的常见偏差

光环效应

学员在某一方面表现优秀(如飞行技术好),教员倾向于在所有胜任力上给高分。对策:使用ORCA模型,每个胜任力独立评估,基于行为指标而非整体印象。

近因效应

最近发生的事件(如最后一个进近)对评分影响过大,忽略了之前的表现。对策:在训练过程中持续记录,Debriefing前回顾全部记录。

宽大/严格偏差

某些教员倾向于给高分(宽大),某些倾向于给低分(严格)。对策:通过ICAP标准化会议和校准练习确保教员间一致性。

确认偏差

教员在训练开始前就形成了对学员能力的预期,后续评估倾向于验证预期。对策:每次训练以开放心态开始,让行为证据说话。

← 教学过程教学计划 →