I. Objectif Général et Types d’Évaluation
Ce chapitre précise les fonctions, responsabilités et qualifications des instructeurs et évaluateurs dans le cadre d’une formation fondée sur les compétences (CBA – Competency-Based Approach).
🎯 Deux Types d’Évaluation (§3.2)
Le Doc 10056 distingue clairement deux moments clés dans le processus d’évaluation. La compréhension de cette distinction est FONDAMENTALE :
| Type | Caractéristiques | Rôle |
|---|---|---|
| Évaluation Formative (En cours de formation) |
|
Vérification de l’apprentissage |
| Évaluation Sommative (Fin de phase/Jalon) |
|
Validation de la compétence |
🔐 Responsabilité de la Sécurité en OJT (§3.2.4)
- Dans la plupart des cas : Les personnes chargées de l’évaluation (si qualifiées sur la position)
- Alternative : Un autre instructeur qui observe le stagiaire sans l’évaluer
II. Exigences Générales (§3.3)
Avant de détailler les rôles spécifiques, le Doc 10056 établit trois exigences communes à tout le personnel responsable de l’instruction et de l’évaluation :
| Exigence | Description Détaillée |
|---|---|
| a) Comprendre les principes CBA | Bien comprendre les principes de la formation et de l’évaluation fondées sur les compétences (pas seulement les connaître superficiellement) |
| b) Connaissance détaillée des outils | Avoir une connaissance détaillée du modèle de compétence adapté ET du plan d’évaluation. Cette exigence est particulièrement importante lorsque le plan comprend des blocs d’apprentissage et des normes de compétence intermédiaires |
| c) Utiliser les outils d’évaluation | Utiliser les outils et documents qui permettent d’assurer une évaluation juste et objective :
|
III. Le Rôle de l’Instructeur (§3.4)
L’instructeur est au cœur du processus CBA. Son rôle dépasse la simple transmission de savoirs techniques. Pour enseigner efficacement, l’instructeur doit démontrer de nombreuses compétences, et le personnel qui doit assumer des tâches d’instruction devrait avoir reçu une formation appropriée.
🟩 Les Cinq Compétences Spécifiques de l’Instructeur CBA
Le Doc 10056 identifie cinq domaines de compétence que les instructeurs doivent expressément maîtriser :
a) Dispenser l’enseignement selon le plan de formation
b) Comprendre et fournir un retour d’information efficace
Le retour d’information (feedback) est un élément important de l’apprentissage qui aide les stagiaires à progresser vers les normes de compétence.
| Caractéristique du Feedback | Description |
|---|---|
| Nature | Peut être une remarque positive (renforcer performance souhaitable) OU une observation indiquant comment la performance s’écarte de la norme |
| Timing | Doit être motivant et opportun (immédiat dans la mesure du possible) |
| Objectif final | À la fin de chaque séance, les stagiaires devraient bien comprendre les améliorations à apporter pour progresser |
c) Utiliser le modèle de compétence pour identifier les causes profondes
Le modèle de compétence adapté, en particulier les critères de performance, aide l’instructeur à analyser la performance et à déterminer les compétences qui ne sont pas encore maîtrisées.
Situation : Un stagiaire est régulièrement surchargé de travail et en conséquence, prend de mauvaises décisions en matière de contrôle.
❌ Approche Superficielle : L’instructeur met l’accent seulement sur la correction des mauvaises décisions.
✅ Approche CBA (avec modèle de compétence) : L’instructeur identifie les 4 CAUSES PROFONDES possibles :
- Cause 1 : Le stagiaire ne fait pas usage des outils et équipements permettant d’accroître l’efficacité
- Cause 2 : Le stagiaire met trop l’accent sur les outils et pas assez sur la situation de circulation
- Cause 3 : Le stagiaire ne connaît pas assez les procédures normalisées et passe trop de temps à réfléchir
- Cause 4 : Le stagiaire ne prend pas les mesures pour s’assurer que la demande ne dépasse pas la capacité
💡 Morale : Si l’instructeur traite seulement les symptômes (mauvaises décisions) sans identifier la cause profonde (par ex. mauvaise utilisation des outils), le problème persistera et les progrès seront lents.
d) Reconnaître les difficultés d’évaluation des processus cognitifs
C’est l’un des défis majeurs de l’instruction ATC : on ne peut pas « voir » ce à quoi pense un stagiaire.
- La conscience de la situation
- La résolution des problèmes et la prise de décision
- Certains aspects de la gestion du trafic
- Certains aspects de la séparation et résolution de conflit
Pour surmonter ce problème, l’instructeur peut demander au stagiaire d’expliquer :
- Son plan de contrôle avant de le mettre en œuvre
- Les raisons pour lesquelles il prend ces mesures
- Ses priorités à un moment particulier
⏰ TIMING DES QUESTIONS (Point Important pour l’Examen) :
- L’instructeur devrait savoir à quel moment il convient de poser ces questions de façon à ne pas distraire le stagiaire de ses tâches
- Si impossible durant la séance : L’instructeur devrait réserver ces discussions pour la réunion-bilan ultérieure
🎯 ADAPTATION SELON LE NIVEAU (Point Crucial pour l’Examen) :
L’instructeur doit être conscient que les questions doivent être adaptées à l’étape de formation concernée :
- Nouveaux stagiaires (première formation de qualification) → Questions plus guidées, plus basiques
- ATCO expérimentés (stage de conversion nouveau système) → Questions plus sophistiquées, focus sur l’adaptation
Mieux comprendre le raisonnement du stagiaire aidera l’instructeur à déterminer si un problème lié aux compétences doit être réglé.
e) Gérer les problèmes liés à l’attitude
Les attitudes sont définies dans le modèle de compétence adapté et décrites dans le guide d’évaluation.
- Les instructeurs devraient se reporter au guide d’évaluation pour repérer les problèmes d’attitude
- Ils devraient être en mesure d’employer les techniques appropriées pour aider les stagiaires à adopter les bonnes attitudes ou à modifier leurs comportements
- Exemples de techniques : Encadrement (coaching), aptitude mentale (mental fitness)
IV. Le Rôle de l’Évaluateur (§3.5)
L’évaluateur vérifie la maîtrise réelle des compétences. Il ne se base pas sur son intuition, mais collecte des « éléments probants » (preuves observables).
🎯 Les Deux Fonctions Principales de l’Évaluateur
- a) Recueillent des éléments probants sur la performance de la compétence au moyen d’observations pratiques (et toute entrevue connexe)
- b) Analysent les éléments probants en vue de déterminer si la performance des stagiaires démontre qu’ils ont acquis ou maintenu les compétences décrites dans le modèle de compétence adapté
🔍 Concept Clé : La « Performance Intégrée »
📋 Processus Organisationnel de Validation
Une personne désignée au sein de l’organisation recueille :
- Toutes les listes de vérification des compétences
- Tous les formulaires d’évaluation des compétences qui ont été remplis
- Les résultats des examens et d’autres évaluations
Cette personne compare ces éléments avec les exigences relatives à la norme de compétence finale décrites dans le plan d’évaluation.
Si toutes les exigences sont remplies → Le stagiaire est considéré comme étant compétent.
🟨 Les Quatre Compétences Spécifiques de l’Évaluateur
a) Évaluer la performance intégrée ET chaque compétence individuelle
| Aspect | Exigence |
|---|---|
| Performance Intégrée | L’évaluateur a l’obligation de déterminer si l’intégration de toutes les compétences a été réalisée |
| Compétences Individuelles | Lorsque la performance n’atteint pas la norme, l’évaluateur devrait être en mesure de déterminer quelles compétences particulières sont inadéquates et fournir des preuves claires attestant ses conclusions |
b) Recueillir et analyser des éléments probants
Les évaluateurs obtiennent et évaluent les éléments probants permettant de déterminer si les stagiaires sont compétents. Pour le faire efficacement, l’évaluateur devrait :
- Savoir faire preuve d’un bon jugement
- Avoir des capacités d’analyse
- Être en mesure de faire la distinction entre les questions cruciales/essentielles et celles qui sont moins importantes
- Principal : Observation de la performance
- Complémentaire : Demander aux stagiaires d’expliquer certains de leurs raisonnements pour évaluer leurs aptitudes cognitives
⚠️ Précautions :
- L’évaluateur devrait être capable de mener ces échanges avec tact
- Déterminer quel est le moment le plus approprié pour poser ces questions
- Être conscient des effets que peuvent avoir les observations et échanges personnels pendant les évaluations
💡 Alternative : Ces questions peuvent être posées au cours d’une entrevue consacrée à cette fin ou dans le cadre d’une réunion-bilan suivant une séance de formation pratique.
L’évaluateur devrait utiliser les éléments probants recueillis pour tirer une conclusion finale étayée sur la performance pratique du stagiaire.
c) Utiliser les outils avec maîtrise
Le plan d’évaluation décrit non seulement le moment de l’évaluation et les éléments à évaluer, mais aussi les outils à utiliser pour évaluer les compétences.
Les évaluateurs devraient avoir une connaissance SUFFISANTE du guide d’évaluation et de la liste d’évaluation des compétences pour s’assurer que durant les évaluations sommatives, ils mettent principalement l’accent sur l’observation de la performance des stagiaires et NON sur la recherche d’information sur les outils à utiliser ou sur leur mode d’emploi.
En clair : L’évaluateur doit connaître les outils PAR CŒUR avant l’évaluation, pas les consulter pendant !
d) Faire le bilan de manière constructive
Les évaluations, en particulier les évaluations sommatives, peuvent être une expérience stressante pour les stagiaires.
L’évaluateur devrait néanmoins être capable de faire le bilan avec le stagiaire d’une manière qui l’incite à :
- Garder une attitude positive
- Maintenir la volonté de continuer à apprendre et à faire des progrès
⚠️ Cas Difficiles (Point Important pour l’Examen) :
Dans certains cas, particulièrement lorsque la performance du stagiaire est très inférieure à la norme, l’évaluateur devrait :
- Prendre en compte les aspects humains lorsqu’il fait des commentaires difficiles
- Prendre soin de donner un retour d’information positif ET justifié (ne pas être que négatif !)
- S’assurer que le stagiaire comprend ce qu’il doit changer pour améliorer sa performance
V. Cumul des Rôles (Instructeur / Évaluateur)
C’est un point sur lequel le Doc 10056 diffère des idées reçues et des pratiques traditionnelles. Soyez vigilants pour l’examen.
Contrairement aux systèmes traditionnels qui séparent strictement les rôles, le manuel OACI stipule que :
« Dans un environnement fondé sur les compétences, la même personne PEUT être chargée de l’instruction ET de l’évaluation. »
🎯 Pourquoi est-ce autorisé en CBA ?
L’approche par compétences sécurise ce cumul grâce à plusieurs garde-fous :
| Garde-fou | Explication |
|---|---|
| Objectivité des outils | L’évaluation est basée sur des preuves définies (Guide d’évaluation), pas sur l’opinion subjective de l’instructeur |
| Observations multiples | La compétence se prouve par des observations répétées tout au long de la formation, pas seulement lors d’un examen final « couperet » |
| Traçabilité | Chaque évaluation est documentée et peut être revue par l’assurance qualité |
| Standards clairs | Les critères de performance sont définis à l’avance et connus de tous |
VI. Assurance Qualité et Documentation (§3.3)
Pour garantir l’objectivité, l’OACI exige un système d’assurance qualité (QA) robuste pour éviter les dérives (ex: un évaluateur trop sévère, un autre trop laxiste).
🔍 Les Trois Piliers de l’Assurance Qualité
| Pilier | Description |
|---|---|
| Calibration | Sessions où les évaluateurs notent une même performance pour harmoniser leurs jugements et assurer la fiabilité inter-évaluateurs |
| Traçabilité | Chaque décision doit être documentée. Sans documentation, il n’y a AUCUNE preuve de compétence. Les formulaires d’évaluation sont essentiels. |
| Révision par les Pairs | D’autres évaluateurs qualifiés examinent les évaluations pour vérifier la cohérence et la justesse des jugements |
📋 Les Outils Obligatoires
Pour garantir l’objectivité et la cohérence, tout instructeur ou évaluateur doit maîtriser trois documents essentiels :
- La référence absolue
- Décrit ce qu’on doit « voir » (comportements observables) pour valider une compétence
- Élimine les divergences d’interprétation entre instructeurs/évaluateurs
- Contient des descriptions imagées pour chaque critère de performance
- Pour s’assurer que tous les éléments ont été évalués
- Sert à consigner les résultats de chaque évaluation formative et sommative
- Le plan d’évaluation précise le nombre d’évaluations pour chaque bloc
- Fait le résumé de toutes les évaluations subies par le stagiaire
- Permet de décider si une norme de compétence intermédiaire ou finale est atteinte
- Doit être conforme au plan d’évaluation
💬 Le Feedback : Moteur de la Progression
- Immédiat — Donné le plus tôt possible après l’observation
- Basé sur des faits observés — Référence au Guide d’évaluation
- Constructif — Indique comment s’améliorer, pas seulement ce qui ne va pas
- Équilibré — Mentionne les points forts ET les axes d’amélioration
- Actionnable — Le stagiaire sait concrètement quoi faire ensuite
VII. Synthèse pour l’Examen — Points Critiques
| Vrai/Faux | Affirmation |
|---|---|
| VRAI | Un instructeur PEUT être évaluateur dans le système CBA (Doc 10056 §3.2.5) |
| VRAI | L’instructeur doit poser des questions pour évaluer le cognitif (pensée) car on ne peut pas « voir » les processus mentaux |
| VRAI | Les questions doivent être adaptées au niveau (nouveau stagiaire ≠ ATCO expérimenté) |
| VRAI | En OJT, la responsabilité de la sécurité doit être clairement établie AVANT la session |
| VRAI | La « Performance Intégrée » est l’objectif final (combiner toutes les compétences ensemble) |
| VRAI | Une personne désignée dans l’organisation collecte tous les formulaires d’évaluation |
| VRAI | L’aide durant évaluation sommative de bloc intermédiaire doit être spécifiée à l’avance dans le standard |
| VRAI | L’évaluateur doit connaître les outils d’évaluation suffisamment bien pour ne pas avoir à les consulter pendant l’évaluation |
| VRAI | Même en cas d’échec, l’évaluateur doit donner un feedback positif ET justifié |
Quand un stagiaire est surchargé et prend de mauvaises décisions, les causes possibles sont :
- Sous-utilisation des outils — Ne les utilise pas assez
- Sur-utilisation des outils — Les utilise trop, perd le big picture
- Méconnaissance procédures — Perd du temps à réfléchir
- Gestion capacité défaillante — Ne prévient pas la surcharge
P-R-C-Q-A
- Plan — Dispenser selon le plan de formation
- Retour — Comprendre et fournir feedback
- Causes — Utiliser modèle pour identifier causes profondes
- Questions — Reconnaître difficultés cognitives, poser questions
- Attitudes — Gérer les problèmes d’attitude
💡 Concepts Clés à Retenir
🎓 Instructeur = Coach
L’instructeur facilite l’apprentissage, guide la performance et dépasse la simple transmission de connaissances. Il doit avoir reçu une formation appropriée aux techniques pédagogiques CBA.
✅ Évaluateur = Garant
L’évaluateur vérifie la maîtrise réelle des compétences par collecte d’éléments probants et garantit la crédibilité du système par son objectivité.
🔄 Cumul des Rôles Autorisé
IMPORTANT : En CBA, la même personne PEUT être instructeur ET évaluateur (§3.2.5). L’objectivité est assurée par les outils standardisés, pas par la séparation des personnes.
🧠 Questions pour le Cognitif
L’instructeur doit poser des questions pour évaluer ce qu’on ne peut pas « voir » : conscience situation, raisonnement, prise de décision. Adapter selon le niveau du stagiaire !
🎯 Performance Intégrée
L’objectif final n’est pas de cocher des cases isolées, mais de vérifier la capacité à combiner toutes les compétences de manière fluide et continue.
⏰ Timing du Feedback
Le feedback doit être immédiat, motivant et opportun. Si impossible pendant la séance, le réserver pour la réunion-bilan ultérieure.
🔍 Les 4 Causes Profondes
Exemple clé : Stagiaire surchargé → chercher la cause : sous-utilisation outils, sur-utilisation outils, méconnaissance procédures, ou gestion capacité défaillante.
📋 Personne Désignée
Une personne au sein de l’organisation collecte tous les formulaires d’évaluation et les compare aux exigences pour valider la compétence finale.
📚 Maîtrise des Outils
Les évaluateurs doivent avoir une connaissance SUFFISANTE des outils pour se concentrer sur l’observation, pas sur la consultation du guide pendant l’évaluation.
⚠️ Sécurité en OJT
Lors d’évaluation sur position réelle, établir CLAIREMENT AVANT qui est responsable de la sécurité : l’évaluateur qualifié ou un instructeur tiers.
💬 Debriefing Constructif
Même en cas d’échec, donner un feedback positif ET justifié. Prendre en compte les aspects humains et s’assurer de la compréhension par le stagiaire.
🔐 Aide Spécifiée à l’Avance
L’aide durant évaluation sommative de bloc intermédiaire doit être clairement énoncée dans le standard, pas laissée à la discrétion de l’évaluateur.
📖 Principes Fondamentaux du Chapitre 3
🎯 Rôles et Responsabilités
| Acteur | Fonction Principale | Caractéristiques Distinctives |
|---|---|---|
| Instructeur | Faciliter le développement des compétences |
|
| Évaluateur | Vérifier l’atteinte de la norme |
|
🔍 Les 5 Compétences Spécifiques de l’Instructeur (§3.4)
- Plan — Dispenser l’enseignement selon le plan de formation et le matériel connexe
- Retour — Comprendre et fournir un retour d’information en temps utile et continu
- Causes — Utiliser le modèle de compétence pour identifier les causes profondes des difficultés
- Questions — Reconnaître les difficultés cognitives et poser des questions adaptées
- Attitudes — Gérer les problèmes liés à l’attitude
📊 Les 4 Compétences Spécifiques de l’Évaluateur (§3.5)
- Intégration — Évaluer la performance intégrée ET chaque compétence individuelle
- Eléments — Recueillir des éléments probants par observation et entrevues
- Outils — Utiliser les outils du plan d’évaluation avec maîtrise suffisante
- Debriefing — Faire le bilan de manière constructive qui favorise les progrès
⚖️ Deux Types d’Évaluation
| Type | Objectif | Caractéristiques |
|---|---|---|
| Formative | Vérifier l’apprentissage et donner feedback |
• Continue pendant formation • NE détermine PAS compétence • Instructeur enseigne ET évalue • Résultats consignés avec stagiaire |
| Sommative | Déterminer si norme atteinte |
• Moments précis (jalons) • Détermine « compétent/non compétent » • Généralement SANS enseignement • EXCEPTION : Aide spécifiée dans blocs intermédiaires |
🔬 L’Exemple des 4 Causes Profondes (À MÉMORISER !)
Symptôme observé : Stagiaire régulièrement surchargé → prend de mauvaises décisions de contrôle
❌ Approche superficielle : Corriger seulement les mauvaises décisions
✅ Approche CBA : Identifier la CAUSE PROFONDE parmi ces 4 possibilités :
| Cause Profonde | Description |
|---|---|
| 1. Sous-utilisation outils | Ne fait pas usage des outils et équipements permettant d’accroître l’efficacité |
| 2. Sur-utilisation outils | Met trop l’accent sur les outils et pas assez sur la situation de circulation |
| 3. Méconnaissance procédures | Ne connaît pas assez les procédures normalisées → perd temps à réfléchir |
| 4. Gestion capacité défaillante | Ne prend pas mesures pour s’assurer que demande ne dépasse pas capacité |
💡 Principe : Traiter les symptômes sans identifier la cause profonde → problème persiste et progrès sont lents
🧠 Évaluation des Processus Cognitifs
Compétences invisibles :
- Conscience de la situation
- Résolution de problèmes
- Prise de décision
- Certains aspects gestion trafic et séparation
LA SOLUTION : Techniques de Questionnement
| Aspect | Application |
|---|---|
| Quoi demander |
• Plan de contrôle avant mise en œuvre • Raisons des mesures prises • Priorités à un moment donné |
| Quand demander |
• Au moment approprié (ne pas distraire) • OU réserver pour réunion-bilan ultérieure |
| Comment adapter |
• Nouveaux stagiaires : Questions plus guidées, basiques • ATCO expérimentés : Questions sophistiquées, focus adaptation |
📋 Les Trois Outils Obligatoires d’Évaluation
| Outil | Fonction | Point Clé |
|---|---|---|
| Guide d’Évaluation (Evidence Guide) |
Décrit les comportements observables attendus pour chaque critère de performance | Connaissance SUFFISANTE pour ne pas avoir à consulter pendant évaluation |
| Liste de Vérification | S’assurer que tous les éléments sont traités et consigner résultats | Utilisée pour chaque évaluation formative et sommative |
| Formulaire d’Évaluation | Résumé de toutes les évaluations pour décider si norme atteinte | Collecté par personne désignée dans l’organisation |
🔐 Points de Vigilance pour l’Examen
- Cumul des rôles : C’est AUTORISÉ en CBA (§3.2.5), contrairement aux idées reçues
- Aide dans évaluation sommative : Possible UNIQUEMENT si spécifiée à l’avance dans le standard du bloc intermédiaire
- Questions au stagiaire : Doivent être ADAPTÉES au niveau (nouveau vs expérimenté)
- Responsabilité sécurité OJT : Doit être établie CLAIREMENT AVANT la session
- Maîtrise des outils : Connaissance SUFFISANTE = ne pas consulter pendant évaluation
- Collecte des formulaires : Faite par une PERSONNE DÉSIGNÉE dans l’organisation
- Feedback en cas d’échec : Doit inclure éléments POSITIFS aussi
✅ Exigences Générales (§3.3)
- a) Bien comprendre les principes CBA
- b) Avoir connaissance détaillée du modèle de compétence adapté et du plan d’évaluation (surtout si blocs d’apprentissage)
- c) Utiliser les outils et documents pour évaluation juste et objective
🎯 Assurance Qualité
| Méthode | Description | Objectif |
|---|---|---|
| Calibration | Évaluateurs notent même performance ensemble | Harmoniser les jugements |
| Traçabilité | Documentation systématique de chaque décision | Prouver la compétence |
| Révision par pairs | Autres évaluateurs examinent les évaluations | Vérifier cohérence et justesse |
💬 Caractéristiques du Feedback Efficace
- Immédiat — Donné le plus tôt possible après l’observation
- Informé — Basé sur faits observés et Guide d’évaluation
- Instructif — Indique comment s’améliorer concrètement
- Intégral — Mentionne points forts ET axes d’amélioration
- Implémentable — Le stagiaire sait exactement quoi faire ensuite
🎯 Objectif final : À la fin de chaque séance, les stagiaires devraient bien comprendre les améliorations à apporter pour progresser.
🔑 Formules à Retenir
Instructeur : Guide + Observe + Corrige + Questionne + Feedback
Évaluateur : Collecte Preuves + Juge Objectivement + Documente + Debriefe
Performance Intégrée : Toutes compétences combinées de manière fluide
4 Causes Profondes : Sous-outils / Sur-outils / Méconnaissance / Mauvaise gestion capacité
Adaptation Questions : Nouveau stagiaire ≠ ATCO expérimenté
Timing Feedback : Immédiat OU Réunion-bilan ultérieure
❓ Questions & Réponses
⚡ 15 Questions Stratégiques pour l’Examen — Cliquez sur chaque question pour révéler la réponse
⚠️ Question à très haut risque d’examen !
L’instructeur doit utiliser le modèle de compétence pour identifier parmi ces 4 causes :
- Cause 1 : Le stagiaire ne fait PAS usage des outils et équipements permettant d’accroître l’efficacité
- Cause 2 : Le stagiaire met TROP l’accent sur les outils et pas assez sur la situation de circulation
- Cause 3 : Le stagiaire ne connaît pas assez les procédures normalisées → perd du temps à réfléchir
- Cause 4 : Le stagiaire ne prend pas les mesures pour s’assurer que la demande ne dépasse pas la capacité
💡 Principe clé : Traiter seulement les symptômes (mauvaises décisions) sans identifier la cause profonde → le problème persistera et les progrès seront lents.
Le problème : On ne peut pas « voir » ce à quoi pense un stagiaire. Au mieux, l’instructeur peut déduire que les stratégies sont efficaces, mais sans examen approfondi, on ne peut pas savoir si les résultats sont dus à la compétence ou à la chance.
LA SOLUTION : L’instructeur doit poser des questions au stagiaire pour qu’il explique :
- Son plan de contrôle avant de le mettre en œuvre
- Les raisons pour lesquelles il prend ces mesures
- Ses priorités à un moment particulier
⏰ Timing important : Si impossible durant la séance (pour ne pas distraire), réserver ces discussions pour la réunion-bilan ultérieure.
⚠️ Point crucial du Doc 10056 : Les questions doivent être adaptées à l’étape de formation concernée.
- Nouveaux stagiaires (première formation de qualification) → Questions plus guidées, plus basiques, pour vérifier la compréhension des fondamentaux
- ATCO expérimentés (stage de conversion nouveau système) → Questions plus sophistiquées, focus sur l’adaptation et l’intégration des nouvelles procédures
💡 Principe : Une question inappropriée au niveau peut soit sous-évaluer un stagiaire avancé, soit stresser inutilement un débutant.
✅ OUI, c’est AUTORISÉ selon le §3.2.5 du Doc 10056 !
Citation importante : « Dans un environnement fondé sur les compétences, la même personne PEUT être chargée de l’instruction ET de l’évaluation. »
Justification : L’approche CBA sécurise ce cumul grâce à :
- L’objectivité des outils standardisés (Guide d’évaluation)
- Les observations multiples tout au long de la formation
- La traçabilité et documentation systématique
- Les critères de performance définis à l’avance
⚠️ PIÈGE d’examen : Beaucoup pensent que la séparation est obligatoire. C’est FAUX en CBA selon l’OACI !
Mnémotechnique : P-R-C-Q-A
- a) P-lan : Dispenser l’enseignement en se basant sur le plan de formation et le matériel connexe
- b) R-etour : Comprendre le bien-fondé du retour d’information et le fournir en temps utile et de façon continue
- c) C-auses : Utiliser le modèle de compétence adapté pour déterminer les causes profondes des difficultés
- d) Q-uestions : Reconnaître les difficultés de détection des lacunes dans les processus cognitifs (et poser des questions adaptées)
- e) A-ttitudes : Gérer les problèmes liés à l’attitude
⚠️ Point CRUCIAL pour l’examen !
Les évaluateurs devraient avoir une connaissance SUFFISANTE du guide d’évaluation et de la liste de vérification des compétences pour s’assurer que durant les évaluations sommatives, ils mettent principalement l’accent sur l’observation de la performance et NON sur la recherche d’information sur les outils ou sur leur mode d’emploi.
En clair : L’évaluateur doit connaître les outils PAR CŒUR avant l’évaluation, pas les consulter pendant !
💡 Pourquoi : Pour rester concentré sur l’observation du stagiaire, pas sur la lecture du guide.
Une personne désignée au sein de l’organisation recueille :
- Toutes les listes de vérification des compétences
- Tous les formulaires d’évaluation des compétences qui ont été remplis
- Les résultats des examens et d’autres évaluations
Cette personne compare ces éléments avec les exigences relatives à la norme de compétence finale décrites dans le plan d’évaluation.
Décision finale : Si toutes les exigences sont remplies → Le stagiaire est considéré comme étant compétent.
💡 Point important : C’est un processus organisationnel centralisé, pas laissé à chaque évaluateur individuellement.
Définition : La performance intégrée est la capacité du stagiaire à combiner toutes les compétences (techniques et comportementales) de manière fluide et continue pour gérer le trafic en sécurité.
Pourquoi c’est important :
- L’évaluation ne consiste pas à cocher des cases isolées
- Une compétence manquante brise l’intégration
- Le stagiaire doit démontrer qu’il utilise l’ensemble des compétences sans discontinuité entre elles
- L’évaluateur a l’obligation de déterminer si cette intégration a été réalisée
💡 En pratique : Un stagiaire peut être bon en communication ET en séparation séparément, mais s’il ne les intègre pas ensemble en temps réel, il n’est pas compétent.
| Aspect | Formative | Sommative |
|---|---|---|
| Objectif | Vérifier apprentissage et donner feedback | Déterminer si norme atteinte |
| Moment | Continue pendant formation | Moments précis (jalons) |
| Enseignement | Instructeur enseigne ET évalue simultanément | Généralement AUCUN enseignement |
| Résultat | NE détermine PAS la compétence | Détermine « compétent/non compétent » |
⚠️ EXCEPTION importante (§3.2.3) :
Lorsque le cours est divisé en blocs d’apprentissage comportant des normes de compétence intermédiaires, le stagiaire peut recevoir de l’aide de l’instructeur au moment des évaluations initiales.
🔑 CONDITION ABSOLUE : Cette aide doit être CLAIREMENT ÉNONCÉE dans la définition de la norme de compétence intermédiaire du bloc d’apprentissage en question.
💡 Point crucial : L’aide n’est PAS laissée à la discrétion de l’évaluateur ! Elle doit être spécifiée à l’avance dans le standard. Si ce n’est pas écrit, aucune aide ne peut être donnée.
Dans ce cas, l’évaluateur assume aussi certaines fonctions d’instruction.
RÈGLE VITALE (§3.2.4) : Il doit être clairement établi AVANT la session qui est responsable d’assurer la sécurité du trafic.
Options possibles :
- Dans la plupart des cas : Les personnes chargées de l’évaluation (si elles sont qualifiées sur la position)
- Alternative : Un autre instructeur qui observe le stagiaire sans l’évaluer
⚠️ Important : Cette décision ne peut PAS être prise pendant la session. Elle doit être claire et établie AVANT le début de l’évaluation.
💡 Pourquoi : Le stagiaire est en situation d’examen, donc sous stress, et ne peut pas assumer seul la responsabilité de la sécurité.
Le feedback doit être :
- Immédiat : Donné le plus tôt possible après l’observation (en temps utile)
- Motivant : Encourage le stagiaire à progresser
- Basé sur des faits : Référence au Guide d’évaluation (comportements observables)
- Constructif : Indique comment s’améliorer, pas seulement ce qui ne va pas
- Équilibré : Mentionne les points forts ET les axes d’amélioration
- Continu : Fourni tout au long de la formation, pas seulement à la fin
🎯 Objectif final : À la fin de chaque séance, les stagiaires devraient bien comprendre les améliorations à apporter pour progresser.
⚠️ Situation délicate nécessitant compétences en facteurs humains :
L’évaluateur devrait :
- Prendre en compte les aspects humains lorsqu’il fait des commentaires difficiles
- Prendre soin de donner un retour d’information POSITIF ET JUSTIFIÉ (ne pas être que négatif, même en cas d’échec !)
- S’assurer que le stagiaire COMPREND ce qu’il doit changer pour améliorer sa performance
- Faire le bilan d’une manière qui favorisera les progrès et maintiendra la volonté de continuer à apprendre
- Garder une attitude positive chez le stagiaire malgré l’échec
💡 Principe : L’objectif est que le stagiaire reparte avec un plan d’action clair et la motivation intacte, pas découragé.
Le personnel responsable de l’instruction et de l’évaluation devrait :
- a) Bien comprendre les principes de la formation et de l’évaluation fondées sur les compétences (pas juste une connaissance superficielle)
- b) Avoir une connaissance détaillée du modèle de compétence adapté et du plan d’évaluation. Cette exigence est particulièrement importante lorsque le plan comprend des blocs d’apprentissage et des normes de compétence intermédiaires
- c) Utiliser les outils et documents qui permettent d’assurer une évaluation juste et objective : guides d’évaluation, listes de vérification des compétences, formulaires d’évaluation
💡 Point important : Ces exigences s’appliquent AUSSI BIEN aux instructeurs qu’aux évaluateurs.
Les 3 piliers de l’assurance qualité :
- 1. Calibration des évaluateurs : Sessions où plusieurs évaluateurs notent la même performance pour harmoniser leurs jugements et assurer la fiabilité inter-évaluateurs. Objectif : éviter qu’un évaluateur soit trop sévère et un autre trop laxiste.
- 2. Traçabilité complète : Documentation systématique de chaque décision d’évaluation. Sans documentation, il n’y a AUCUNE preuve de compétence. Les formulaires d’évaluation sont essentiels pour cette traçabilité.
- 3. Révision par les pairs : D’autres évaluateurs qualifiés examinent les évaluations effectuées pour vérifier la cohérence et la justesse des jugements portés.
🎯 Objectif global : Garantir que tous les stagiaires sont évalués selon les mêmes standards, indépendamment de l’évaluateur.
