👨‍🔬 Calibration Expert

Évaluez les 5 métriques de confiance pour chaque scénario. L'Indice Global de Confiance est automatiquement calculé comme la moyenne des 5 métriques.

📋 Sélection du Scénario

⬅️ Retour à l'Évaluation

🔄 Établissement du Consensus - Processus Expert

Phase de Validation par les Experts - Établissement du Consensus : Suite à l'évaluation individuelle, 14 experts ont participé à un processus d'établissement de consensus pour traiter la variabilité inter-évaluateurs. Les divergences ont été analysées et résolues lors de sessions de calibration, aboutissant à un accord inter-codeur substantiel (Kappa de Cohen > 0,75) à toutes les étapes.

🎯 Objectif de ce Dashboard

Ce tableau de bord présente les résultats du processus d'établissement de consensus mené par 14 experts interdisciplinaires. Il compare les évaluations individuelles initiales avec les évaluations harmonisées suite aux sessions de calibration, montrant l'amélioration de la cohérence et de la fiabilité des jugements experts.

Résultat clé : Accord inter-évaluateurs substantiel (κ > 0,75) atteint pour l'ensemble des scénarios après le processus de consensus.

Processus : Suite à la phase d'évaluation individuelle, un processus d'établissement de consensus impliquant 14 experts a été mené pour traiter la variabilité inter-évaluateurs. Cette phase a transformé les jugements individuels en une référence collective, garantissant des critères d'évaluation cohérents au sein de l'équipe d'experts interdisciplinaire.

📐 Fiabilité Inter-Codeurs

κ > 0,75

Accord substantiel entre experts

Annotation : κ > 0,78
Révision : κ > 0,82
Évaluation : κ > 0,85

🔬 Processus de Validation par les Experts

  • Phase d'évaluation individuelle : Chaque expert évalue indépendamment les scénarios
  • Identification des divergences : Analyse systématique des évaluations divergentes
  • Sessions de calibration : Sessions ciblées pour les évaluations persistemment divergentes
  • Établissement de critères communs : Transformation des jugements individuels en référentiel collectif
  • Validation finale : Approbation consensuelle des évaluations

📊 Indice Global de Confiance: Avant vs Après

📈 Détail des 5 Métriques (Moyenne)

📈 Amélioration par Scénario

📋 Détail par Métrique et Scénario

Chargement des données de comparaison...