Bonnes pratiques pour l’utilisation des résultats du cadre d’évaluation rapide (REF) de CMIP

Comprendre ce que les résultats du REF nous disent – et ne nous disent pas   

 

En quoi consiste ce guide? 

Ce document (disponible uniquement en anglais pour le moment) fournit des conseils pratiques sur la manière d’interpréter et d’utiliser les résultats du cadre d’évaluation rapide de CMIP (CMIP REF) de manière rigoureuse et responsable. Le REF est un outil développé par la communauté scientifique qui propose des diagnostics standardisés, des notes de performance et des visualisations afin d’aider les utilisateurs à comparer plus efficacement les modèles climatiques.  

À mesure que l’utilisation des évaluations des modèles CMIP s’est étendue – de la recherche à des domaines tels que les évaluations du GIEC, les analyses nationales des risques climatiques, la planification de l’adaptation et les services climatiques –, les résultats du REF sont de plus en plus utilisés pour étayer des décisions concrètes. Ce guide aide les utilisateurs à comprendre ce que les résultats du REF peuvent et ne peuvent pas nous apprendre, et comment ils doivent être appliqués de manière appropriée. 

Pourquoi est-ce nécessaire?

Les diagnostics REF sont puissants, mais ils posent plusieurs problèmes s’ils sont sortis de leur contexte. En particulier, les scores de performance synthétiques peuvent être considérés à tort comme des classements définitifs de la qualité des modèles, alors qu’ils sont en réalité des indicateurs relatifs et dépendants du contexte, reflétant le comportement des modèles pour des variables, des régions ou des processus spécifiques.  

L’utilisation des résultats REF s’est développée plus rapidement que l’élaboration de normes communes et de recommandations d’interprétation. Le présent document comble cette lacune en exposant les principes clés, les mises en garde et les questions que les utilisateurs doivent garder à l’esprit avant de tirer des conclusions à partir des résultats REF.

À qui s’adresse ce guide?

Ce guide s’adresse à un large éventail d’utilisateurs, notamment :  

  • Les climatologues et les développeurs de modèles  
  • Les chercheurs utilisant les résultats de CMIP à des fins d’analyse ou de synthèse  
  • Les auteurs et les équipes d’évaluation du GIEC  
  • Les professionnels impliqués dans l’évaluation des risques climatiques, l’adaptation et la planification de la résilience  
  • Les prestataires de services climatiques  
  • Les autres utilisateurs d’outils d’évaluation de modèles  

Il est particulièrement pertinent pour les utilisateurs qui ne sont pas directement impliqués dans l’élaboration de cadres d’évaluation de modèles, mais qui utilisent les résultats du REF pour étayer des travaux scientifiques ou décisionnels.

Que fournit ce guide?  

Ce document énonce les grands principes d’une utilisation responsable des résultats du REF, ainsi que des pistes de réflexion et des listes de contrôle simples destinées à faciliter une prise de décision éclairée. Parmi les thèmes clés, on peut citer :  

  • Le rôle prévu du REF en tant qu’outil de sélection et de comparaison, et non en tant qu’arbitre final de la qualité des modèles  
  • Le lien entre les scores récapitulatifs et les diagnostics sous-jacents qu’ils résument  
  • L’importance de tenir compte des incertitudes dans les ensembles de données de référence  
  • Les compromis en matière de performance des modèles entre différents phénomènes et processus  

Plutôt que de proposer des flux de travail ou des applications spécifiques, le guide vise à aider les utilisateurs à poser les bonnes questions, à comprendre les limites et à éviter toute interprétation excessive. 

Quel est la portée de ce document et quelles sont les prochaines étapes? 

Ce guide constitue une première étape vers un accompagnement plus complet en faveur d’une utilisation responsable des résultats du REF. Les travaux futurs s’appuieront sur ces bases en fournissant des exemples concrets et des cas d’utilisation, notamment en montrant comment les résultats du REF peuvent servir de point de départ pour évaluer si des modèles sont adaptés à un usage particulier.

Comment cette ressource a-t-elle été élaborée? 

Ce document a été élaboré en collaboration avec l’équipe spéciale «Utilisation responsable des données» du RIfS–CMIP, l’équipe de travail «Évaluation comparative des modèles» et les contributeurs impliqués dans le développement du REF lui-même. Il s’appuie sur les meilleures pratiques établies en matière d’évaluation des modèles climatiques et sur la littérature scientifique au sens large, avec la contribution du comité directeur de CMIP et de communautés d’utilisateurs telles que les auteurs du GIEC.

Veuillez citer ce document comme suit:

Morrison, M. A., Daba, D., Abrha, H., Chung, C., Samanta, D., Hoffman, F. M., Swaminathan, R., Brands, S., and Bonou, F. (2026), Best Practice for Using the CMIP Rapid Evaluation Framework Output. https://doi.org/10.5281/zenodo.18775782.