Skip to content

GRA · Réassurance et catastrophes

Spatial financeWhere capital meets hazard, exposure and transition

Validation des modèles

Catastrophe models inform capital, price and rating decisions, so they must be shown fit for purpose. Validation tests each module against observations, compares models, challenges assumptions and documents limits. Supervisors, rating agencies and professional standards set expectations. This page sets out how catastrophe model validation works and where it falls short, the evidence it uses, and who decides.

02La question

Model validation: how the risk develops.

Incertitude, sensibilité et valeurs de référence. Le dossier ci-dessous expose comment le risque se développe, ce qui est mesuré, d'où viennent les données, comment il est modélisé et qui décide.

Mécanisme

Module-by-module testing

Hazard is compared with observed event statistics, vulnerability with claims, and the full model with historical losses. Each test covers part of the model, not all of it.

Mécanisme

Les séries courtes limitent les tests

Rare events cannot be validated against long loss histories. Validation relies on scientific plausibility and expert judgement for the tail.

Mécanisme

L'indépendance est essentielle

Validation by the team that adopted the model is weaker than independent challenge. Governance separates development, adoption and validation.

Mécanisme

Un changement de modèle bouleverse les résultats

Les mises à jour des fournisseurs peuvent modifier fortement les résultats. La gestion du changement évalue pourquoi les résultats ont évolué et si la nouvelle vision est adoptée.

03Spatial finance

Exposition, aléa et courbe de dépassement.

Quels lieux génèrent les pertes lors d'une année sévère, et jusqu'où elles remontent dans la réassurance. Valeurs de conception illustratives.

Exposition côtière dans les zones de cyclones et de séismes, à côté de la courbe de pertes qu'elle produit.Valeurs de conception illustratives, ni un résultat de modèle ni un prix.
04Indicateurs

Ce qui est mesuré, et avec quelle qualité.

Chaque indicateur porte son unité, sa périodicité, le type de source qui le sous-tend et l'étiquette de preuve que porterait une valeur. Aucune valeur n'est affichée : un programme les fournit sous sa propre autorité.

IndicateurUnitéFréquenceType de sourceÉtiquette
Pertes modélisées et pertes historiques pour les événements passésratiopar validationRapports de validationMODÉLISÉ
Change in results from model version updatesvariation en pourcentage des indicateurs cléspar mise à jourAnalyse des changementsMODÉLISÉ
Validation indépendante achevéeoui ou non, selon le modèleannuelRegistres de gouvernanceDÉCLARÉ
Modèles internes approuvés par les autorités de supervisionnombreannuelSupervisor recordsStatistiques publiées
Constats de validation en suspensnombre par niveau de gravitépériodiqueDossiers de validationDÉCLARÉ
Public model reviews completednombreannuelCommissions publiquesStatistiques publiées
05Simulateur de jumeau et de cascade

Trace a shock in model validation to the balance sheet.

Assembled from the Nexus Standards area profile Insurance and reinsurance: the shocks it names, the systems and sectors that carry the loss, the controls that dampen it and the data that observe it. Pick an initiating shock and step through the cascade to see which exposures it reaches and where losses could concentrate. The Map view places the run on an example geography with open data. Every weight is a stated assumption. An exercise, not a forecast, a valuation, a rating or investment advice. To model a place of your own choosing, open the full System Builder.

Aléas

  • cyclones tropicaux
  • Séisme
  • Inondation par embâcle
  • Feu de forêt
  • Onde de tempête (déclenchée en aval)
  • Précipitations intenses (déclenchées en aval)
  • Crue fluviale (déclenchée en aval)
  • Flash flood (set off downstream)
  • Houle dangereuse (déclenchée en aval)
  • Panne d'électricité généralisée (déclenchée en aval)
  • Déplacements massifs (déclenchés en aval)
  • Inondation côtière (déclenchée en aval)
  • Aftershock sequence (set off downstream)
  • Fault surface rupture (set off downstream)
  • Soil liquefaction (set off downstream)
  • Slope slide (set off downstream)
  • Rockfall (set off downstream)
  • Tsunami (set off downstream)

Commandes

  • NS-0 Constitution et principes
  • NS-3 UNI des enregistrements de risque (grammaire, table de correspondance héritée, autorité d'attribution)
  • NS-9 UNI contextuels (déploiements, instances, instances de programme)
  • NS-10 Politiques et clauses (obligations lisibles par machine : définition, caractère contraignant, évaluation et application)
  • NS-11 Vérification et suivi (éléments probants, attestations, observation de la conformité zero trust)
  • NS-14 Conformité et correspondance avec les normes externes
  • NRS-F3 Assurance, risque de catastrophe et déficits de protection
  • NRS-H113 Famille d'aléas : fragilité du système financier (NHS-1 soc.financial-system)
  • NRS-U17Profil de plateforme Universe : Insurance Nexus
  • NRS-H71 Famille d'aléas : catastrophes cosmiques et des temps géologiques (NHS-1 planet.deep-time)
  • NRS-H65 Famille d'aléas : dépassement des limites planétaires (NHS-1 planet.boundary)
  • NRS-F8 Transfert de risque paramétrique et indiciel

Observation

  • OECD Data Explorer (incl. Creditor Reporting System, insurance and pension statistics) (listed for reference)
  • Insurance statistics (listed for reference)
  • USGS earthquake GeoJSON summary feeds (listed for reference)
  • Direct economic loss attributed to disasters in relation to global gross domestic product (GDP)
  • Direct economic loss attributed to disasters in relation to global gross domestic product
  • (a) Number of commercial bank branches per 100,000 adults and (b) number of automated teller machines (ATMs) per 100,000 adults

Géographie d'exemple

  • Europe occidentale : 152 cellules hexagonales
  • Intensité des précipitations, dernière demi-heure (IMERG), NASA GIBS
  • Lumières nocturnes de ce soir, pannes (VIIRS Day/Night Band), NASA GIBS
  • Eaux de surface à travers les nuages, 30 m (radar OPERA DSWx-S1), NASA GIBS
  • Carbon monoxide, smoke transport (AIRS), NASA GIBS
06Sources

D'où proviennent les données probantes.

Jeux de données publics et registres institutionnels nommés, chacun avec sa catégorie de licence. Les sources fournies dans le cadre d'accords ne sont utilisées que selon leurs conditions et ne sont jamais republiées.

SourcesCe qu'elle apporteCatégorie de licence
Florida Commission on Hurricane Loss Projection Methodology standards and reportsPublic standards and acceptance reviews for hurricane and flood modelsRegistres publics
EIOPA and PRA guidance on internal model use and validationAttentes prudentielles en matière de validation des modèlesConditions libres, de l'UE et de la Bank of England
Lloyd’s catastrophe modelling guidance and minimum standardsValidation and governance expectations for managing agentsFree to read, Lloyd’s terms
ASOP de l'Actuarial Standards Board sur la modélisation des catastrophesNormes professionnelles pour l'utilisation des modèlesGratuit, conditions de l'ASB
Oasis LMF model documentationOpen model documentation enabling comparisonOpen source, terms per model
07Exposition, perte et capital

Ce que signifie la validation des modèles pour l'exposition, les pertes et le capital.

Les vues d'exposition, de pertes, de scénarios et de capital que demanderaient un responsable des risques, une autorité de contrôle ou un ministère des finances, avec les cadres dont ils relèvent pour leurs rapports. Les structures suivent la pratique prudentielle et actuarielle. Les valeurs sont illustratives : jamais des prix, des notations ni des conseils.

Exposition et pertes selon les périodes de retour

How losses from model validation grow with severity, gross and net of reinsurance, against capital.

1 sur 101 sur 501 sur 1001 sur 250brutnet de réassurance800
Période de retourProbabilité annuellePerte brutePerte netteNet, capital = 100
1 sur 100.10141010
1 sur 500.02332121
1 sur 1000.01462727
1 sur 2500.004683939
Perte annuelle moyenne3.12.22.2
Indice de pertes illustratif pour un portefeuille d'exemple (capital = 100) : la forme de probabilité de dépassement que lisent les assureurs et les superviseurs. Ni des données sur une institution, ni un prix, ni une notation.
Scénarios climatiques du NGFS · Réseau pour le verdissement du système financierIFRS S2 Informations à fournir en lien avec les changements climatiques · ISSBRecommandations de la TCFD · TCFD du Conseil de stabilité financièrePrincipes pour une gestion efficace des risques financiers liés au climat · Comité de Bâle sur le contrôle bancaire
08Décisions

Qui décide, et à quoi servent les données probantes.

Réassurance et catastrophes prépare les données probantes. Les décisions ci-dessous sont prises par les autorités désignées, selon leurs propres règles, et jamais par la plateforme.

Qui décideLa questionDonnées probantes servies par cette page
Fonctions de validation des modèlesWhether a model is fit for each intended useRésultats des tests, comparaisons et limites documentées
Conseils d'administration et comités des risquesAdopter ou non un modèle ou une version comme position de l'entrepriseConstatations de validation et analyse des changements
SuperviseursWhether to approve internal models for capitalDonnées probantes de validation et de gouvernance
Public model commissionsSi les modèles satisfont aux normes applicables aux dépôts de tarifsSoumissions de modèles et conclusions des examens

Résultats que produit ce thème

  • Guide to validating each catastrophe model module
  • Note méthodologique sur l'analyse des changements de modèle
  • Note sur la contestation indépendante et la gouvernance
  • Questions pour les conseils d'administration qui approuvent une vue de modèle
09Questions essentielles

What experts ask about validation.

  • Les modules d'aléa, de vulnérabilité et financiers reflètent-ils l'état actuel des connaissances scientifiques ?
  • How do modelled losses compare with observed losses from past events?
  • Quelles hypothèses influencent le plus fortement les résultats ?
  • Comment les résultats se comparent-ils entre différents modèles pour un même portefeuille ?
  • How should model uncertainty be communicated to decision-makers?
10Mécanismes et facteurs

Pourquoi la validation est difficile.

The events that matter most are the rarest, so there are few observations against which to test tail estimates. A model may match recent losses well but misestimate the tail. Validation must therefore test components separately, against hazard records, engineering studies and claims, as well as the model as a whole.

Sensitivity analysis shows which assumptions matter. Small changes in vulnerability functions, event frequencies or exposure data can change loss estimates significantly. Understanding these sensitivities is essential for using models responsibly.

La comparaison de modèles aide à révéler l'incertitude structurelle : si des modèles construits indépendamment divergent, ce désaccord indique le degré d'incertitude de l'estimation.

11Méthodes et données

Les méthodes et leurs limites.

  1. 01

    Component validation

    Mise à l'épreuve des modules au regard de données probantes indépendantes, à l'aide de la quantification de l'incertitude et la validation des modèles.

  2. 02

    Comparaison avec les pertes historiques

    Comparing modelled and observed losses for past events. Exposure changes complicate comparison.

  3. 03

    Analyse de sensibilité

    Faire varier systématiquement les hypothèses clés. Les interactions entre hypothèses peuvent être complexes.

  4. 04

    Intercomparaison de modèles

    Comparing outputs of different models on common portfolios. Requires shared, consistent inputs.

Validation reduces but cannot remove model uncertainty. It is an ongoing process, repeated as models and science change.

12Méthodes

Comment c'est étudié, et ce que les méthodes ne peuvent pas dire.

  1. Quantification de l'incertitude et validation des modèlesIncertitude primaire et secondaire · Classement des sensibilités · Ensembles multimodèlesAppliqué ici
  2. Théorie des valeurs extrêmes et risque de queueTarification des tranches à franchise élevée · Niveaux de retour des aléas · Dépendance de queue entre périlsAppliqué ici
  3. Génie structurel et parasismiqueVulnérabilité par classe de construction · Efficacité des codes du bâtiment · Relevés des dommages après événementAppliqué ici
  4. Sciences de la Terre et géophysiqueModèles de sources sismiques · Mouvements du sol et effets de site · Aléas secondairesAppliqué ici
13Questions

Questions et réponses.

Can a catastrophe model be validated against history?
En partie. L'aléa et la vulnérabilité peuvent être testés au regard des événements et des sinistres observés, mais les pertes rares de queue de distribution disposent de trop peu d'observations ; la plausibilité et la contestation par des experts comblent donc l'écart.
Why do model updates move results?
New science, data and methods change hazard or vulnerability. Change analysis explains which component moved results and why.
Who reviews catastrophe models publicly?
Certains organismes, comme la Florida Commission on Hurricane Loss Projection Methodology, examinent les modèles au regard de normes publiées avant qu'ils puissent étayer des dépôts de tarifs.
Does the platform validate models?
No. It studies validation methods. Validation of specific models is carried out by their users and reviewed by supervisors.
Why compare models?
Parce que le désaccord entre modèles indépendants révèle une incertitude structurelle qu'un modèle unique ne peut pas montrer.
Un modèle peut-il être entièrement validé ?
No. Validation builds confidence for a purpose, but rare-event estimates always carry uncertainty.
L'exercice Universe compare-t-il des modèles ?
A model comparison exercise for a hazard season is designed, described on the platform’s Universe page.
RapportsContribuer

Apportez des éléments de preuve depuis cette page.

Reports est la publication trimestrielle du Consortium. Ce que vous savez de ce sujet peut devenir une donnée probante, un cas ou une correction dans la prochaine édition, avec mention de votre nom et publié sous licence CC BY 4.0 lorsqu'il s'agit de votre propre travail.

Global Risks AllianceReinsurance and CatastropheFinance and Insurance ReadinessMethods and Technical
Réassurance et catastrophes

Soumettez une question d'exposition ou de capital à l'Alliance.

L'information et les demandes sont ouvertes dès aujourd'hui. Une demande reçoit une référence et indique l'étape suivante ; candidatures, paiements, allocations de calcul et inscriptions n'ouvrent que lorsque l'équipe, les conditions et la capacité d'examen existent.