Calibration testing
Predicted default or claim probabilities are compared with observed rates by band, using binomial and other tests suited to the sample size.
GRA · Risque lié à l'IA et aux modèles financiers
Spatial financeLà où le capital rencontre l'aléa, l'exposition et la transition
Probability and statistics underpin financial models: estimating default and claim rates, testing calibration, measuring discrimination and detecting drift. On this platform they supply the measures and tests that show whether a model is performing as intended.
Probability and statistics provide the mathematical framework for describing uncertainty and learning from data. They underpin estimation, testing and prediction in every risk discipline. In artificial intelligence and financial stability, statistical methods quantify the likelihood and uncertainty of losses across interconnected systèmes. They make the evidence behind risk decisions explicit and reproducible. The canonical description is on le STEM Commons.
Predicted default or claim probabilities are compared with observed rates by band, using binomial and other tests suited to the sample size.
Population stability and distribution distance measures are computed between periods to detect shifts in model inputs and scores.
Outcome and error rates are compared across groups with confidence intervals, so differences are not read from noise.
Les vues d'exposition, de pertes, de scénarios et de capital que demanderaient un responsable des risques, une autorité de contrôle ou un ministère des finances, avec les cadres dont ils relèvent pour leurs rapports. Les structures suivent la pratique prudentielle et actuarielle. Les valeurs sont illustratives : jamais des prix, des notations ni des conseils.
How a shock in Probability and statistics for AI and financial model risk reaches credit, market, underwriting, liquidity and operational risk, and feeds back.
Datasets and records used by probability and statistics on this platform, with the role each plays and the label its values carry. Sources are listed in le registre des sources.
| Données | Rôle | Étiquette |
|---|---|---|
| Decision and outcome records | Performance testing | OBSERVÉ |
| Score distributions | Drift detection | OBSERVÉ |
| Reference portfolios | Benchmarks | DÉCLARÉ |
Process explorer · Process
10 steps·5 étapes
Processus
Les modèles de catastrophe comportent généralement des modules d'aléa, de vulnérabilité, d'exposition et financier, et produisent des tables de pertes, la perte annuelle moyenne, des courbes de dépassement, la PML et la TVaR.
Présentation d'une norme ou d'une méthode externe, d'après ses sources publiques. Elle décrit ce que dit le cadre, et non le compte rendu d'une exécution. Elle ne montre pas que Nexus ou un partenaire exécute, certifie ou approuve une étape. Une porte est une étape de la méthode, jamais une approbation de Nexus.
Results are checked through diagnostics, cross-validation and sensitivity to assumptions. Independent replication confirms findings.
| Vérifier | Comment c'est fait |
|---|---|
| Sample size | Tests state power and minimum sample sizes |
| Multiple testing | Many simultaneous tests are corrected for chance findings |
| Out-of-sample | Performance is reported on data not used for fitting |
Inference depends on assumptions about independence, distribution and sampling that may not hold. Small or biased samples limit reliability.
Sciences des systèmes et modélisation stewards probability and statistics for the Consortium and reviews how it is applied across platforms.
Rapports is the Consortium’s quarterly publication. What you know about this subject can become evidence, a case or a correction in the next edition, credited to you and published under CC BY 4.0 where it is your own work.
N'envoyez jamais de données personnelles, de détails sensibles sur des infrastructures ni rien que vous n'avez pas le droit de communiquer. Une contribution est examinée avant utilisation ; son envoi ne confère ni qualité d'auteur ni droits éditoriaux, et un parrainage n'achète jamais une conclusion.
L'information et les demandes sont ouvertes dès aujourd'hui. Une demande reçoit une référence et indique l'étape suivante ; candidatures, paiements, allocations de calcul et inscriptions n'ouvrent que lorsque l'équipe, les conditions et la capacité d'examen existent.
Les cartes, données et chiffres de ce site sont présentés à titre de contexte et d'information générale. Ils ne constituent ni des conseils, ni des prévisions, ni des alertes ; les limites de l'information sont exposées dans les Avertissements et les Notices sur les données.
This site uses only strictly necessary cookies to work and to remember your privacy choices. Nothing loads from other companies, and we never sell or share your personal information.
This site uses only strictly necessary cookies to work and to remember your privacy choices. Nothing loads from other companies, and we never sell or share your personal information. We run no advertising. You can review your choices at any time through Privacy choices at the foot of every page.