GRA · Rischio attuariale e quantitativo
Finanza spazialeDove il capitale incontra pericolo, esposizione e transizione
Validazione quantitativa dei modelli
Quantitative models for pricing, reserving, capital and risk must be shown fit for purpose before they are relied on. Validation tests data, methods, assumptions, implementation and outcomes, and is carried out by people independent of development under professional and supervisory standards. This page sets out how quantitative model validation works, where it falls short, the evidence it uses and who decides.
Validazione quantitativa dei modelli sulla documentazione.
Validazione quantitativa dei modelli: come si sviluppa il rischio.
Back-testing, benchmarking e modelli challenger. Il dossier che segue illustra come si sviluppa il rischio, che cosa viene misurato, da dove provengono i dati, come sono modellati e chi decide.
Validation covers the whole model
Qualità dei dati, la solidità concettuale, l'implementazione, le ipotesi e i risultati devono tutti essere sottoposti a verifica. Controllare solo gli output lascia sfuggire errori che si compensano o si nascondono.
I test retrospettivi richiedono tempo
Comparing predictions with outcomes takes years for long-tail and rare risks, so validation relies on other tests in the meantime.
Indipendenza e capacità predittiva
Validators must understand the methods and have authority to require changes. Weak independence turns validation into confirmation.
Code is part of the model
Errori nei fogli di calcolo e nel codice hanno causato perdite ingenti. Test di implementazione, controllo di versione e riproducibilità fanno parte della validazione.
Esposizione, pericolo e curva di superamento.
Quali luoghi determinano la perdita in un anno grave e fino a che punto essa raggiunge la riassicurazione. Valori di progetto illustrativi.
Cosa viene misurato e con quale accuratezza.
Ogni indicatore riporta la sua unità, la sua cadenza, il tipo di fonte su cui si basa e l'etichetta di evidenza che un valore riporterebbe. Non sono mostrati valori: un programma li fornisce sotto la propria autorità.
| Indicatore | Unità | Cadenza | Tipo di fonte | Etichetta |
|---|---|---|---|---|
| Modelli validati nel ciclo | quota per livello | annuale | Registri di validazione | DICHIARATO |
| Esiti della convalida per gravità | conteggio | annuale | Registri di validazione | DICHIARATO |
| Actual-to-expected results | rapporto | annuale | Monitoraggio dell'esperienza | STIMATO |
| Scostamento di smaltimento delle riserve | per cento | annuale | Sviluppo delle riserve obbligatorie | Statistiche pubblicate |
| Errori di implementazione rilevati | conteggio | annuale | Registri di convalida e di audit | DICHIARATO |
| Modelli con codice e dati riproducibili | quota | periodico | Documentazione del modello | DICHIARATO |
Trace a shock in quantitative model validation to the balance sheet.
Assembled from the Nexus Standards area profile Insurance and reinsurance: the shocks it names, the systems and sectors that carry the loss, the controls that dampen it and the data that observe it. Pick an initiating shock and step through the cascade to see which exposures it reaches and where losses could concentrate. The Map view places the run on an example geography with open data. Every weight is a stated assumption. An exercise, not a forecast, a valuation, a rating or investment advice. To model a place of your own choosing, open the full System Builder.
Pericoli
- cicloni tropicali
- Terremoto
- Alluvione da ingorgo di ghiaccio
- Incendio boschivo
- Mareggiata (innescata a valle)
- Piogge intense (innescate a valle)
- Alluvione fluviale (innescata a valle)
- Flash flood (set off downstream)
- Mareggiata pericolosa (innescata a valle)
- Blackout diffuso (innescato a valle)
- Sfollamenti di massa (innescati a valle)
- Alluvione costiera (innescata a valle)
- Aftershock sequence (set off downstream)
- Fault surface rupture (set off downstream)
- Soil liquefaction (set off downstream)
- Slope slide (set off downstream)
- Rockfall (set off downstream)
- Tsunami (set off downstream)
Sistemi e accoppiamenti
- Assicurazione e riassicurazione
- Banche Accoppiamento
- Istituzioni di finanza per lo sviluppo Accoppiamento
- Umanitario e società civile Accoppiamento
- Agricoltura e uso del suolo Accoppiamento
Comandi
NS-0Costituzione e principiNS-3UNI dei record di rischio (grammatica, corrispondenza legacy, autorità di assegnazione)NS-9UNI contestuali (distribuzioni, istanze, istanze di programma)NS-10Politiche e clausole (obblighi leggibili dalle macchine: definizione, vincolo, valutazione e applicazione)NS-11Verifica e monitoraggio (evidenze, attestazioni, osservazione della conformità zero trust)NS-14Conformità e corrispondenza con standard esterniNRS-F3Assicurazioni, rischio di catastrofe e divari di protezioneNRS-H113Famiglia di pericoli: fragilità del sistema finanziario (NHS-1 soc.financial-system)NRS-U17Profilo di piattaforma Universe: Insurance NexusNRS-H71Famiglia di pericoli: catastrofi cosmiche e del tempo profondo (NHS-1 planet.deep-time)NRS-H65Famiglia di pericoli: superamento dei confini planetari (NHS-1 planet.boundary)NRS-F8Trasferimento del rischio parametrico e basato su indici
Osservazione
- OECD Data Explorer (incl. Creditor Reporting System, insurance and pension statistics) (listed for reference)
- Insurance statistics (listed for reference)
- USGS earthquake GeoJSON summary feeds (listed for reference)
- Direct economic loss attributed to disasters in relation to global gross domestic product (GDP)
- Direct economic loss attributed to disasters in relation to global gross domestic product
- (a) Number of commercial bank branches per 100,000 adults and (b) number of automated teller machines (ATMs) per 100,000 adults
Geografia di esempio
- Europa occidentale: 152 celle esagonali
- Intensità delle precipitazioni, ultima mezz'ora (IMERG), NASA GIBS
- Luci notturne di stanotte, blackout (VIIRS Day/Night Band), NASA GIBS
- Acque superficiali attraverso le nuvole, 30 m (radar OPERA DSWx-S1), NASA GIBS
- Carbon monoxide, smoke transport (AIRS), NASA GIBS
Da dove provengono le evidenze.
Set di dati pubblici e registri istituzionali specifici, ciascuno con la sua classe di licenza. Le fonti soggette ad accordo sono utilizzate solo alle relative condizioni e mai ripubblicate.
| Fonte | Cosa fornisce | Classe di licenza |
|---|---|---|
| IAA ISAP on models (ISAP 1A) | Standard di governance dei modelli per gli attuari | Free, IAA terms |
| Actuarial Standards Board ASOP on modelling | Standard statunitense per i modelli attuariali | Gratuito, condizioni dell'ASB |
| Financial Reporting Council Technical Actuarial Standards | UK standards including models | Gratuito, condizioni FRC |
| Orientamenti dell'EIOPA sulla convalida dei modelli interni | Aspettative di vigilanza | Gratuito, condizioni di riutilizzo dell'UE |
| Dati statutari sullo sviluppo delle perdite | Run-off delle riserve per il back-testing | Public records, terms per supervisor |
Che cosa significa la validazione quantitativa dei modelli per esposizione, perdita e capitale.
Le viste su esposizione, perdita, scenari e capitale che un responsabile del rischio, un'autorità di vigilanza o un ministero delle finanze richiederebbe, con i quadri normativi in base ai quali riferisce. Le strutture seguono la prassi di vigilanza e attuariale. I valori sono illustrativi: mai prezzi, rating o consulenza.
Esposizione e perdita per periodo di ritorno
How losses from quantitative model validation grow with severity, gross and net of reinsurance, against capital.
| Periodo di ritorno | Probabilità annua | Perdita lorda | Perdita netta | Netto, capitale = 100 |
|---|---|---|---|---|
| 1 su 10 | 0.10 | 14 | 10 | 10 |
| 1 su 50 | 0.02 | 33 | 21 | 21 |
| 1 su 100 | 0.01 | 46 | 27 | 27 |
| 1 su 250 | 0.004 | 68 | 39 | 39 |
| Perdita annua media | 3.1 | 2.2 | 2.2 |
Chi decide, e a cosa servono le evidenze.
Rischio attuariale e quantitativo prepara le evidenze. Le decisioni seguenti sono adottate dalle autorità indicate, secondo le proprie regole, e mai dalla piattaforma.
| Chi decide | La domanda | Evidenze fornite da questa pagina |
|---|---|---|
| Funzioni di validazione | Se i modelli sono adeguati allo scopo | Test results and findings |
| Chief actuaries and model owners | Quali risultanze correggere e come | Risultati e analisi d'impatto |
| Autorità di vigilanza | Whether validation meets standards | Relazioni di convalida |
| Comitati di audit | Whether validation is independent and effective | Registrazioni di governance |
Output prodotti da questo argomento
- Guide to validating actuarial and quantitative models
- Method note on reserve back-testing
- Brief on implementation risk and reproducibility
- Questions for boards on validation independence
Le domande che si pongono gli esperti.
- Is the model’s theory and design appropriate for its purpose?
- Is it implemented correctly, and do results reproduce?
- Come si confrontano le sue previsioni con risultati che non sono stati usati per costruirlo?
- How do results compare with alternative models and external benchmarks?
- In quali condizioni il modello cesserebbe di funzionare?
What validation examines.
Validation frameworks typically cover conceptual soundness, data quality, implementation, outcomes analysis and ongoing monitoring. Independence from model development is essential, because developers tend to share the model’s assumptions. Validation is proportionate to the materiality and complexity of the model.
Il back-testing confronta le previsioni con i risultati effettivi, ad esempio il numero di volte in cui le perdite hanno superato una stima del value-at-risk. Per i modelli di eventi rari il back-testing ha scarso potere, perché gli eventi di interesse si verificano di rado. Il benchmarking confronta i risultati con modelli alternativi, studi di settore o dati esterni. I modelli sfidanti (challenger), costruiti con ipotesi o metodi diversi, mostrano quanto i risultati dipendano dalle scelte di modellazione.
Sensitivity analysis and stress testing explore how outputs change with inputs and assumptions, identifying the drivers that matter most. Reproducibility, the ability to re-run a model and obtain the same result from the same inputs, is a basic requirement that versioned code and data make possible.
Governance gives validation its force. Findings must reach people with authority to restrict or stop a model’s use, and model inventories, tiering by materiality and tracking of open findings help ensure that validation results lead to action rather than sitting in reports.
Metodi e loro limiti.
Analisi dei risultati
Comparing predictions with realised outcomes; weak for rare events.
Modelli sfidanti
Comparing with alternatives to reveal model dependence.
Analisi di sensibilità
Individuare i fattori determinanti e le condizioni di guasto.
Limits: validation can show that a model is not obviously wrong, but it cannot prove that a model is right, especially for rare events and changing conditions.
Come viene studiato, e cosa i metodi non possono dire.
- 01Matematica attuarialeRiservazione con triangoli di sviluppo · Composizione del premio · Valutazione delle renditeApplicato qui
- 02Quantificazione dell'incertezza e validazione dei modelliIntervalli delle riserve · Incertezza dei parametri e dei modelli · Classificazione della sensibilitàApplicato qui
- 03Probabilità e statisticaModelli lineari generalizzati nella tariffazione · Credibilità bayesiana · Test della bontà di adattamentoApplicato qui
- 04Calcolo ad alte prestazioni, cloud ed edgeSimulazione Monte Carlo · Gestione delle versioni e riproducibilità · Controlli sul calcolo degli utenti finaliApplicato qui
Domande e risposte.
What does validation check?
Che cos'è il back-testing delle riserve?
Why does code matter for validation?
La GRA convalida i modelli?
Can a validated model still fail?
Perché i modelli challenger sono utili?
Contribuisci con evidenze da questa pagina.
Reports è la pubblicazione trimestrale del consorzio. Ciò che sai su questo tema può diventare un'evidenza, un caso o una correzione nella prossima edizione, attribuita a te e pubblicata con licenza CC BY 4.0 se si tratta di un tuo lavoro.
- E-mailPortale GW-GRAInvialo da questa paginaUn'evidenza, una correzione, un caso, un metodo, una revisione, una traduzione o un contributo a un profilo. Arriva etichettata con questa pagina, così la riceve la persona redattrice che ne è responsabile.
- ZenodoOpen depositDeposit it and submit to the communityPublish your own record on Zenodo with your ORCID iD, then submit it to the Reports community there. Curators review it; the DOI stays yours.
- ReportsGlobal Risks AllianceSee every way to contributeThe contribution types, how each is reviewed, what credit you receive, the licence and what is never accepted.
Non inviare mai dati personali, dettagli su infrastrutture sensibili o qualsiasi cosa che tu non abbia il diritto di condividere. Un contributo viene sottoposto a revisione prima dell'uso; inviarlo non conferisce diritti di paternità né editoriali, e la sponsorizzazione non compra mai un risultato.
Portate all'Alliance una questione di esposizione o di capitale.
Informazioni e richieste sono aperte oggi. Una richiesta riceve un riferimento e indica il passo successivo; candidature, pagamenti, assegnazioni di calcolo e registrazioni si aprono solo quando esistono il team, le condizioni e la capacità di revisione.
Documenti legali.
Le mappe, i dati e le cifre di questo sito sono mostrati a titolo di contesto e di informazione generale. Non costituiscono consigli, previsioni né allerte; i limiti dell'informazione sono esposti nelle Dichiarazioni di esclusione di responsabilità e nelle Note sui dati.