Skip to content

GRA · アクチュアリーと定量的リスク

空間金融資本がハザード、エクスポージャー、移行と出会う場所

定量モデルの検証

Quantitative models for pricing, reserving, capital and risk must be shown fit for purpose before they are relied on. Validation tests data, methods, assumptions, implementation and outcomes, and is carried out by people independent of development under professional and supervisory standards. This page sets out how quantitative model validation works, where it falls short, the evidence it uses and who decides.

01登録

定量モデルの検証を記録として残す。

02質問

Quantitative model validation: how the risk develops.

バックテスト、ベンチマーク、チャレンジャー・モデル。以下のドシエでは、リスクがどのように展開するか、何を測定するか、データの出所、どのようにモデル化するか、誰が決定するかを示します。

メカニズム

検証はモデル全体を対象とする。

Data quality, conceptual soundness, implementation, assumptions and outcomes all need testing. Checking only outputs misses errors that cancel or hide.

メカニズム

バックテストには時間が必要です

Comparing predictions with outcomes takes years for long-tail and rare risks, so validation relies on other tests in the meantime.

メカニズム

独立性と技能

バリデータは手法を理解し、変更を求める権限を持たなければなりません。独立性が弱いと、検証は単なる追認になります。

メカニズム

Code is part of the model

スプレッドシートやコードの誤りが大きな損失を招いた例があります。実装テスト、バージョン管理、再現性は検証の一部です。

03空間金融

エクスポージャー、ハザード、超過確率曲線。

厳しい年に損失を押し上げる地域と、それが再保険にどこまで及ぶかを示します。設計値は例示的なものです。

サイクロン帯と地震帯における沿岸のエクスポージャーと、それが生み出す損失曲線。説明用の設計値であり、モデルの出力や価格ではありません。
04指標

何を、どの程度うまく測定しているか。

各指標には、その単位、更新頻度、背後にある出典の種類、値が持つことになるエビデンスのラベルが付いています。値は表示しません:プログラムが自らの権限のもとで値を提供します。

指標単位周期出典の種類ラベル
サイクル内で検証されたモデルshare by tier年次検証記録申告済み
重大度別の検証結果件数年次検証記録申告済み
Actual-to-expected results比率年次経験のモニタリング推定
準備金のランオフ乖離パーセント年次法定準備金の推移公表統計
実装エラーが見つかりました件数年次検証と監査の記録申告済み
Models with reproducible code and data割合定期的モデルのドキュメント申告済み
05ツインとカスケードのシミュレーター

Trace a shock in quantitative model validation to the balance sheet.

Assembled from the Nexus Standards area profile Insurance and reinsurance: the shocks it names, the systems and sectors that carry the loss, the controls that dampen it and the data that observe it. Pick an initiating shock and step through the cascade to see which exposures it reaches and where losses could concentrate. The Map view places the run on an example geography with open data. Every weight is a stated assumption. An exercise, not a forecast, a valuation, a rating or investment advice. To model a place of your own choosing, open the full System Builder.

ハザード

  • 熱帯低気圧
  • 地震
  • アイスジャム洪水
  • 山火事
  • 高潮(下流で誘発)
  • 強い降雨(下流で誘発)
  • 河川洪水(下流で誘発)
  • Flash flood (set off downstream)
  • 危険な高波(下流で誘発)
  • 広域停電(下流で誘発)
  • 大規模な避難(下流で誘発)
  • 沿岸洪水(下流で誘発)
  • Aftershock sequence (set off downstream)
  • Fault surface rupture (set off downstream)
  • Soil liquefaction (set off downstream)
  • Slope slide (set off downstream)
  • Rockfall (set off downstream)
  • Tsunami (set off downstream)

管理策

  • NS-0 憲章と原則
  • NS-3 リスク記録の UNI(文法、旧体系との対照、割当権限)
  • NS-9 文脈 UNI(展開、インスタンス、プログラム・インスタンス)
  • NS-10 方針と条項(機械可読な義務:定義、拘束、評価、執行)
  • NS-11 検証とモニタリング(エビデンス、証明、ゼロトラストの適合性観測)
  • NS-14 適合性と外部標準との対照
  • NRS-F3 保険、カタストロフィ・リスク、保護ギャップ
  • NRS-H113 ハザード・ファミリー:金融システムの脆弱性(NHS-1 soc.financial-system)
  • NRS-U17Universe プラットフォームのプロファイル:Insurance Nexus
  • NRS-H71 ハザード分類:地質学的時間と宇宙の大災害(NHS-1 planet.deep-time)
  • NRS-H65 ハザード・ファミリー:プラネタリー・バウンダリーの逸脱(NHS-1 planet.boundary)
  • NRS-F8 パラメトリックおよびインデックス型のリスク移転

観測

  • OECD Data Explorer (incl. Creditor Reporting System, insurance and pension statistics) (listed for reference)
  • Insurance statistics (listed for reference)
  • USGS earthquake GeoJSON summary feeds (listed for reference)
  • Direct economic loss attributed to disasters in relation to global gross domestic product (GDP)
  • Direct economic loss attributed to disasters in relation to global gross domestic product
  • (a) Number of commercial bank branches per 100,000 adults and (b) number of automated teller machines (ATMs) per 100,000 adults

例示の地理

  • 西ヨーロッパ:152 の六角形セル
  • 直近 30 分間の降雨強度(IMERG)、NASA GIBS
  • 今夜の夜間光と停電(VIIRS Day/Night Band)、NASA GIBS
  • 雲を透過した地表水、30 m(OPERA DSWx-S1 レーダー)、NASA GIBS
  • Carbon monoxide, smoke transport (AIRS), NASA GIBS
06出典

エビデンスの出所。

名前の明示された公開データセットと機関の記録。それぞれにライセンス区分があります。合意に基づく出典は、その条件のもとでのみ使用し、再公開することはありません。

出典提供するものライセンス区分
IAA ISAP on models (ISAP 1A)アクチュアリー向けモデルガバナンス標準無料、IAA 条件
Actuarial Standards Board ASOP on modellingUnited States standard for actuarial models無料、ASB の利用条件
Financial Reporting Council の Technical Actuarial Standards(技術的アクチュアリー基準)モデルを含む英国の標準無料、FRC 条件
内部モデルの検証に関する EIOPA ガイドラインSupervisory expectations無料、EU の再利用条件
法定の損害進展データバックテスト用の準備金ランオフPublic records, terms per supervisor
07エクスポージャー、損失、資本

What quantitative model validation means for exposure, loss and capital.

リスク責任者、監督当局、財務省が求めるエクスポージャー、損失、シナリオ、資本のビューと、それらが報告の根拠とする枠組み。構造は監督実務とアクチュアリー実務に従います。値は例示であり、価格、格付け、助言では決してありません。

再現期間ごとのエクスポージャーと損失

How losses from quantitative model validation grow with severity, gross and net of reinsurance, against capital.

10 年に 1 度50 年に 1 度100 年に 1 度250 年に 1 度総額再保険控除後800
再現期間年間確率総損失純損失純額、資本 = 100
10 年に 1 度0.10141010
50 年に 1 度0.02332121
100 年に 1 度0.01462727
250 年に 1 度0.004683939
年間平均損失3.12.22.2
例示のポートフォリオ(資本 = 100)の説明用損失指数:保険会社と監督当局が読む超過確率の形式です。いずれの機関のデータでもなく、価格や格付けでもありません。
NGFS 気候シナリオ · 気候変動リスク等に係る金融当局ネットワークIFRS S2 気候関連開示 · ISSBTCFD 提言 · 金融安定理事会 TCFD気候関連金融リスクの実効的な管理のための諸原則 · バーゼル銀行監督委員会
08決定

誰が決め、エビデンスが何に役立つか。

アクチュアリー・定量リスクはエビデンスを準備します。以下の決定は、指定された当局がそれぞれの規則に基づいて行うものであり、プラットフォームが行うことはありません。

誰が決定するか質問このページが提供するエビデンス
Validation functionsモデルが目的に適合しているかどうかTest results and findings
Chief actuaries and model ownersどの所見をどのように是正するか知見と影響分析
監督当局Whether validation meets standards検証報告書
監査委員会Whether validation is independent and effectiveガバナンス記録

このトピックが生み出す成果物

  • Guide to validating actuarial and quantitative models
  • Method note on reserve back-testing
  • Brief on implementation risk and reproducibility
  • Questions for boards on validation independence
09中核となる問い

専門家が問う問い。

  • Is the model’s theory and design appropriate for its purpose?
  • Is it implemented correctly, and do results reproduce?
  • そのモデルの予測は、構築に使われなかった結果とどのように比較できますか。
  • How do results compare with alternative models and external benchmarks?
  • Under which conditions would the model break down?
10メカニズム

What validation examines.

Validation frameworks typically cover conceptual soundness, data quality, implementation, outcomes analysis and ongoing monitoring. Independence from model development is essential, because developers tend to share the model’s assumptions. Validation is proportionate to the materiality and complexity of the model.

Back-testing compares predictions with realised outcomes, for example the number of times losses exceeded a value-at-risk estimate. For rare-event models, back-testing has little power, because the events of interest seldom occur. Benchmarking compares results with alternative models, industry studies or external data. Challenger models, built with different assumptions or methods, reveal how much results depend on modelling choices.

Sensitivity analysis and stress testing explore how outputs change with inputs and assumptions, identifying the drivers that matter most. Reproducibility, the ability to re-run a model and obtain the same result from the same inputs, is a basic requirement that versioned code and data make possible.

Governance gives validation its force. Findings must reach people with authority to restrict or stop a model’s use, and model inventories, tiering by materiality and tracking of open findings help ensure that validation results lead to action rather than sitting in reports.

11手法とデータ

手法とその限界。

Back-testing

結果分析

Comparing predictions with realised outcomes; weak for rare events.

ベンチマーキング

Challenger models

Comparing with alternatives to reveal model dependence.

感度

感度分析

要因と故障条件の特定。

Limits: validation can show that a model is not obviously wrong, but it cannot prove that a model is right, especially for rare events and changing conditions.

13質問

質問と回答。

検証では何を確認するのか。
Data, conceptual soundness, assumptions, implementation and outcomes, to judge whether a model is fit for its intended use.
What is reserve back-testing?
Comparing past reserve estimates with how claims actually developed, to measure reserving accuracy and bias.
検証においてコードが重要なのはなぜか。
Because implementation errors in spreadsheets and code can give wrong results even when the method is sound.
GRA はモデルを検証しますか。
いいえ。GRA はいかなるモデルも検証、承認、認証しません。検証手法に関する研究を公表しています。
Can a validated model still fail?
Yes. Validation reduces the chance of undetected errors but cannot rule out failure under conditions not seen before.
チャレンジャーモデルが有用なのはなぜか。
Because they show how much results depend on modelling choices, which a single model cannot reveal.
報告書貢献する

このページからエビデンスを提供する。

Reports はコンソーシアムの季刊刊行物です。このテーマについてあなたが知っていることは、次号でエビデンス、事例、または訂正となり得ます。あなたの名前を記し、あなた自身の著作物である場合は CC BY 4.0 で公表されます。

グローバル・リスク・アライアンス(Global Risks Alliance)アクチュアリーと定量的リスク手法と技術金融・保険の準備度
アクチュアリーと定量的リスク

エクスポージャーまたは資本に関する問いをアライアンスに持ち込む。

情報提供と問い合わせは本日から受け付けています。問い合わせには参照番号が付き、次の手順が示されます。申請、支払い、計算資源の割り当て、登録は、担当チーム、規約、審査体制が整ってから開始します。