Third party models on the record.
第三者モデル: リスクがどのように進展するか。
ベンダー依存とデューデリジェンス。以下のドシエは、リスクがどのように発展するか、何を測定するか、データの出所、モデル化の方法、そして誰が判断するかを示します。
限られた透明性
Vendors protect their methods as trade secrets. Firms may get documentation and performance reports but not code, data or training details, which limits validation.
Shared models, shared errors
多くの企業が同じベンダーのモデルを使うと、その誤りが全社に同時に及び、市場や信用供給が一斉に動くことがある。
Updates change behaviour
Vendors update models and data on their own schedules. Without notice and change analysis, a firm’s validated model can change silently.
Validation by outcomes
Where internals are hidden, firms validate through benchmarking, outcome analysis and testing on their own data, which needs time and data.
モデル・リスクのライフサイクル。
このテーマを追跡するためにチームが使う画面:その指標、状態、決定。名前は例であり、値はイメージです。
モデル・リスクのライフサイクル
第三者モデル · モデル目録 · 委員会 8
ライフサイクル
- 目録登録済み
- 開発文書化済み
- 検証する独立
- 承認する委員会
- 実施統制
- 監視閾値
- 審査年次
- 廃止廃止
モデル
| MD-709 PD retail | ティア 1 | 9 か月 | 1 | 期限超過 |
| MD-561 LLM による苦情のトリアージ | ティア 1 | 決して行わない | 0 | 未検証 |
| MD-601 IFRS 9 staging | ティア 1 | 3 months | 0 | 承認済み |
| MD-088 marketing propensity | Tier 3 | 14 か月 | 1 | 承認済み |
検証の範囲
- 概念上の健全性
- 進行中
- 結果分析
- 保留中
- ベンチマーキング
- 保留中
- 利用上の制限
- 人間によるレビューが必要
何を、どの程度うまく測定しているか。
各指標には、その単位、更新頻度、背後にある出典の種類、値が持つことになるエビデンスのラベルが付いています。値は表示しません:プログラムが自らの権限のもとで値を提供します。
| 指標 | 単位 | 周期 | 出典の種類 | ラベル |
|---|---|---|---|---|
| インベントリ内のサードパーティ製モデル | 階層別の件数 | 年次 | モデル一覧 | 申告済み |
| 完全な文書を備えたベンダーモデル | 割合 | 年次 | ベンダー管理の記録 | 申告済み |
| ベンダーによるモデル変更の通知 | 件数 | 年あたり | ベンダーからの通知 | 報告値 |
| Third-party models validated on own data | 割合 | 年次 | 検証記録 | 申告済み |
| Concentration of vendor model use across firms | share of firms using top vendors | 定期的 | 監督当局による調査 | 報告値 |
| Contracts with model change notice clauses | 割合 | 定期的 | 契約レビュー | 申告済み |
サードパーティ・モデルが、エクスポージャー、損失、資本にとって何を意味するか。
リスク責任者、監督当局、財務省が求めるエクスポージャー、損失、シナリオ、資本のビューと、それらが報告の根拠とする枠組み。構造は監督実務とアクチュアリー実務に従います。値は例示であり、価格、格付け、助言では決してありません。
波及経路
How a shock in third party models reaches credit, market, underwriting, liquidity and operational risk, and feeds back.
エビデンスの出所。
名前の明示された公開データセットと機関の記録。それぞれにライセンス区分があります。合意に基づく出典は、その条件のもとでのみ使用し、再公開することはありません。
| 出典 | 提供するもの | ライセンス区分 |
|---|---|---|
| ベンダーおよび第三者モデルに関する SR 11-7 ガイダンス | Expectations for using external models | パブリックドメイン |
| Interagency guidance on third-party relationships (United States banking agencies) | Third-party risk management expectations | パブリックドメイン |
| AI の金融安定への影響に関する FSB 報告書 | Third-party and concentration risks from AI | 無料、FSB の利用条件 |
| プロバイダーおよびデプロイヤーに対する EU AI 法上の義務 | AI 提供者と利用者の間の職務分担 | 無料、EU の再利用条件 |
| Vendor model documentation and performance reports | 情報ベンダーが利用者に提供する情報 | 独自仕様、条件はベンダーごと |
| 誰が決定するか | 質問 | このページが提供するエビデンス |
|---|---|---|
| モデルリスクの機能 | 第三者モデルを検証し承認する方法 | Documentation, benchmarks and outcome testing |
| 調達と法務 | どの透明性条項と変更条項を求めるべきか | Contract practice and regulatory expectations |
| 監督当局 | ベンダーモデルの利用が適切に管理されているか、また集中が問題となるか | 調査およびレビューの結果 |
| ベンダー | 提供すべき文書と通知 | 顧客要件および規制要件 |
このトピックが生み出す成果物
- 企業が内部を検査できないモデルを検証するためのガイド
- ベンダーモデルと基盤モデルへの集中に関するブリーフ
- ベンダー更新の変更分析に関する手法ノート
- Questions for procurement on model transparency terms
専門家が問うこと。
The questions concern responsibility for models one did not build.
- 当該機関は、ベンダーのモデルの仕組みを、その利用を検証できる程度に十分理解していますか。
- What documentation, testing evidence and access does the vendor provide?
- ベンダーのモデル更新は、どのように通知、テスト、承認されますか。
- 同じベンダーに依存している機関はいくつあり、そのベンダーが機能不全に陥ったり変更されたりした場合に何が起こるか。
- 必要な場合、機関はモデルから撤退する、または別のモデルに置き換えることができますか。
メカニズムと要因。
Vendors often protect their models as intellectual property, limiting the transparency available to users. Institutions must still validate the model’s use for their own purposes, typically through outcome testing, benchmarking and contractual rights to documentation. Updates by the vendor can change model behaviour without the institution’s knowledge.
集中は業界全体の懸念事項である。多くの機関が同じベンダーのモデルや AI プロバイダーを利用すると、欠陥、障害、変更がそれらの機関に同時に影響し、相関した誤りと運用上の依存関係が生じる。これは単独の機関では管理できない。
どのように研究され、手法がどこで止まるか。
| 手法またはデータ | 表示内容 | 限界 |
|---|---|---|
| Vendor due diligence | Vendor capability, controls and transparency | Limited by vendor disclosure |
| Outcome and benchmark testing | Performance on the institution’s own data | Does not reveal internal logic |
| 契約および出口分析 | Rights to information, notification and exit | 権利の行使が難しい場合がある |
| Concentration mapping | Shared dependencies across the sector | Requires aggregated information |
どのように研究され、手法が言えないことは何か。
質問と回答。
Who is responsible for a vendor model’s risk?
How can a firm validate a model it cannot see?
Why does vendor concentration matter?
Does buying a model transfer its risk to the vendor?
Why is vendor concentration a stability concern?
機関はモデルベンダーから何を入手できるべきか。
Does the platform rate vendors?
このページからエビデンスを提供する。
Reports はコンソーシアムの季刊刊行物です。このテーマについてあなたが知っていることは、次号でエビデンス、事例、または訂正となり得ます。あなたの名前を記し、あなた自身の著作物である場合は CC BY 4.0 で公表されます。
- メールゲートウェイ GW-GRAこのページから送信するエビデンス、訂正、事例、手法、レビュー、翻訳、プロファイルへの入力。このページのタグが付いて届くため、担当の編集者が受け取ります。
- ZenodoOpen depositDeposit it and submit to the communityPublish your own record on Zenodo with your ORCID iD, then submit it to the Reports community there. Curators review it; the DOI stays yours.
- 報告書グローバル・リスク・アライアンス(Global Risks Alliance)貢献のすべての方法を見る貢献の種類、それぞれの審査方法、受け取るクレジット、ライセンス、決して受け付けないもの。
個人データ、重要インフラの機微な詳細、共有する権利のないものは決して送らないでください。寄稿は利用前にレビューされます。送付によって著作者としての権利や編集上の権利が生じることはなく、スポンサーシップで調査結果を買うことは決してできません。
エクスポージャーまたは資本に関する問いをアライアンスに持ち込む。
情報提供と問い合わせは本日から受け付けています。問い合わせには参照番号が付き、次の手順が示されます。申請、支払い、計算資源の割り当て、登録は、担当チーム、規約、審査体制が整ってから開始します。
法的文書。
このサイトの地図、データ、図表は、背景と一般的な情報として示すものです。助言、予報、警報ではありません。情報の限界は免責事項とデータに関する注意事項に記載しています。