Skip to content

GRA · AI와 금융 모델 리스크

공간 금융자본이 재해, 노출, 전환과 만나는 곳

모형 모니터링과 드리프트

출시 시점에 검증된 모델도 고객, 상품, 시장, 데이터 파이프라인이 변하면 나중에 실패할 수 있습니다. 모니터링은 성능, 입력 분포, 결과를 추적하여 드리프트를 감지하고 검토를 촉발합니다. 자주 재학습하는 머신러닝 모델에는 고유한 리스크가 추가됩니다. 이 페이지는 드리프트가 발생하는 방식, 모니터링이 이를 감지하는 방법, 사용하는 측정 지표, 그리고 모델을 변경하거나 중단해야 할 때 누가 결정하는지를 설명합니다.

01등록

Model monitoring and drift on the record.

02질문

Model monitoring and drift: how the risk develops.

시간에 따른 변화와 검토 기준. 아래 자료집은 리스크가 어떻게 전개되는지, 무엇을 측정하는지, 데이터가 어디서 오는지, 어떻게 모델링되는지, 누가 결정하는지를 설명합니다.

메커니즘

Data drift

새로운 고객 세그먼트가 유입되거나 상품이 바뀌거나 상위 시스템 이 필드를 변경하면 입력 데이터의 분포가 달라집니다. 모델은 학습하지 않은 데이터를 접하게 됩니다.

메커니즘

Concept drift

The relationship between inputs and outcomes changes, for example when an economic shock alters who defaults. Accuracy falls even if inputs look stable.

메커니즘

성과는 늦게 나타납니다

채무불이행과 보험금 청구는 의사결정 후 수개월 또는 수년이 지나 나타나므로 실제 성과는 늦게 알려집니다. 대리 지표와 조기 지표가 그 공백을 불확실성과 함께 메웁니다.

메커니즘

Retraining adds risk

Frequent retraining can absorb drift, and it can also learn from feedback loops or corrupted data. Each retrained version needs controls proportionate to its use.

03노출, 손실 및 자본

What model monitoring and drift means for exposure, loss and capital.

리스크 책임자, 감독 당국이나 재무부가 요구할 익스포저, 손실, 시나리오와 자본 보기와 이들이 보고의 기준으로 삼는 체계. 구조는 감독과 보험계리 실무를 따릅니다. 값은 예시이며 가격, 등급이나 조언이 결코 아닙니다.

전이 경로

How a shock in model monitoring and drift reaches credit, market, underwriting, liquidity and operational risk, and feeds back.

Channel structure after the Basel Committee’s work on climate-related risk drivers and transmission channels; links shown are typical paths, not estimated exposures.
NGFS 기후 시나리오 · 녹색금융협의체IFRS S2 기후 관련 공시 · ISSBTCFD 권고안 · 금융안정위원회 TCFD기후 관련 금융 리스크의 효과적 관리 원칙 · 바젤은행감독위원회
04지표

측정되는 것과 그 정확도.

각 지표에는 단위, 주기, 그 뒤의 출처 종류, 값에 붙을 근거 표시가 있습니다. 값은 표시하지 않습니다. 값은 프로그램이 자체 권한으로 제공합니다.

지표단위주기출처 유형라벨
Population stability index by input무차원월별모니터링추정
검증 기준선 대비 성능change in discrimination or calibration월별 또는 분기별모니터링추정
임계값을 초과하는 경보 모니터링건수월별모니터링 기록관측
Models retrained in period건수분기별Model records신고됨
모델에 영향을 미치는 데이터 파이프라인 사고건수분기별사고 기록보고됨
Time from alert to remediation일per alert거버넌스 기록관측
05출처

근거의 출처.

이름이 명시된 공개 데이터셋과 기관 기록으로, 각각 라이선스 등급이 있습니다. 협약에 따른 출처는 그 조건에 따라서만 사용하며 결코 재게시하지 않습니다.

출처제공하는 것라이선스 등급
PRA SS1/23 principles on model monitoringExpectations for ongoing performance monitoring무료, 영국은행 조건
SR 11-7 on ongoing monitoring and outcomes analysisUnited States expectations퍼블릭 도메인
EBA guidelines on loan origination and monitoringMonitoring of automated credit models무료, EU 재사용 조건
Academic research on dataset shiftMethods for detecting and adapting to drift무료 열람, 이용 조건은 발행처별 상이
Bank Pillar 3 model back-testing disclosuresBack-testing results for capital models공개 기록, 은행별 조건
06결정

누가 결정하며 근거는 무엇에 쓰이는지.

AI와 금융 모델 리스크 는 근거를 준비합니다. 아래의 결정은 명시된 당국이 각자의 규칙에 따라 내리며, 플랫폼이 내리지 않습니다.

결정 주체질문이 페이지가 제공하는 근거
모델 소유자When to recalibrate, redevelop or retire a modelMonitoring results against thresholds
모형 리스크 함수What monitoring standards apply by tierPolicy and monitoring evidence
감독 기관Whether monitoring is adequate for capital and conduct models백테스트 및 검토 결과
Data owners상위 단계의 변경을 통제하는 방식Pipeline incident records

이 주제가 생산하는 산출물

  • 데이터 드리프트와 개념 드리프트 가이드
  • Method note on monitoring thresholds and alerts
  • Brief on controls for frequently retrained models
  • Questions for model owners on late-arriving outcomes
07핵심 질문

전문가가 묻는 것.

Monitoring questions ask how soon a problem will be seen.

  • Which performance measures are monitored, and how often?
  • How quickly are outcomes, such as defaults or claims, observed, and what fills the gap meanwhile?
  • 입력 데이터의 분포가 변했는가, 그리고 그것이 중요한가?
  • What thresholds trigger review, recalibration or withdrawal, and who set them?
  • How are continuously retrained models governed?
08메커니즘

메커니즘과 동인.

Data drift occurs when the distribution of inputs changes, for example a new customer segment or a change in a data source. Concept drift occurs when the relationship between inputs and outcomes changes, for example when an economic shock alters how income predicts repayment. Concept drift is more dangerous and harder to detect, because outcomes may take months or years to observe.

Feedback loops add complexity: a model’s decisions change who becomes a customer, which changes future data. Retraining can restore performance but can also absorb errors or bias, so retrained models need governance of their own.

09방법과 데이터

연구되는 방식과 방법의 한계.

방법 또는 데이터표시 내용한계
Performance tracking against outcomesAccuracy and calibration over time성과는 지연되어 나타납니다
Distribution shift statisticsChanges in input data변화가 반드시 성능 저하를 뜻하지는 않습니다
벤치마크 모델 및 챌린저 모델상대적 성과Challengers share some data limitations
Threshold and alerting frameworks에스컬레이션 시점Thresholds involve judgement
10방법

연구되는 방식과 방법이 말할 수 없는 것.

11질문

질문과 답변.

What is the difference between data drift and concept drift?
Data drift is a change in the distribution of inputs; concept drift is a change in how inputs relate to outcomes. Either can reduce model accuracy.
What is a population stability index?
A measure comparing the distribution of a variable or score between two periods, used to detect shifts in the population a model scores.
Should models retrain automatically?
Automatic retraining can keep models current but needs controls on data quality, performance checks and approval proportionate to the model’s use.
개념 드리프트는 왜 탐지하기 어렵습니까?
투입과 결과 사이의 관계 변화가 수반되고, 부도와 같은 결과는 의사결정이 이루어진 뒤 한참 지나서야 알려질 수 있기 때문입니다.
Is automatic retraining a solution?
It can help but needs governance: retrained models can absorb errors, bias or temporary conditions, and must still be tested and approved.
Does the platform monitor firms’ models?
아닙니다. GRA는 어떤 모델도 모니터링, 검증 또는 승인하지 않습니다.
보고서기여하기

이 페이지에서 증거를 기여하십시오.

Reports는 컨소시엄의 분기별 간행물입니다. 이 주제에 관해 귀하가 아는 것은 다음 호에서 근거, 사례 또는 정정이 될 수 있으며, 귀하의 이름으로 표시되고, 귀하 자신의 저작인 경우 CC BY 4.0으로 발행됩니다.

글로벌 리스크 얼라이언스(Global Risks Alliance)AI와 금융 모델 리스크방법 및 기술기하급수 기술
AI와 금융 모델 리스크

익스포저나 자본에 관한 질문을 얼라이언스에 가져오십시오.

정보와 문의는 오늘부터 열려 있습니다. 문의에는 참조 번호가 부여되고 다음 단계가 안내됩니다. 신청, 결제, 컴퓨팅 할당, 등록은 해당 팀, 약관, 심사 역량이 갖추어졌을 때만 열립니다.