モデルリスクと検証:基礎と実践
- レベル
- L2 中級
- 学習時間
- 約 24 時間(計画上の見込み)
- ステータス
- 執筆中
- 前提条件
- その領域の L1 コース、または入門レビュー
AI システムにも検証とモニタリングを拡張するための国際的な基準を、モデルリスク部門に提供します。
学習成果
- モデルリスクおよびこの分野の他の主要用語を定義し、記述式のケースで正しく用いる
- Explain model risk governance and model validation with a worked example and its source
- 分野の手法を記録のある事例に適用し、各結果をその出典とともに説明する
- 名前を挙げた事例をモデルの監視とドリフトに照らして分析し、エビデンス、日付、限界を明記する
モジュール
-
モデル・リスク・ガバナンス
- モデル・リスク・ガバナンス
- モデル検証
- モデルのモニタリングとドリフト
-
説明可能性と公平性
- 説明可能性と公平性
- サードパーティ・モデル
- 金融における生成 AI
-
Human-in-the-loop controls
- Human-in-the-loop controls
- Model inventories
-
ラボ:この分野の手法
- A model that claims a confidence level makes a testable promise about how often outcomes will exceed its figure; counting those exceptions over a test window and comparing the count with the expected distribution gives the verdict, and the verdict feeds the model's tier and its permitted use.
- 記録のある事例で手法を実践し、各結果を説明する
- 手法の出典と記載値を読む
Academy のツールを使うラボ
手法
- モデルの主張からバックテストの判定へ:期待される超過、観測された超過、その件数が入るゾーン分野ページに掲載された、出典を付した当該分野の手法を、文書化された事例で通して示します
計測ツール
ツインビルダー
- デジタルツイン・ビルダー学部の場所を 3D で構築し、レイヤーを切り替え、それぞれのクレジットと日付を確認する
地図レイヤー
- 自然事象(NASA EONET)Academy のライセンス登録簿が承認したオープンな地図レイヤー。地図ツールで読み込みます
- M4.5 以上の地震、過去 1 週間(USGS)Academy のライセンス登録簿が承認したオープンな地図レイヤー。地図ツールで読み込みます
- 市街地と居住地の範囲、2010 年(HBASE、Landsat)Academy のライセンス登録簿が承認したオープンな地図レイヤー。地図ツールで読み込みます
Foundry ルーム
- コンピテンス・ルーム、NXS-NXQモデルが、そのタスクと運用範囲に適しているかどうか
- ベンチマーク・ルーム、NXS-LAB透明なテスト条件下でのモデルの比較
Nexus Standards
教える内容
評価
- 40%
ラボの記録
記録のある事例で分野の手法を実践し、各結果をその出典と日付とともに説明する
- 40%
事例メモ
分野の手法を特定の場所または組織に適用し、エビデンスと限界を明示する
- 20%
重要用語の確認
重要用語についての短答。定義に照らして採点します
配信
- オンラインで自分のペースで学習。ラボはブラウザ内で実施
- 6 から 8 週間のコホート学習、毎週のラボ・レビュー付き
- パートナー機関と共同で、その機関自身のコースの中で提供
このコースのパートナーになる
- モジュールを共同で教え、ご自身の業務から最新の事例を持ち込む
- 独自のスケジュールとレビューで、あなたの学習者のためにコホートを主催する
- ラボを提供する:あなたの機関がオープンに公開しているデータセット、またはモデル
- 開講前にコースの内容と参考文献をレビューする
- コースを翻訳し、その事例をあなたの地域に合わせて調整する
Academy の LMS で
- Course on the learning platform
- Intermediate, 4 sections
- コホート・グループ
- A community group for each cohort of learners
- 成果
- Recorded on completion of the assessed work
参考文献 4
- Financial Stability Board, FSB finalises sound practices for the responsible adoption of artificial intelligence (AI),
- Board of Governors of the Federal Reserve System, SR 11-7: Guidance on Model Risk Management, 2011
- Basel Committee on Banking Supervision, Supervisory framework for the use of backtesting in conjunction with the internal models approach, 1996
- Bank of England PRA, SS1/23 Model risk management principles for banks, 2023