18****06
2022-10-01 13:11on going monitoring…這段能否詳細(xì)解釋一下,或者舉個例子
所屬:FRM Part II > Operational Risk and Resiliency 視頻位置 相關(guān)試題
來源: 視頻位置 相關(guān)試題
1個回答
姚奕助教
2022-10-09 13:43
該回答已被題主采納
模型上線使用后,需要不停地對它進(jìn)行監(jiān)控,確保及時發(fā)現(xiàn)模型可能存在的問題,這就叫持續(xù)監(jiān)控(ongoing monitoring),分成兩個工作:
1、基準(zhǔn)測試(benchmarking):再找一套模型或者數(shù)據(jù),同時跑,然后和在運(yùn)行的模型進(jìn)行比較,看哪個模型的效果更優(yōu)。
2、持續(xù)監(jiān)控:就是用系統(tǒng)化的方式持續(xù)監(jiān)控模型的一些表現(xiàn)指標(biāo)(比如每天監(jiān)測),及時發(fā)現(xiàn)一些早期的問題,以作為觸發(fā)全面驗(yàn)證的導(dǎo)火線。
最后一段講到,持續(xù)監(jiān)控不只是要看模型自動跑出來的結(jié)果,還要看人工對于模型結(jié)果推翻的情況,為什么不認(rèn)可模型結(jié)果?推翻了多大的程度?這些都要關(guān)注和分析。
