Backtesting analysis. How to assess the quality of PD models in a retail banking

The paper refers to the probability of default model validation procedure in retail banking. The author presents the idea of backtesting analysis focusing on sensitivity analysis of capital requirements under stress scenarios. The paper addresses statistical methods which can be applied in credit risk management under the backtesting exercise in retail banking. The advantages and drawbacks of specific approaches are discussed. Furthermore, the outcomes of the empirical implementation of selected methods are presented. The author considers the impact of positive asset correlation on various validation approaches, where no correlation is assumed, and proves that the zero-correlation assumptions may result in a more prudent approach. This finding was confirmed by the empirical analysis performed for retail portfolios. The research concerned PD parameters calculated for car and mortgage loans. The backtesting results revealed that PD forecasts created for mortgage portfolios underestimated credit risk during the crisis period which started in 2008. However, car loan portfolio credit risk predictions appeared to be robust.

W niniejszym artykule odniesiono się do zagadnienia weryfikacji jakości modeli służących do szacowania prawdopodobieństwa niewypłacalności w bankowości detalicznej. Autor przedstawił koncepcję analizy backtesting w świetle wrażliwości wymogów kapitałowych w odniesieniu do testowania warunków skrajnych. W artykule odniesiono się do zagadnienia weryfikacji jakości prognoz modeli służących do szacowania prawdopodobieństwa niewypłacalności. Przedstawiono i omówiono wyniki wybranych metod. Autor omówił również wpływ dodatniej korelacji aktywów na uzyskane wyniki. Wykazał, że założenie zerowej korelacji może skutkować bardziej konserwatywnymi wynikami. Ustalenie to potwierdzono przez analizę empiryczną przeprowadzoną dla portfeli detalicznych. Badanie dotyczyło parametrów PD szacowanych dla portfeli kredytów samochodowych oraz hipotecznych. Otrzymane wyniki wykazały, że prognozy PD opracowane dla portfela kredytów hipotecznych niedoszacowują ryzyko kredytowe. Prognozy ryzyka kredytowego dla portfela kredytów samochodowych okazały się trafne.