Qu’est-ce que la gestion des risques liés aux modèles ?

Un modèle est une approche, une méthode ou un système quantitatif qui traite les données d’entrée et produit des estimations quantitatives.¹ Les modèles sont généralement appliqués pour prendre des décisions stratégiques, déterminer les opportunités d’affaires et les risques, élaborer des stratégies et gérer les opérations de l’entreprise.

Les institutions financières, par exemple, s’appuient sur une gamme de modèles pour la tarification, l’évaluation, la détection et la prévention de la fraude et du blanchiment d’argent, entre autres services financiers. Cependant, l’utilisation de modèles ne va pas sans risques. C’est pourquoi la gestion du risque de modèle (MRM) est un sujet crucial pour les entreprises.

La crise financière mondiale de 2007-2008, par exemple, a été en partie attribuée à des modèles de valeur à risque (VaR) erronés, qui estimaient les pertes futures que les investissements pourraient subir.² En 2012, la débâcle de la banque JPMorgan Chase, la « baleine de Londres », s’est chiffrée par une perte de quelque 6 milliards de dollars et près d’un milliard de dollars d’amendes.³ Cette situation a été due en partie à une erreur de tableur dans les calculs du modèle, qui a entraîné une sous-estimation du risque.⁴ 

En 2021, la société de marché immobilier Zillow a enregistré une dépréciation de ses stocks de 304 millions de dollars et a prévu de réduire d’un quart ses effectifs après l’échec de son projet d’achat de logements, en partie dû à l’incapacité de son modèle d’évaluation des prix à prédire avec précision les prix des logements.⁵

Le risque de modèle peut avoir diverses origines :

Non gérés, les risques liés aux modèles peuvent avoir des conséquences désastreuses sur les finances, les opérations et la réputation de l’entreprise. Pour être efficace, la gestion des risques liés aux modèles nécessite un cadre qui prenne en compte les risques à chaque étape du cycle de vie du modèle.

La gestion du risque de modèle implique également le respect des directives réglementaires. Aux États-Unis, par exemple, la Réserve fédérale et l’Office du contrôleur de la devise (OCC) ont publié des directives de supervision sur la gestion des risques liés aux modèles, qui servent de référence pour un cadre des exigences.

Voici six étapes courantes d’élaboration d’un cadre efficace de gestion du risque de modèle :

L’identification des risques est la première étape de la gestion du risque de modèle. Il s’agit de réaliser un inventaire des modèles et de définir les risques associés à chacun d’entre eux.

L’étape suivante consiste à mesurer et à évaluer les risques liés aux modèles. L’entreprise peut mettre au point un système d’évaluation qui classe les risques selon des critères comme la priorité, la probabilité et la gravité.

Outre la mesure du risque de modèle individuel, les entreprises peuvent également prendre en compte les risques agrégés. Le risque de modèle global fait référence aux risques liés aux dépendances et aux interactions entre différents types de modèles. Par exemple, les résultats d’un modèle de diagnostic médical peuvent être intégrés à un modèle de prédiction de traitement des patients. Si le modèle de diagnostic est biaisé, ce biais peut se répercuter sur le modèle de prédiction, affectant ainsi les personnes susceptibles de recevoir des soins urgents.

Pour atténuer le risque, il convient de s’attaquer à ses sources et à ses causes. Voici quelques stratégies d’atténuation des risques qui peuvent être intégrées dans un cadre de gestion du risque de modèle :

• Audits et examens : les entreprises peuvent réaliser des audits sur leurs modèles en interne, ou faire appel à des experts indépendants.

• Normes : élaborer des normes pour le processus de modélisation permet de réduire les risques. On peut élaborer des normes pour la collecte de données, la conception et le développement des modèles, les tests, la documentation et l’utilisation des modèles.

Tous les risques ne peuvent pas être atténués, de sorte que les entreprises sont toujours soumises à un certain degré d’exposition au risque. C’est pourquoi il peut leur être utile de définir leur appétit pour le risque. Il s’agit du niveau de risque qu’une entreprise est prête à tolérer et peut assumer lorsqu’elle utilise des modèles.

Le processus de validation soumet un modèle à une série de problèmes pour vérifier sa qualité et ses résultats. La validation du modèle intervient après son implémentation et avant sa diffusion aux utilisateurs. La procédure englobe à la fois des approches quantitatives et qualitatives.

La validation des modèles quantitatifs comprend les stratégies suivantes :

• Le backtesting est une forme d’analyse des résultats qui utilise des données historiques réelles pour tester un modèle et évaluer ainsi sa précision et son efficacité.

• Les modèles challenger sont des modèles alternatifs développés pour défier un modèle « champion ». Les modèles champion et challenger utilisent les mêmes données, et leurs résultats sont comparés pour détecter les risques potentiels ou cachés.

• L’analyse de sensibilité vise à déterminer la manière dont la modification d’une variable donnée dans certaines conditions affecte les autres variables.

• Les tests de charge appliquent des simulations basées sur des scénarios hypothétiques ou théoriques afin de voir comment un modèle réagit.

La validation qualitative des modèles prend en compte des facteurs tels que leur adéquation à leur objectif, ainsi que leur conformité aux normes ou aux réglementations en vigueur.

La surveillance des modèles consiste à examiner en permanence les modèles pour vérifier s’ils fonctionnent toujours comme prévu et si leur niveau de performance reste satisfaisant. Cette pratique permet d’identifier tout autre risque susceptible de survenir ou encore les mises à jour nécessaires à la suite de modifications apportées aux données, aux processus ou aux réglementations.

La validation des modèles fait généralement partie du processus de surveillance continue. À ce stade, des rapports de suivi et de validation sont produits et examinés par les parties prenantes concernées afin de recommander les mesures nécessaires.

La gouvernance des modèles permet de superviser l’ensemble du processus de modélisation. Elle établit un système de propriété et de contrôle au moyen de politiques et de procédures. Une bonne gouvernance des risques liés aux modèles nécessite une équipe variée de décideurs et de parties prenantes, allant du conseil d’administration à la direction générale en passant par les propriétaires, les développeurs et les utilisateurs de modèles.

De nombreux modèles actuels utilisent l’IA et le machine learning sous une forme ou une autre, en particulier lors de la génération et des tests des modèles.

Par exemple, l’IA est couramment appliquée dans le secteur financier pour modéliser le risque de crédit, le risque de marché et le risque opérationnel. La technologie peut effectivement aider à évaluer les risques de crédit et de prêt, à créer des modèles de marché et à détecter la fraude financière et le blanchiment d’argent.

L’IA et le machine learning peuvent également être appliqués à la gestion du risque de modèle, en particulier lors de la validation des modèles (comme les tests de résistance des modèles de marché) et la surveillance des modèles en temps réel. Voici quelques algorithmes et méthodes de machine learning couramment utilisés dans la gestion du risque de modèle :

• Le clustering peut être mis en œuvre pour l’analyse de la sensibilité afin de découvrir des anomalies susceptibles d’indiquer un risque lorsque les variables sont modifiées ou lors de la simulation de scénarios spécifiques.

• Les decision trees peuvent être combinés avec les réseaux neuronaux pour surveiller les modèles de trading, par exemple en alertant les négociateurs des changements apportés aux modèles sous-jacents pendant les transactions.

• L’apprentissage profond et l’apprentissage par renforcement peuvent tous deux être utilisés pour surveiller les modèles en temps réel, détecter les problèmes et recommander des solutions automatiquement.

• Les réseaux neuronaux peuvent faciliter les procédures de tests de résistance des banques en les aidant à modéliser leurs liquidités lors de conditions économiques difficiles comme une récession.

Les logiciels de gestion du risque de modèle aident les entreprises à gérer ce risque de manière plus efficace. Ils fournissent des fonctionnalités avancées, telles que l’inventaire des modèles, le suivi et la concordance des indicateurs, des modèles et des politiques avec les différentes exigences réglementaires. D’autres outils de gestion du risque de modèle permettent également de gérer les modèles d’IA et de machine learning et intègrent des fonctionnalités telles que l’automatisation de la surveillance et de la validation des modèles.