En vertu de la loi sur l'IA de l'UE, les systèmes d'IA sont considérés à haut risque s'il s'agit d'un produit ou d'un composant de sécurité d'un produit réglementé par des lois européennes spécifiques auxquelles la loi fait référence, telles que les lois sur la sécurité des jouets et sur les dispositifs médicaux de diagnostic in vitro.
La loi énumère également des utilisations spécifiques qui sont généralement considérées comme à haut risque, notamment les systèmes d'IA utilisés :
- dans des contextes tels que ceux utilisés pour recruter des personnes, évaluer les candidatures et prendre des décisions en matière de promotion
- dans certains dispositifs médicaux
- dans certains contextes éducatifs et de formation professionnelle
- dans les processus judiciaire et démocratique, tels que les systèmes qui visent à influencer le résultat des élections
- pour déterminer l’accès aux services privés ou publics essentiels, y compris les systèmes qui évaluent l’éligibilité aux prestations publiques et les scores de crédit.
- dans la gestion des infrastructures critiques (par exemple, l’approvisionnement en eau, en gaz et en électricité, etc.)
- dans tout système d'identification biométrique non interdit, sauf pour les systèmes dont le seul but est de vérifier l'identité d'une personne (par exemple, utiliser un scanner d'empreintes digitales pour accorder l'accès à une application bancaire).
Pour les systèmes inclus dans cette liste, une exception peut être possible si le système d'IA ne pose pas une menace significative à la santé, à la sécurité ou aux droits des individus. La loi spécifie des critères, dont un ou plusieurs doivent être remplis pour qu'une exception puisse être appliquée (par exemple, lorsque le système d'IA est destiné à effectuer une tâche procédurale précise). S'il invoque cette exception, le fournisseur doit documenter son évaluation selon laquelle le système ne présente pas de risque élevé, et les régulateurs peuvent demander à voir cette évaluation. L'exception n'est pas disponible pour les systèmes d'IA qui traitent automatiquement des données personnelles pour évaluer ou prédire certains aspects de la vie d'une personne, tels que ses préférences en matière de produits (profilage), toujours considérés comme à haut risque.Comme pour la liste des pratiques d'IA interdites, la Commission européenne peut mettre à jour la liste des systèmes d'IA à haut risque à l'avenir.
Comme pour la liste des pratiques d’IA interdites, la Commission européenne est susceptible de mettre à jour la liste des systèmes d’IA à haut risque à l’avenir.