← Retour au journal

Ce qui change lorsque le système agit

Un modèle classique se contentait de produire une sortie ; une mauvaise réponse restait une information à corriger. Un agent muni d'outils peut envoyer un message, modifier une base, lancer un paiement, accéder à des fichiers. Le périmètre du dommage potentiel s'élargit considérablement. Sécuriser un agent, c'est d'abord borner ce qu'il a le droit de faire : quels outils lui sont ouverts, selon quelles conditions, avec quelles confirmations avant une action irréversible. Ces décisions relèvent de la conception du système autant que de la sécurité informatique classique. Le réflexe utile consiste à supposer l'erreur possible et à réduire ce qui pourrait en découler, plutôt qu'à chercher une invulnérabilité hors de portée.

L'autonomie introduit aussi une chaîne de confiance. L'agent s'appuie sur des instructions, des documents, des données fournies à la volée. Si l'une de ces entrées est trompeuse, le comportement du système peut être détourné sans qu'aucune faille logicielle classique n'ait été exploitée. Le travail du spécialiste consiste à cartographier ces points d'entrée, à évaluer ce qui les rend manipulables et à poser des garde-fous — filtrage, séparation des privilèges, limitation des effets — qui réduisent la portée d'un détournement avant qu'il ne produise des conséquences durables.

Les risques propres aux systèmes autonomes

Plusieurs catégories de menaces méritent une attention particulière. La manipulation d'instructions, par laquelle un contenu externe fait exécuter à l'agent autre chose que ce qui était prévu, en est la plus discutée. S'y ajoutent l'escalade de privilèges, quand l'agent obtient des accès au-delà de son mandat ; l'exfiltration, quand des données sensibles sortent par un canal légitime ; et l'accumulation d'actions anodines dont la combinaison produit un effet indésirable. Aucune de ces menaces ne se réduit à un correctif unique ; elles demandent une analyse de bout en bout.

Les réglementations rappellent l'enjeu. Le RGPD encadre les données personnelles que les agents manipulent souvent ; le règlement européen sur l'intelligence artificielle impose, pour certains systèmes, une gestion des risques et une surveillance de la robustesse, avec une application échelonnée entre 2025 et 2026. Sécuriser un agent ne relève donc pas seulement de la technique : il faut documenter les mesures prises, conserver les traces et pouvoir expliquer pourquoi un risque résiduel jugé acceptable l'est effectivement, dans un contexte donné et à une date donnée.

Les compétences d'un spécialiste sécurité des agents IA

Le socle reste celui de la sécurité des systèmes : gestion des accès, chiffrement, journalisation, analyse des dépendances. Par-dessus, il faut comprendre le fonctionnement des modèles, car leurs faiblesses ne ressemblent pas à celles d'un logiciel ordinaire : un modèle peut être plausible et faux, obéissant à une instruction mal placée. Le spécialiste doit aussi savoir concevoir des tests adversariaux, c'est-à-dire éprouver un agent avec des intentions hostiles. Cette démarche, proche de l'esprit critique, s'éloigne du réflexe de simple application de correctifs. Cette démarche suppose une certaine créativité : il faut imaginer comment un utilisateur mal intentionné, ou simplement un contenu piégé, pourrait faire exécuter à l'agent ce qu'il n'aurait pas dû faire.

La dimension organisationnelle complète le tout. Définir qui peut déployer un agent, quel niveau de revue s'applique, comment un incident est signalé et traité : ces règles déterminent souvent la sécurité réelle plus que n'importe quel outil. Un agent bien protégé sur le plan technique mais déployé sans procédure reste vulnérable aux usages imprudents. Le spécialiste participe donc à l'écriture de ces règles et veille à ce qu'elles soient praticables, car une procédure trop lourde finit toujours par être contournée.

Se préparer à sécuriser des agents

Les profils concernés viennent de la sécurité informatique, du développement, de l'architecture ou de la gouvernance des risques. Les parcours dédiés apportent les notions manquantes : comportement des modèles, attaques propres aux agents, méthodes d'évaluation, articulation avec les cadres réglementaires. La difficulté du sujet tient à sa jeunesse : les bonnes pratiques évoluent rapidement, et une formation ne peut enseigner que des principes et une méthode de travail, jamais un catalogue définitif de solutions. L'enjeu de ces formations n'est pas de fournir une liste de vulnérabilités à jour, mais d'installer une manière de poser les bonnes questions face à un système nouveau.

Un programme utile montre comment raisonner face à un système inconnu : identifier les actifs à protéger, imaginer les chemins de détournement, hiérarchiser les mesures selon leur effet réel. Il gagne à s'appuyer sur des cas concrets et sur l'analyse de situations où quelque chose s'est mal passé. Ce réflexe d'analyse, plus que la connaissance de tel ou tel outil, forme un spécialiste capable de s'adapter à des technologies qui n'existaient pas encore au moment de sa formation.

Aller plus loin

Le parcours « Spécialiste sécurité des agents IA » de Cabinet Mara articule sécurité des systèmes, comportement des modèles et cadres réglementaires à travers des exercices d'analyse. Le catalogue des 31 formations permet d'ajouter les modules utiles sur la gouvernance et l'architecture.

Vous voulez maîtriser ce sujet en pratique ?

Cabinet MARA forme en ligne, sur des cas réels, avec des modules courts et un suivi de progression.

Voir la formation liée Les 31 formations