Les investisseurs peuvent disposer d'un cadre de contrôle efficace qui s'articule autour de quatre questions interdépendantes. Le niveau d'exigence devrait être adapté en fonction des conséquences de l'action assistée par l'IA. La synthèse interne ne nécessite par exemple pas les mêmes contrôles que les recommandations d'investissement, la sélection des gérants ou la communication avec les clients.
1. L'ancrage : d'où vient la réponse ?
L'ancrage consiste à vérifier si un résultat généré par l'IA repose sur des sources réelles et vérifiables, plutôt que sur de simples conjectures.
Pour une tâche aux enjeux limités, la vérification des sources peut consister à les citer et à effectuer des contrôles ponctuels. Dans le cadre d'une tâche aux enjeux plus importants, les affirmations significatives doivent pouvoir être étayées par des documents originaux ou des sources de données validées. Une réponse donnée avec assurance, mais non étayée par des preuves vérifiables, ne devrait pas influencer une décision importante.
2. La stabilité : le modèle tient-il la route si les hypothèses changent ?
La stabilité permet de déterminer si le résultat reste raisonnable lorsque les données d'entrée ou le cadre changent.
La conclusion reste-t-elle valable si l'on modifie la période considérée, les hypothèses de coûts, le groupe de référence, le scénario ou la formulation du prompt ? Si une réponse change du tout au tout à la moindre variation, elle risque d'être trop fragile pour que l'on puisse s'y fier, même si elle semble convaincante. Dans le cadre des processus d'investissement, la stabilité ne signifie pas éliminer l'incertitude. Cela signifie mettre en évidence les faiblesses avant que le résultat soit utilisé dans une phase ultérieure.
3. L'autorisation : qu'est-ce que le système est autorisé à faire ?
La gestion des autorisations consiste à déterminer ce à quoi le système d'IA est autorisé à accéder, ce qu'il est autorisé à produire ou à déclencher, et dans quels cas une validation humaine est requise.
Le même outil pourrait être autorisé à synthétiser des documents internes, rédiger une recommandation destinée à être examinée par un humain, mais il ne serait en aucun cas autorisé à envoyer des communications externes, modifier un portefeuille, accéder à des données à accès restreint ou déclencher une opération de trading sans autorisation préalable. Ces règles doivent être consignées par écrit, révisées et, dans la mesure du possible, intégrées au système par le biais de contrôles d'accès, de la conception des flux de travail et d'étapes de validation.
4. La responsabilité : qui est responsable et qui valide ?
L'ancrage, la stabilité et l'octroi d'autorisations contribuent à réduire les risques, mais ils ne suppriment pas la nécessité d'une responsabilité humaine.
À mesure que l'IA gagne en capacités, les investisseurs doivent savoir à qui incombe la responsabilité de chaque processus assisté par l'IA : qui a approuvé le cas d'utilisation, qui a vérifié le résultat, qui a validé, quels données ont été enregistrées et que se passe-t-il si le système génère une erreur.