Gouvernance & conformité

Quand une IA agit, le résultat final ne suffit pas : garde aussi la trace du parcours

Cédric Bonetti3 min de lecture

Un document apparaît dans le bon dossier.

Parfait.

Un mail a été envoyé.

Très bien.

Une fiche a été mise à jour.

Mission accomplie.

Mais un jour, quelqu’un pose une question très simple :

« Pourquoi cette valeur est-elle ici ? »

Et soudain, le résultat final ne suffit plus.

Il faut pouvoir reconstruire ce qui s’est passé

Pas nécessairement tout le raisonnement interne d’un modèle.

Ce n’est pas le sujet.

Ce qui est utile, c’est une trace opérationnelle.

Quelle source a été utilisée ?

Quelle action a été effectuée ?

À quelle heure ?

Sur quel fichier ?

Quelle règle a été appliquée ?

Une validation humaine a-t-elle eu lieu ?

Avec ces informations, on peut déjà comprendre énormément de choses.

Sans trace, chaque incident devient une enquête

Imaginons qu’une valeur incorrecte apparaisse dans vingt dossiers.

Si aucune trace n’existe, il faut chercher :

à quel moment le problème a commencé ;

quels dossiers ont été touchés ;

quelle version du système était active ;

d’où venait la donnée.

La correction peut prendre quelques minutes.

L’enquête beaucoup plus longtemps.

La télémétrie ne conduit pas la voiture

Elle permet de comprendre ce qu’elle a fait.

C’est une différence importante.

Journaliser un système ne signifie pas surveiller chaque détail pour le plaisir.

Cela signifie conserver suffisamment d’informations pour répondre lorsque quelque chose d’inhabituel se produit.

Dans une course, personne ne regarde chaque capteur en permanence avec la même attention.

Mais lorsqu’un problème apparaît, l’historique devient précieux.

Trop de logs tue aussi les logs

Évidemment, enregistrer absolument tout peut devenir contre-productif.

Des milliers de lignes incompréhensibles n’aident pas une personne métier.

Il faut donc distinguer plusieurs niveaux.

Le détail technique peut servir à diagnostiquer une panne.

Une trace plus simple peut répondre à :

« qu’a fait le système sur ce dossier ? »

Les deux n’ont pas le même public.

La trace doit suivre l’objet métier

C’est probablement le point le plus pratique.

Si je regarde un dossier client, je veux pouvoir retrouver les actions liées à ce dossier.

Pas parcourir un immense journal technique de toute l’entreprise.

Le suivi devient alors réellement exploitable.

On peut voir :

document reçu ;

analyse effectuée ;

information extraite ;

validation demandée ;

modification confirmée ;

mail envoyé.

Tout devient beaucoup plus compréhensible.

Cela change aussi la confiance

Quand une personne sait qu’elle peut retrouver ce qui s’est passé, elle n’a pas besoin de vérifier chaque action par peur de perdre le contrôle.

C’est paradoxal.

Une meilleure traçabilité peut permettre davantage d’autonomie.

Parce qu’on sait qu’en cas de doute, le chemin reste visible.

Une automatisation devrait laisser quelques traces de pneus

Pas pour raconter chaque milliseconde.

Simplement assez pour savoir par où elle est passée.

Quand tout fonctionne, personne n’en aura peut-être besoin.

Le jour où quelque chose semble étrange, cette trace fera la différence entre :

« aucune idée »

et :

« voilà exactement où regarder ».

À lire aussi