Pilote IA de 30 à 90 jours : comment passer d’une idée à une preuve mesurable dans une institution publique
· BEXTIO
Un pilote IA n’est pas une démonstration destinée à prouver que la technologie fonctionne.
Il doit vérifier si une solution précise améliore un problème précis, pour des utilisateurs précis, dans un contexte précis.
La première étape consiste à formuler une hypothèse.
Par exemple : « Un assistant documentaire fondé sur notre corpus peut réduire le temps moyen de recherche d’une procédure sans augmenter le taux d’erreur au-delà du seuil accepté. » Cette formulation change la logique du projet.
Elle oblige à définir une baseline, un groupe d’utilisateurs, un corpus, des critères de qualité et une décision attendue.
Un pilote de 30 à 90 jours peut suivre quatre périodes.
J0–J15 : cadrer.
Définir le problème, les utilisateurs, le sponsor, le périmètre, les sources autorisées, les risques, la baseline et les critères de succès.
J15–J30 : construire et tester.
Configurer le prototype, mettre en place les accès, préparer un jeu de test, vérifier la qualité des réponses et former les premiers utilisateurs.
J31–J60 : utiliser en conditions contrôlées.
Recueillir les métriques, suivre les erreurs, observer l’adoption, documenter les incidents et corriger ce qui doit l’être.
J61–J90 : évaluer et décider.
Comparer les résultats à la baseline, analyser la valeur, les risques, les coûts et la capacité de maintenance, puis prendre une décision explicite.
La décision finale peut être : arrêter, redessiner et retester, prolonger, étendre progressivement ou préparer un déploiement plus large.
Le pilote doit aussi produire des actifs durables : dossier de preuve, registre d’erreurs, jeu de test, documentation utilisateur, décisions et recommandations.
Sans ces éléments, l’institution apprend peu et risque de recommencer la même expérimentation quelques mois plus tard.
La discipline la plus importante consiste à éviter le déplacement des critères de succès en cours de route.
Si le projet ne produit pas la valeur attendue, le rapport doit le dire.
Un pilote utile peut aboutir à un arrêt.
BEXTIO considère qu’une expérimentation est réussie lorsqu’elle permet une décision mieux informée, pas seulement lorsqu’elle conduit à un déploiement.