Publié le
Mis à jour le
Ce guide montre comment concevoir un pilote IA qui débouche sur une décision, puis ce que le déploiement ajoute. Il suppose que vous avez déjà choisi le cas d’usage : le guide prioriser les cas d’usage IA traite ce choix.
À retenir
Un pilote sert à décider : arrêter, corriger ou étendre.
Écrivez avant de commencer la situation de référence, le critère de succès et le critère d’arrêt.
Le passage à l’échelle ajoute des coûts que le pilote ne montre pas : budget récurrent, support, formation, maintenance.
À quoi sert un pilote IA ?
Un pilote IA sert à décider s’il faut étendre, corriger ou arrêter un usage, à partir de mesures prises dans le travail réel. Il diffère d’une démonstration technique : la fiche POC, pilote et passage à l’échelle précise cette distinction.
Écrivez trois éléments avant le premier jour :
la situation de référence : le temps, la qualité et le coût actuels de la tâche, mesurés sur quelques semaines ;
le critère de succès : le résultat chiffré qui justifie l’extension ;
le critère d’arrêt : le résultat qui justifie l’abandon, et la date à laquelle vous le constatez.
Sans situation de référence, vous ne pourrez comparer que des impressions. La fiche ROI d’un projet IA détaille ces notions.
Pourquoi tant de projets IA échouent-ils ?
Les échecs que décrit RAND tiennent surtout au problème posé, aux données et à l’organisation, plus qu’au modèle. Le rapport de RAND Corporation publié en août 2024 repose sur 65 entretiens avec des data scientists et des ingénieurs expérimentés. Il retient cinq causes principales :
la direction comprend ou exprime mal le problème à résoudre ;
l’organisation manque de données pour entraîner un modèle efficace ;
l’équipe s’attache à la technologie récente plutôt qu’au problème des utilisateurs ;
l’infrastructure ne permet pas de gérer les données ni de déployer ;
le problème dépasse ce que l’IA sait faire.
Les auteurs signalent un biais : leur échantillon compte surtout des ingénieurs, plus enclins à pointer les échecs de direction. Un pilote bien conçu teste justement les causes 1, 2 et 4 avant d’engager le déploiement.
Comment choisir le périmètre d’un pilote IA ?
Choisissez un périmètre représentatif du déploiement visé : plusieurs équipes, des profils variés, des cas faciles et des cas difficiles. Un pilote limité aux volontaires les plus enthousiastes risque de surestimer l’usage futur.
Les profils comptent. Brynjolfsson, Li et Raymond ont étudié 5 172 agents de support client (Quarterly Journal of Economics, 2025). L’assistant augmente de 15 % en moyenne le nombre de problèmes résolus par heure. Les gains de vitesse et de qualité se concentrent chez les agents les moins expérimentés. Mélangez donc débutants et experts, puis lisez les résultats par groupe. Choisissez enfin une durée qui couvre un cycle complet de l’activité, par exemple une clôture mensuelle. La fiche cas d’usage aide à délimiter la tâche testée.
Organisation & Diagnostics
Structurez votre organisation avec un diagnostic clair
Nos audits révèlent les leviers concrets pour aligner vos équipes et vos process.
Que mesurer pendant un pilote IA ?
Mesurez quatre choses : l’usage réel, le temps passé, la qualité du résultat et le coût de vérification. Lisez l’usage réel dans les journaux de l’outil, pas dans un sondage. Faites juger la qualité par un expert, sur un échantillon. Le coût de vérification compte le temps de relecture et de correction : la fiche human in the loop décrit ce contrôle.
Ne vous fiez pas au ressenti des utilisateurs. METR a publié en juillet 2025 un essai randomisé sur 16 développeurs expérimentés. Avec les outils d’IA de début 2025, ils ont mis 19 % de temps en plus. Ils pensaient pourtant avoir gagné environ 20 %. METR qualifie aujourd’hui ce résultat de dépassé. Sa mise à jour de février 2026 suggère une accélération, sur des données que METR juge très fragiles. La leçon de méthode demeure : mesurez le temps, ne demandez pas seulement l’avis.
Comment décider à la fin du pilote ?
Comparez les mesures aux critères écrits au départ, puis décidez sur la valeur estimée après tous les coûts. Le guide ROI de l’IA explique comment chiffrer ces coûts. Trois décisions sont possibles : étendre, corriger puis retester, arrêter. Une prolongation sans critère nouveau n’est pas une décision.
Exercice fictif. Une ETI de services a mené quatre pilotes de dix semaines. Le tableau montre le résultat mesuré et la décision prise.
Pilote | Résultat mesuré | Décision |
|---|---|---|
Comptes rendus de réunions, achats | 30 % de temps gagné, relecture courte | Étendre aux autres sites |
Réponses aux réclamations | Temps gagné, mais une réponse sur dix à réécrire | Corriger la base documentaire, retester six semaines |
Prévision des ruptures de stock | Écart égal à la méthode actuelle | Arrêter |
Assistant de recherche juridique | 3 utilisateurs actifs sur 20 après un mois | Comprendre le refus avant toute extension |
Que faut-il ajouter pour passer à l’échelle ?
Le passage à l’échelle ajoute six postes que le pilote masque : budget récurrent, responsable désigné, intégration, sécurité, support et formation. La maintenance pèse lourd. Sculley et ses coauteurs (NIPS 2015) notent que les systèmes de machine learning réels entraînent couramment des coûts de maintenance continus massifs.
La formation relève aussi du droit. L’article 4 de l’AI Act impose des mesures de maîtrise de l’IA depuis le 2 février 2025. Depuis le 27 juillet 2026, le règlement (UE) 2026/1744 assouplit cette obligation. Les déployeurs prennent des mesures pour favoriser la maîtrise de l’IA de leur personnel, sans devoir garantir un niveau précis. Les fiches adoption de l’IA et IA et compétences détaillent l’accompagnement des équipes.
Faut-il consulter le CSE avant un pilote IA ?
Dans les entreprises d’au moins 50 salariés, l’employeur consulte le CSE sur l’introduction de nouvelles technologies (article L2312-8 du Code du travail). Les juges apprécient au cas par cas si un pilote en relève. Le 14 février 2025, le tribunal judiciaire de Nanterre a suspendu des outils d’IA présentés comme un pilote. Il y a vu une première mise en œuvre, interdite avant la fin de la consultation du CSE. Le 10 février 2026, le tribunal judiciaire de Paris a annulé le recours du CSE à un expert. Il a jugé qu’une expérimentation de Copilot 365, ouverte aux volontaires pendant quatre mois, ne constituait pas un projet important. Nous avons lu ce jugement sur Judilibre ; nous connaissons la décision de Nanterre par un commentaire de CMS Francis Lefebvre (source secondaire).
Informez le CSE dès la conception du pilote et décrivez ses effets sur le travail. Le signal IA et CSE revient sur la décision de Nanterre et sur deux autres suspensions de 2025.
Foire aux questions
Combien de temps doit durer un pilote IA ?
Combien de temps doit durer un pilote IA ?
Assez longtemps pour couvrir un cycle complet de l’activité testée et dépasser l’effet de nouveauté. Fixez la date de fin et le critère d’arrêt avant de commencer. Une prolongation exige un critère nouveau.
Quelle différence entre un POC et un pilote IA ?
Quelle différence entre un POC et un pilote IA ?
Un POC vérifie qu’une solution fonctionne techniquement, souvent sur des données préparées. Un pilote teste l’usage dans le travail réel, avec de vrais utilisateurs, et mesure la valeur. Un POC réussi ne dit rien de l’adoption.
Combien d’utilisateurs faut-il dans un pilote IA ?
Combien d’utilisateurs faut-il dans un pilote IA ?
Assez pour représenter les profils du déploiement visé : débutants et experts, plusieurs équipes, cas faciles et difficiles. Le nombre exact dépend de la tâche. Un groupe composé uniquement de volontaires enthousiastes risque de surestimer l’usage futur.
Que faire si le pilote IA ne tranche pas ?
Que faire si le pilote IA ne tranche pas ?
Cherchez d’abord la cause : mesure absente, périmètre trop étroit ou usage trop faible. Corrigez cette cause et retestez une fois, avec une date et un critère d’arrêt nouveaux. Si le second test ne tranche pas, arrêtez.
Sources
RAND Corporation, J. Ryseff, B. F. De Bruhl, S. J. Newberry, The Root Causes of Failure for Artificial Intelligence Projects and How They Can Succeed, RR-A2680-1, 13 août 2024 : 65 entretiens, cinq causes d’échec. Base de la section sur les échecs. : RAND
E. Brynjolfsson, D. Li, L. Raymond, Generative AI at Work, Quarterly Journal of Economics, vol. 140, n° 2, 2025, p. 889-942 (version arXiv du 6 novembre 2024, mêmes chiffres) : 5 172 agents, +15 % de demandes traitées par heure, gains concentrés chez les moins expérimentés. Utilisé pour le choix du périmètre. : arXiv
METR, Measuring the Impact of Early-2025 AI on Experienced Open-Source Developer Productivity, 10 juillet 2025 : essai randomisé, 16 développeurs, 19 % de temps en plus, gain perçu d’environ 20 %. Utilisé pour la mesure. : METR
METR, « We are Changing our Developer Productivity Experiment Design », 24 février 2026 : accélération probable avec les outils de fin 2025, sur des données jugées très fragiles. Le bandeau « résultats dépassés » figure sur la page de juillet 2025. : METR
D. Sculley et al., Hidden Technical Debt in Machine Learning Systems, NIPS 2015 : coûts de maintenance continus des systèmes réels. Utilisé pour le passage à l’échelle. : NeurIPS
Code du travail, article L2312-8 : consultation du CSE sur l’introduction de nouvelles technologies. : Code du travail numérique
Tribunal judiciaire de Paris, jugement selon la procédure accélérée au fond, 10 février 2026, RG n° 25/57412 : expérimentation de Copilot ouverte aux salariés volontaires, « prévue sur une période de quatre mois ». Base de la phrase sur la décision de Paris. : Judilibre
CMS Francis Lefebvre, C. Froger-Michon, Quand le CSE stoppe le déploiement de l’IA, 14 avril 2025 (source secondaire) : TJ Nanterre, 14 février 2025, n° 24/01457. : CMS
CMS Francis Lefebvre, Copilot 365 n’est pas un projet important rendant nécessaire la consultation du CSE, 12 mars 2026 (source secondaire) : TJ Paris, procédure accélérée au fond, 10 février 2026, n° 25/57412 (CMS écrit « référé » à tort). : CMS
CMS Francis Lefebvre, G. Loiseau, Intelligence artificielle : le forçage de la consultation du CSE, 17 septembre 2025 (source secondaire) : vue d’ensemble des décisions de 2025, lue pour vérifier le contexte. : CMS
Règlement (UE) 2026/1744 du 8 juillet 2026 et AI Act consolidé au 27 juillet 2026, articles 4 et 113 : maîtrise de l’IA, applicable depuis le 2 février 2025. : EUR-Lex
L’exercice fictif et la grille de décision sont une construction méthodologique Spentia, sans statistique de réussite ni portefeuille client revendiqué.
