Le goulot d'étranglement épistémique : pourquoi l'IA donne 10X aux ingénieurs et 3X aux juristes

Un consensus se forme discrètement parmi les juristes qui ont sérieusement adopté l'IA, non pas ceux qui publient des tribunes à son sujet, mais ceux qui exécutent réellement des workflows agentiques sur de vrais dossiers. Le gain de productivité est réel. Il se situe quelque part autour de 3X. Et il refuse obstinément de devenir le 10X que connaît actuellement l'ingénierie logicielle.

La comparaison mérite d'être prise au sérieux, parce que les mêmes modèles sous-jacents produisent les deux chiffres. Un ingénieur et un juriste utilisant le même modèle de pointe, avec une maîtrise comparable du prompting et de la conception de workflows, se retrouvent séparés d'un ordre de grandeur. Ces deux chiffres sont à prendre comme des archétypes plutôt que comme des mesures précises ; l'argument qui suit ne requiert que l'écart entre eux, pas leurs valeurs exactes. Quelle que soit l'explication de cet écart, ce n'est pas la capacité des modèles.

La plupart des ingénieurs qui font tourner des configurations agentiques sérieuses ne lisent plus leur code ligne par ligne. Ils lancent de longues boucles autonomes avec des flottes d'agents, contrôlent au niveau du comportement et de l'architecture, et laissent le harnais de tests intercepter ce qu'ils ne voient pas. Pendant ce temps, un juriste utilisant l'IA au niveau de sophistication le plus élevé lit encore chaque ligne de tout avis émis sous son nom.

La question intéressante est de savoir pourquoi, et les réponses habituelles sont fausses d'une manière instructive.

Les explications habituelles, et pourquoi elles sont secondaires

L'explication la plus souvent entendue est la responsabilité. C'est le nom de l'avocat qui figure sur l'avis. Quand les choses tournent mal, le client appelle une personne, pas un chatbot. Les règles déontologiques imposent des obligations de supervision sur le travail produit. L'assurance responsabilité civile professionnelle tarifie le risque. Les tribunaux ont fait des exemples d'avocats ayant déposé des citations fabriquées par l'IA, à commencer par Mata v. Avianca en 2023, jusqu'à constituer un corpus de décisions de sanction désormais assez volumineux pour que des bases de données publiques en assurent le suivi.Sources : Mata v. Avianca (S.D.N.Y. 2023) · AI Hallucination Cases database

Tout cela est vrai. Rien de tout cela ne constitue la contrainte limitante.

Le test est le suivant : si la responsabilité était la limite fondamentale, on s'attendrait à voir l'écart se resserrer à mesure que les normes professionnelles s'adaptent, que les assureurs développent des produits spécifiques à l'IA, que les tribunaux et les régulateurs bâtissent des cadres de contrôle délégué. Au bout de cinq ans d'ajustement institutionnel, le 3X deviendrait un 8X.

Ce n'est pas ce qui se produira, parce que la responsabilité est la réponse du système juridique à une propriété plus profonde du travail, pas cette propriété elle-même. Les ingénieurs sont eux aussi responsables de ce qu'ils livrent. Les logiciels aéronautiques, les dispositifs médicaux et les infrastructures de paiement emportent une responsabilité au moins aussi lourde qu'un contrat mal rédigé. Pourtant, dans ces domaines, la vérification s'exécute toujours à la vitesse de la machine. La différence ne tient pas aux enjeux. Elle tient à la structure de coût du contrôle.

L'asymétrie de la vérification

L'ingénierie logicielle a gagné son 10X grâce à un fait si élémentaire qu'il passe facilement inaperçu : l'artefact s'exécute. La vérité terrain d'un morceau de code, c'est la machine elle-même. Un compilateur rejette les erreurs de typage en quelques millisecondes. Une suite de tests encode la spécification comportementale et l'exécute à chaque commit. Analyseurs statiques, fuzzers et tests par propriétés sondent l'espace des entrées qu'aucun humain ne penserait à essayer. Cinquante ans d'investissement soutenu ont fait tendre vers zéro le coût de la vérification du code et, point décisif, ont rendu la vérification moins coûteuse que la génération.

C'est pour cela que la boucle agentique se referme en ingénierie. L'agent écrit du code, lance le vérificateur, lit l'échec et corrige, des milliers de fois, sans surveillance. Le signal de récompense est vérifiable par la machine. L'agent peut faire tourner son propre examinateur.

Voyons maintenant ce qu'exige la vérification d'une seule affirmation juridique. Soit une phrase aussi ordinaire que « en droit espagnol, le délai de prescription de cette action contractuelle est de cinq ans ». Pour valider cette phrase, un relecteur doit établir cinq propriétés indépendantes :

Existence : la source citée (en l'occurrence l'article 1964.2 du Código Civil) existe réellement.

Fidélité : elle dit ce qui est affirmé, au niveau du passage précis, pas au niveau du thème général.

Actualité : elle relève toujours du droit en vigueur. Ni abrogée, ni modifiée depuis la version que le modèle a vue, ni écartée par une législation spéciale, ni réinterprétée par une jurisprudence contraignante. Cet article précis a été modifié en 2015, exactement le genre de fait sur lequel un modèle entraîné sur des décennies de textes juridiques se trompe en silence.Sources : Ley 42/2015 (BOE)

Autorité : la source est contraignante dans cette juridiction, à ce niveau de la hiérarchie, pour ce type de question. Un arrêt d'une Audiencia Provincial n'est pas le Tribunal Supremo. Une décision de chambre n'est pas une décision en banc. La ratio n'est pas l'obiter.

Applicabilité : elle régit ces faits, ce type de contrat, ce régime temporel au regard des dispositions transitoires.

Chacune de ces propriétés est une consultation de la vérité terrain. Mais contrairement à l'ingénierie, la vérité terrain n'est pas ici un artefact exécutable. C'est un corpus distribué, éparpillé entre des centaines de journaux officiels, de greffes et de codes consolidés, dans des dizaines de langues, versionné dans le temps, délimité par juridiction, et pour l'essentiel non vérifiable par la machine. La consultation passe donc par le seul instrument de vérification disponible : un humain habilité, qui lit à vitesse humaine.

Cet humain est la fraction séquentielle du pipeline. Et les fractions séquentielles obéissent à une mathématique.

La loi d'Amdahl appliquée au travail juridique

En calcul parallèle, la loi d'Amdahl borne l'accélération de tout système par la portion de ce système qui ne peut pas être accélérée. Si une fraction p du travail est accélérée d'un facteur s, l'accélération totale est de 1 / ((1 − p) + p/s).

Appliquons-la à un dossier juridique. Supposons que 70 % du temps de travail soit génératif : collecte des recherches, rédaction, synthèse, mise en forme, analyse préliminaire. Supposons que l'IA accélère cette portion non pas de 10X, mais à l'infini, jusqu'à un temps nul. L'accélération globale est de 1 / 0.3, soit environ 3.3X.

Le plafond de 3X observé n'est pas un artefact culturel. C'est la loi d'Amdahl, avec la vérification pour fraction séquentielle.

L'arithmétique dit aussi ce qu'il faudrait pour atteindre 10X : le reliquat non accéléré doit passer sous les 10 % du temps de travail initial. Si la vérification représente aujourd'hui 30 % du travail, elle doit se comprimer d'un facteur trois ou plus, en termes absolus, pendant que tout le reste est automatisé. Aucune amélioration du côté de la génération, aussi spectaculaire soit-elle, ne fait bouger ce chiffre. La rédaction peut devenir instantanée : le plafond reste à 3.3X.

C'est la partie du débat que les lancements de modèles ne cessent d'obscurcir. Chaque saut de capacité comprime davantage les 70 %, produit une vague d'annonces et laisse les 30 % intacts. Le goulot d'étranglement n'est pas là où va l'investissement.

Pourquoi de meilleurs modèles ne déplacent pas le plafond

Quatre raisons structurelles, chacune indépendante de la qualité des modèles.

Premièrement, la calibration ne se transfère pas. La fluidité d'un modèle est décorrélée de l'exactitude juridique de ses affirmations. Les citations hallucinées sont parfaites sur la forme, et c'est précisément ce qui les rend dangereuses. Un modèle plus capable produit moins d'erreurs, mais l'avocat qui relit ne peut pas voir quelles affirmations sont les erreurs, de sorte que l'effort de relecture par affirmation reste inchangé. On ne relit pas moins parce que le taux d'erreur est passé de 4 % à 1 %. On relit tout, parce que 1 % d'une centaine d'affirmations suffit encore à rendre un acte de procédure passible de sanctions.

Deuxièmement, la distribution des erreurs met l'échantillonnage en échec. Le contrôle par sondage fonctionne quand les erreurs sont distribuées au hasard. Les erreurs des modèles ne sont pas aléatoires. Elles se concentrent exactement aux endroits d'apparence plausible : la référence qui épouse parfaitement l'argument, la citation qui dit ce que le passage aurait dû dire, le précédent qui existerait dans un système juridique bien ordonné mais n'existe pas dans celui-ci. Contrôler 10 % d'affirmations façonnées de manière adversariale pour paraître correctes ne détecte à peu près rien. La relecture doit être exhaustive, c'est-à-dire la version coûteuse.

Troisièmement, l'obsolescence est structurelle, pas accidentelle. Une date de coupure d'entraînement garantit que le modèle ne peut connaître ni le revirement de jurisprudence du mois dernier ni la modification législative de la semaine passée. L'échelle ne corrige pas la fraîcheur ; un modèle doté de dix fois plus de paramètres est exactement aussi ignorant de la veille. La génération augmentée par récupération déplace le problème plus qu'elle ne le résout : l'exactitude dépend désormais de la complétude et de l'actualité du corpus de recherche documentaire, et du fait que la récupération fasse effectivement remonter les sources contraignantes, et ce sont précisément les propriétés que personne ne vérifie.

Quatrièmement, la fonction de perte est asymétrique et retombe sur un humain nommément désigné. Quand l'erreur d'un agent de codage coûte à l'ingénieur un déploiement raté et trente minutes, la tolérance envers une sortie non vérifiée est rationnelle. Quand l'erreur est un précédent fabriqué dans un acte déposé en justice, le revers, ce sont des sanctions, une procédure disciplinaire et une décision où figure le nom de l'avocat, publiée et permanente. Sous une perte asymétrique, la relecture exhaustive n'est pas du conservatisme. C'est la politique correcte.

Le problème de l'omission

Il existe un mode de défaillance pire que la fabrication, et il ne reçoit qu'une fraction de l'attention : l'omission.

Une citation fabriquée est au moins contrôlable. Elle figure sur la page, elle avance une affirmation, et un relecteur diligent peut la traquer. Une autorité contraignante omise ne laisse aucune trace sur la page. La sortie est fluide, sourcée, cohérente en interne, et fausse, parce que l'arrêt qui tranche la question en défaveur de la position défendue n'a tout simplement jamais fait surface.

Vérifier une absence est catégoriquement plus difficile que vérifier une présence. Confirmer qu'aucune autorité contraignante ne contredit l'analyse exige une recherche exhaustive sur un corpus complet, à jour et délimité par juridiction. Aucun relecteur humain ne le fait réellement. Les juristes expérimentés atténuent le risque par la reconnaissance de schémas et les citateurs, mais cette atténuation est probabiliste, et elle se dégrade précisément quand les dossiers s'aventurent dans des juridictions peu familières ou des domaines du droit en évolution rapide.

Cela mérite d'être énoncé avec soin, car cela inverse le cadrage habituel. L'exhaustivité est la seule chose que les machines font mieux que les experts, si et seulement si le corpus et la couche de récupération sont conçus pour cela. Le rappel (recall) d'un système de recherche documentaire juridique n'est pas une métrique de recherche d'information à arbitrer contre la latence. C'est une propriété de sûreté. Un système capable de démontrer une couverture exhaustive des autorités contraignantes fait quelque chose qu'aucune relecture humaine ne peut faire, au lieu d'approximer ce que la relecture humaine fait déjà.

Les erreurs s'amplifient en silence

Le goulot d'étranglement s'aggrave à mesure que le travail juridique se projette plus loin dans l'avenir. Évaluations de risques, structurations d'opérations, stratégie réglementaire : autant de raisonnements bâtis sur des prémisses rétrospectives quant à l'état actuel du droit.

Le statut épistémique d'une conclusion est borné par sa prémisse la plus faible. Une seule entrée corrompue, un précédent halluciné, une disposition abrogée traitée comme en vigueur, un courant d'autorités contraires passé sous silence, corrompt silencieusement chaque jugement construit par-dessus. Et la corruption est invisible dans la sortie, parce que chaque inférence en aval est localement raisonnable. Quand le raisonnement se trouve trois étapes au-delà de la prémisse défectueuse, aucune lecture de la note finale, aussi attentive soit-elle, ne fera émerger le défaut. L'erreur ne s'annonce pas. Elle s'amplifie.

Voilà pourquoi « la relecture humaine des sorties de l'IA » est une garantie plus faible qu'il n'y paraît. L'humain relit la conclusion, et la conclusion semble correcte. Le défaut réside dans la provenance, et la provenance est exactement ce que les sorties d'IA actuelles ne transportent pas.

Ce qu'exige réellement la compression de la vérification

Si le plafond est fixé par le coût de vérification, alors le programme d'ingénierie est explicite : rendre chacun des cinq contrôles exécutable par la machine. Concrètement, cela suppose une infrastructure que la majeure partie de l'industrie de l'IA juridique n'a pas commencé à construire.

Identifiants résolvables. Chaque affirmation juridique d'une sortie générée devrait porter un pointeur résolvable par la machine vers une source canonique, au moyen des systèmes d'identifiants qui existent déjà : ECLI pour la jurisprudence européenne, ELI pour la législation, Akoma Ntoso comme modèle de document. Le contrôle d'existence devient une résolution déterministe, et non une recherche humaine.Sources : ECLI (Council conclusions, 2011) · ELI (EUR-Lex) · Akoma Ntoso

Ancrage au niveau du segment. La fidélité devrait être vérifiée par rapport au passage littéral, pas au document dans son ensemble. Une affirmation renvoie à un segment de la source ; soit le segment contient de quoi appuyer l'affirmation, soit il n'en contient pas. La similarité sémantique n'est pas un appui. Un passage peut porter exactement sur le sujet tout en contredisant l'affirmation, et la distance entre embeddings ne dira pas dans lequel des deux cas on se trouve.

Graphes de validité temporelle. La législation devrait être représentée comme un graphe versionné : chaînes de modifications, dérogations, entrées en vigueur, régimes transitoires. La jurisprudence, elle, a besoin d'arêtes de citateur : décision suivie, distinguée, limitée, renversée. Le contrôle d'actualité devient alors un parcours de graphe, une opération de l'ordre de la milliseconde, au lieu d'une tâche de recherche. C'est la version native pour la machine de ce que Shepard's et KeyCite font depuis plus d'un siècle dans une poignée de juridictions, généralisée à l'ensemble d'entre elles.

Classement des autorités sous forme de données. La hiérarchie des sources, la norme constitutionnelle primant la loi et la loi primant le règlement, ainsi que la hiérarchie judiciaire propre à chaque juridiction, encodées de sorte qu'un système puisse hiérarchiser deux autorités en conflit au lieu de les présenter toutes deux avec une confiance égale.

Implication avec zone de rejet. Les modèles d'inférence en langage naturel savent juger si un passage appuie une affirmation, avec une confiance calibrée. Le point de conception qui compte est la zone grise : les affirmations dont l'implication est véritablement incertaine sont acheminées vers l'humain. Le juriste cesse de relire 100 % des affirmations et se met à trancher les 10 à 20 % qui sont effectivement contestables. Voilà à quoi ressemble, en pratique, la compression de la fraction séquentielle.

Vérification de l'absence. Une recherche documentaire exhaustive sur des corpus dont la complétude est démontrable, avec les autorités contraires signalées de manière proactive plutôt que sur demande. La couverture devient une propriété mesurée et auditable du système.

Rien de tout cela ne relève d'une informatique spéculative. Chaque composant existe. Ce qui n'existe pas, dans la majeure partie du marché, c'est la volonté d'y consacrer des moyens, parce que rien de tout cela ne fait aussi bonne impression en démonstration qu'une rédaction fluide.

Le compilateur que le droit n'a jamais construit

Avec suffisamment de recul, le 10X de l'ingénierie a une explication simple : c'est le rendement de cinquante ans d'investissement dans l'infrastructure de vérification. Compilateurs, systèmes de types, harnais de tests, intégration continue, analyse statique. La génération est devenue rapide parce que le contrôle était d'abord devenu bon marché. La révolution agentique du logiciel n'a pas créé ce socle. Elle en a encaissé les dividendes.

L'IA juridique a fait le pari inverse. La quasi-totalité de la vague d'investissement est allée vers la génération : fluidité de rédaction, synthèse, interfaces conversationnelles au-dessus des documents. La génération était déjà la partie bon marché. Le résultat est exactement ce que prédit la loi d'Amdahl : une accélération spectaculaire des 70 %, des 30 % laissés intacts, et un plateau à 3X, à l'échelle du secteur, que chaque rapport d'adoption sérieux redécouvre.

Le juriste 3X est réel, et cela vaut la peine de l'être. Mais 3X est un plafond, pas un jalon. Une génération plus fluide s'en approche asymptotiquement, puis s'arrête. Le juriste 10X ne devient possible que lorsque la vérification s'exécute à la vitesse de la machine : existence, fidélité, actualité, autorité et applicabilité contrôlées de manière déterministe, le jugement humain étant réservé aux questions qui l'exigent véritablement.

Tous les secteurs qui se sont industrialisés ont connu la même migration : la contrainte s'est déplacée de la fabrication des choses vers leur contrôle, et les entreprises qui ont gagné l'ère suivante sont celles qui ont industrialisé le contrôle. Le droit est le suivant. L'ordre de grandeur appartiendra à qui saura comprimer la vérification.