La vérification ne se traduit pas. Elle doit être reconquise, juridiction par juridiction.

Ce texte ne part pas de la publication de quelqu'un d'autre. Tout ce qui suit provient de la construction et de l'exploitation effectives d'une vérification portant sur des dizaines de systèmes juridiques à la fois, et c'est la part du travail que personne, à l'extérieur, ne semble vouloir affronter : l'IA juridique multi-juridictionnelle n'est pas un problème difficile résolu une fois puis traduit. C'est le même problème difficile, résolu de nouveau, honnêtement, dans chaque langue et dans chaque famille juridique, et le mode de défaillance, lorsqu'on fait l'impasse dessus, est invisible plutôt que bruyant.

Le piège de construire d'abord pour une seule juridiction

Tout système d'IA juridique commence quelque part. Il est construit, réglé et testé contre la jurisprudence d'une seule juridiction, la formulation d'une seule langue, la manière de citer l'autorité d'une seule famille juridique, parce que c'est là que se trouvent l'équipe fondatrice et les premiers clients. Puis il est "internationalisé", et l'internationalisation signifie presque toujours traduction : les mêmes prompts, les mêmes contrôles, la même logique, tournant désormais en français, en portugais ou en coréen plutôt qu'en anglais ou en espagnol.

Cela ressemble à de la couverture. Ce n'en est pas. C'est la logique de vérification d'une seule juridiction habillée dans une autre langue, et l'écart entre les deux n'apparaît que le jour où quelqu'un la teste réellement, ce qui survient d'ordinaire après qu'un client de cette seconde juridiction s'y est déjà fié.

La discipline qui l'empêche tient moins d'une fonctionnalité que d'une contrainte, imposée structurellement plutôt qu'espérée : aucune juridiction n'a le droit d'être celle par défaut. Chaque chemin traversant le système exige une juridiction comme entrée explicite, sans repli sur un marché d'origine si aucune n'est précisée, et sans chemin de code supposant en silence que les règles d'une juridiction s'appliquent sauf indication contraire. Cela paraît anodin. C'est la différence entre un système construit pour tous et un système construit pour un marché puis dressé à répondre dans d'autres langues.

La vérification ne voyage pas avec la traduction

Voici la part qu'il est facile de manquer, même en sachant qu'il faut la chercher. Les mécanismes réels par lesquels une affirmation juridique devient subtilement fausse, une négation inversée, un quantificateur discrètement affaibli de tous à certains, une exception omise, une magnitude altérée, une somme écrite en toutes lettres qui ne correspond plus aux chiffres placés à côté, sont des motifs propres à chaque langue, non des motifs universels. La grammaire de la négation en coréen ne fonctionne pas comme la grammaire de la négation en espagnol. La façon dont une clause d'exception se formule dans une loi française ne ressemble pas à la façon dont elle se formule dans une loi indonésienne. Un système de vérification réglé et testé de manière adversariale contre des motifs de défaillance anglais ou espagnols n'offre exactement aucune garantie de saisir la défaillance équivalente le jour où il commence à traiter du portugais ou de l'italien, parce qu'il n'a jamais été réellement testé contre ce à quoi ces défaillances ressemblent dans cette langue. Il a été testé contre ce à quoi elles ressemblent dans la langue où il a été construit, puis pointé vers une nouvelle langue en lui faisant confiance pour généraliser.

Le plus dangereux tient à ce que cela donne à voir de l'extérieur lorsque cela échoue. Le système ne lève pas d'erreur. Il rapporte un résultat propre. Une juridiction branchée sans son propre jeu de cas adversariaux testés pour cette langue précise affichera le même rassurant "rien d'anormal détecté" qu'une juridiction réellement passée à l'épreuve du feu, parce que personne n'a exécuté le test qui ferait apparaître la différence. Une coche verte sur un test qui n'a jamais été écrit n'est pas une réussite. C'est une affirmation non testée déguisée en réussite, et c'est la manière la plus simple qui soit de livrer un système de vérification qui, silencieusement, ne fait rien précisément dans les marchés les plus éloignés de celui où il a été construit.

Le seul remède que nous ayons trouvé est mécanique plutôt qu'aspirationnel : une juridiction et sa langue ne passent pas en production tant qu'un véritable jeu de cas d'échec testés de manière adversariale, spécifique à cette langue, n'est pas présent dans le pipeline et ne passe pas contre elle, contrôlé automatiquement et non validé de manière informelle. La couverture devient quelque chose qu'il faut gagner et que l'on peut montrer, non quelque chose que l'on présume parce que la liste des fonctionnalités indique que la langue est prise en charge.

L'hallucination ne signifie même pas la même chose partout

C'est ici que change la forme même de la logique de vérification, et non seulement son étendue. Dans un système de common law, la défaillance paradigmatique est une décision fabriquée ou mal attribuée, une citation d'un précédent qui n'a jamais été rendu ou qui ne dit pas ce qu'on lui fait dire. C'est le mode de défaillance contre lequel presque tous ceux qui construisent de la vérification en IA juridique conçoivent implicitement, parce que presque tous partent d'un cadre de référence de common law ou anglo-américain.

Dans un système de droit codifié, de tradition civiliste, ce n'est pas du tout le mode de défaillance dominant. La défaillance paradigmatique y est un article bien réel, cité correctement, mot pour mot, mais qui a depuis été abrogé, remplacé ou modifié, et que l'on continue d'invoquer comme s'il énonçait le droit en vigueur. La citation n'est pas fabriquée. L'article a existé. Il figure peut-être même encore dans le corpus, inchangé, exactement là où il a toujours été. Le problème est que le droit a bougé et que la citation, elle, n'a pas bougé. L'existence n'a jamais été la question. L'actualité, si.

Traiter cela comme un cas particulier greffé sur un contrôle d'existence, c'est le manquer structurellement et non occasionnellement. Le remède consiste à faire de la hiérarchie des normes et du temps des données de premier rang plutôt qu'un ajout tardif : chaque disposition porte son rang dans la hiérarchie des normes ainsi que la fenêtre de dates durant laquelle elle a effectivement été en vigueur, et un contrôle de vérification résout les deux, et pas seulement la question de savoir si le texte est réel. Point décisif, cela doit vivre comme des données que le système charge par juridiction, non comme du code écrit par juridiction, faute de quoi chaque nouveau système juridique pris en charge devient une nouvelle base de code à maintenir indéfiniment plutôt qu'un nouveau jeu de données à charger une fois. Le mécanisme reste le même. Ce qui change, c'est la hiérarchie et les dates d'entrée en vigueur qu'on lui remet.

Le corpus n'est pas une seule chose. C'est des dizaines de combats séparés.

Il est tentant de parler du "corpus" comme d'un actif unique qui passerait proprement à l'échelle. Ce n'est pas le cas. Chaque juridiction est un projet à part entière, avec ses propres contraintes d'accès, son propre état de numérisation, son propre profil de fiabilité. Obtenir une jurisprudence fiable et à jour du système judiciaire d'un pays ne ressemble en rien au fait de le faire dans un autre : formats différents, pratiques de publication différentes, lacunes différentes dans ce qui est ne serait-ce que disponible sous forme exploitable par machine. Certaines juridictions vous remettent des sources primaires propres, complètes et correctement datées. D'autres vous remettent des fragments, et la réponse honnête, pour celles-là, est une lacune déclarée, non un chiffre assuré qui présume en silence une exhaustivité qu'il n'a pas.

Cette discipline, qui consiste à traiter l'exhaustivité de la couverture comme quelque chose à mesurer et à divulguer par juridiction plutôt que comme quelque chose que l'on laisse entendre uniforme, procède du même instinct que déclarer une affirmation invérifiable au lieu de la deviner, simplement appliqué un cran au-dessus, au niveau des parties de la carte qui sont réellement renseignées.

Ce que permet une véritable profondeur multi-juridictionnelle : comparer, et pas seulement composer

Tout cela a une contrepartie qui va au-delà du fait de ne pas échouer silencieusement dans le quarantième marché. Dès lors que chaque juridiction est réellement vérifiée selon le même standard, avec son propre lexique testé, ses propres données de hiérarchie et de validité temporelle, sa propre couverture honnêtement déclarée, quelque chose devient possible qu'un système fondé sur la traduction ne peut que simuler : placer plusieurs juridictions côte à côte face au même document ou à la même situation et comparer, avec la même rigueur dans chaque direction, la manière dont elles la traitent effectivement.

Nous exploitons cela comme une capacité distincte : on remet au système un contrat ou une situation décrite, on nomme de deux à quinze juridictions, ainsi qu'une branche du droit pour cadrer la comparaison, civil, commercial, du travail, pénal, fiscal, administratif, constitutionnel, procédural, et il restitue la manière dont chacune de ces juridictions traite effectivement ce document ou cette situation au regard de son propre droit, côte à côte. Nous sommes ici sur le terrain du droit international privé au sens traditionnel, questions de loi applicable, de savoir quelles règles de quel for s'appliquent réellement, de la manière dont un traité s'articule avec le droit interne de chaque signataire, rendues traitables au niveau d'un contrat précis plutôt que laissées à l'état de question doctrinale générale.

La raison pour laquelle cela ne fonctionne que si tout ce qui précède est réel tient à ceci : une comparaison entre juridictions ne vaut que ce que vaut la vérification de la juridiction la plus faible qui y entre. Un système qui traite la vérification comme une traduction peut malgré tout produire une réponse qui ressemble à une comparaison, un paragraphe sur la juridiction A à côté d'un paragraphe sur la juridiction B, mais il compare une réponse correctement fondée à une réponse qui n'a jamais été vérifiée selon le même standard, et rien, dans la sortie seule, ne permet de savoir de quel côté de cette asymétrie on se trouve. Comparer honnêtement plusieurs juridictions suppose d'avoir accompli, pour toutes, le travail ingrat, juridiction par juridiction, décrit plus haut, et non pour une seule avec les autres traduites à côté.

Concrètement, voilà ce dont a réellement besoin un contrat transfrontalier, une question de traité ou un contrôle de conformité multi-juridictionnel : non pas une réponse générique sur le "droit international" dans l'abstrait, mais un document précis confronté au droit effectivement en vigueur, conscient de la hiérarchie des normes et vérifié, de chaque juridiction nommée à la fois, cadré sur la branche du droit qui gouverne réellement la situation, avec le même standard de rigueur appliqué dans toutes les directions.

Ce que cela apporte réellement, en pratique

Si vous opérez dans une juridiction, ou avez besoin du droit d'une juridiction, qui n'est pas celle où votre fournisseur d'IA se trouve avoir son siège, vous êtes structurellement la personne la plus susceptible d'être silencieusement trahie par un système qui n'a jamais vraiment été testé qu'à domicile. Non parce que quelqu'un aurait décidé que vous comptiez moins. Parce que l'internationalisation entendue comme traduction fait de ce résultat le cas par défaut à moins que quelque chose ne l'empêche spécifiquement, et la plupart des systèmes n'ont rien qui le fasse.

L'intérêt de construire par la voie la plus difficile, traitement à égalité imposé dans l'architecture plutôt que présumé, couverture adversariale gagnée par langue plutôt qu'héritée de celle qui est venue en premier, hiérarchie et temps traités comme des données qui voyagent plutôt que comme une logique à réécrire, lacunes honnêtes au lieu d'exhaustivité sous-entendue, est que le client situé dans la juridiction la plus éloignée de celle où le système a été construit obtient la même rigueur que celui du marché d'origine, et non une version plus discrète et moins testée du même produit portant un autre drapeau.

Ce n'est pas une fonctionnalité démontrable en démo. Personne ne voit soixante juridictions traitées à égalité dans une capture d'écran. Mais c'est là l'avantage réellement défendable, plus que le mécanisme de vérification lui-même, car ce mécanisme est désormais une idée dont plusieurs acteurs conviennent indépendamment qu'elle est la bonne. Avoir effectivement accompli le travail ingrat qui consiste à le mériter, marché par marché, honnêtement, ne l'est pas.