Cadre d’évaluation pour l’implémentation et l’efficacité de l’IA dans la pratique des acteurs judiciaires – Cas d’étude: la jurimétrie

La “mesure” est rapidement apparue comme un facteur clef du succès de l’autonomisation des acteurs judiciaires par leur transformation numérique. Dès lors, l’objectif de cette étude est de forger un cadre d’évaluation intégrant des indicateurs de qualité et de performance fiables ayant vocation à assortir les multiples outils numériques développés d’un cadre de gouvernance et d’une grille d’analyse des facteurs de succès de leur développement et implémentation.

Il ne s’agit pas de fournir un inventaire des cadres d’évaluation existants mais une analyse critique d’indicateurs recueillis sur le terrain et pertinents pour l’évaluation des technologies. Notre étude s’intéresse plus spécifiquement aux systèmes d’intelligence artificielle (SIA) dans la justice, incluant en particulier une évaluation de la contribution de l’IA aux fins de jurimétrie.

De nombreuses questions et difficultés peuvent surgir au cours des processus d’adoption et/ou de développement, d’utilisation et de mesure d’impact d’outils numériques. L’évaluation est importante pour mieux éclairer les stratégies et décisions. Elle permet d’établir des priorités, produire un cadre et surtout mesurer le succès, les résultats et la qualité du processus. Dans le domaine juridique, il existe un déficit de données et un manque de cadres et méthodes d’évaluation. Nous formulons, ici, une proposition de cadre d’évaluation applicable en particulier aux outils d’IA.

L’objectif de cette étude est, à terme, de donner les moyens aux acteurs d’identifier et de promouvoir a) les meilleures stratégies pour une mise en œuvre réussie de l’IA dans leurs pratiques, b) les facteurs qui peuvent influencer le résultat d’un projet d’IA et c) les indicateurs de qualité pour l’évaluation des services d’IA.