257
3. Tester, certifier et qualifier
a. Amorcer une réflexion sur les méthodes et autorités compétentes pour tester et
qualifier les IA qui serviront à des tâches critiques (Reco évaluation, métrologie,
outils préalable pour la certification)
Pour pouvoir comparer dans un cadre commun les solutions de l’IA pour
une tâche donnée, il faut de définir des cadres permettant de quantifier de
manière reproductible, répétable et interprétable les solutions et systèmes
(Data + algorithme + hardware) à base d’IA.
Une première solution est la mise en place plus massive de challenges ou
campagnes d'évaluation définie par les acteurs français. Les campagnes
d'évaluation ou challenge sont des projets pluriannuels qui consistent à
proposer un cadre commun de comparaison des solutions de systèmes. Une
deuxième solution, évidemment complémentaire, pourrait être la mise en
place d’une initiative nationale impliquant l’ensemble des acteurs concernés,
qu’ils soient du monde de la recherche, de l’industrie, ou des organismes
publics afin de développer des méthodes de métrologie et d’évaluations
sociotechniques des systèmes à base d’IA. Pourrait être également adressé la
problématique de la certification, point essentiel pour tous les acteurs
industriels. Peu d’initiative existe sur le sujet, ce qui positionnerait la France
en pointe dans ce domaine. Il est à noter que la majorité des campagnes
d'évaluations sont aujourd'hui financées par les Etats-Unis en particulier par
le DARPA et l’IARPA. Ceci a pour conséquence que les chercheurs et
industriels du monde entier ont travaillé depuis plusieurs décennies sur les
problématiques qui intéressaient avant tous les financeurs de ces campagnes.
Faire que l'état français finance plus massivement ce type de campagne
permettrait non seulement de créer un écosystème vertueux mais également
de proposer des problématiques qui soient dans l'intérêt des entreprises et
des concitoyens français.
4. Faire adopter l’IA dans l’administration
a. Transformer la numérisation de l’état et passer du paradigme « formulaire papier
vers formulaire électronique », à une notion de l’état au service de l’usager
b. Par l’usage de l’IA pour fluidifier les rapports à l’administration
c. Par l’automatisation des tâches répétitives, pour que l’agent puisse se concentrer sur
son métier
d. Par l’utilisation au sein de l’administration, qui développera l’écosystème de l’IA
3. Tester, certifier et qualifier
a. Amorcer une réflexion sur les méthodes et autorités compétentes pour tester et
qualifier les IA qui serviront à des tâches critiques (Reco évaluation, métrologie,
outils préalable pour la certification)
Pour pouvoir comparer dans un cadre commun les solutions de l’IA pour
une tâche donnée, il faut de définir des cadres permettant de quantifier de
manière reproductible, répétable et interprétable les solutions et systèmes
(Data + algorithme + hardware) à base d’IA.
Une première solution est la mise en place plus massive de challenges ou
campagnes d'évaluation définie par les acteurs français. Les campagnes
d'évaluation ou challenge sont des projets pluriannuels qui consistent à
proposer un cadre commun de comparaison des solutions de systèmes. Une
deuxième solution, évidemment complémentaire, pourrait être la mise en
place d’une initiative nationale impliquant l’ensemble des acteurs concernés,
qu’ils soient du monde de la recherche, de l’industrie, ou des organismes
publics afin de développer des méthodes de métrologie et d’évaluations
sociotechniques des systèmes à base d’IA. Pourrait être également adressé la
problématique de la certification, point essentiel pour tous les acteurs
industriels. Peu d’initiative existe sur le sujet, ce qui positionnerait la France
en pointe dans ce domaine. Il est à noter que la majorité des campagnes
d'évaluations sont aujourd'hui financées par les Etats-Unis en particulier par
le DARPA et l’IARPA. Ceci a pour conséquence que les chercheurs et
industriels du monde entier ont travaillé depuis plusieurs décennies sur les
problématiques qui intéressaient avant tous les financeurs de ces campagnes.
Faire que l'état français finance plus massivement ce type de campagne
permettrait non seulement de créer un écosystème vertueux mais également
de proposer des problématiques qui soient dans l'intérêt des entreprises et
des concitoyens français.
4. Faire adopter l’IA dans l’administration
a. Transformer la numérisation de l’état et passer du paradigme « formulaire papier
vers formulaire électronique », à une notion de l’état au service de l’usager
b. Par l’usage de l’IA pour fluidifier les rapports à l’administration
c. Par l’automatisation des tâches répétitives, pour que l’agent puisse se concentrer sur
son métier
d. Par l’utilisation au sein de l’administration, qui développera l’écosystème de l’IA