Avec 600 000 offres traitées par mois, France Travail se met à l'ère de l'intelligence artificielle et lance LegO. Son but est double : écarter les offres non conformes et libérer du temps pour les conseillers.
Présenté lors du World AI Cannes Festival en février 2024, LegO, est le petit nom de l’IA développée par Pôle Emploi, devenu pleinement France Travail en février 2024, pour valider la conformité des offres d’emploi qu’il diffuse sur son site web. Ce tout dernier outil dopé à l'IA analyse le contenu des offres et vérifie qu’elles répondent à pas moins de 22 critères de conformité. LegO permet ainsi de gagner du temps et de garantir la qualité des offres proposées aux demandeurs d’emploi.
Améliorer la pertinence d'un système chronophage
France Travail, c'est 20 millions d'offres d'emploi publiées sur son site, 478 millions de visiteurs en ligne, et 6,6 millions en agences locales. Autant dire que l'organisme a tout d'une multinationale à faire tourner le plus efficacement possible.
Et en matière d'outils d'analyse des offres d'emploi, jusqu'ici, il fallait compter sur des règles métier qu'appliquaient scrupuleusement les salariés et conseillers pour s'assurer de la conformité des annonces publiées aux lois françaises. En creux, en dehors de l'accueil et de l'accompagnement, ils devaient traiter la classification d'images, l'automatisation de l'analyse de CV, le traitement d'e-mails ou encore la garantie de la conformité des offres d'emploi avec les normes juridiques.
Mais de l'aveu d'Agathe Ravilly, responsable de produit au sein du département IA de France Travail, « […] la proportion de faux positifs dépassait les 30 %, ce qui obligeait les conseillers à passer du temps à revérifier les annonces. D'où l'idée de remplacer les règles par l'IA pour améliorer la pertinence du système ».
France Travail a donc décidé de développer son propre système. Baptisé Intelligence Emploi, ce solide programme dopé à l'IA est toujours en production.
De solides performances pour garantir l'efficacité
C'est au sein de ce programme qu'a été développée LegO, la solution d'analyse des offres d'emploi par l'Intelligence artificielle. Le but, selon Agathe Ravilly, étant de « se substituer à une solution de marché payante, améliorer la qualité des offres d'emploi publiées et réduire le temps passé par les conseillers à corriger les offres d'emploi ».
Et pour ce faire, France Travail a mis les moyens.
Intelligence Emploi, une technologie Open Source, tourne sur 28 GPU avec un accès sécurisé au datalake maison. « Notre application tourne avec 6 réseaux LTSM (Long short-term memory) et effectue 22 vérifications de conformité », détaille Agathe Ravilly.
Côté sécurité, LegO est développée on-premise (tout est conçu sur site, pour assurer une sécurité optimale) et open source. « La plateforme offre par ailleurs des capacités de calcul avec des ressources CPU et GPU, ressources qui réduisent considérablement le temps nécessaire à l'entraînement de modèles complexes », poursuit Agathe Ravilly.
Enfin, niveau performance, LegO en a sous le capot. Intelligence Emploi, qui couve LegO, tourne sur 28 GPU et ayant un accès sécurisé au datalake maison. Agathe Ravilly enchérit: « Notre application tourne avec 6 réseaux LTSM (Long short-term memory) », conclut-elle.
Des résultats encourageants, mais « peut mieux faire »
Il aura fallu utiliser 35 jeux de données d'apprentissage, sélectionner 50 000 offres, que des experts ont analysées, puis marquées (via un outil interne appelé Replay) pour garantir à LegO une précision à toute épreuve.
Le résultat ne s'est pas fait attendre avec un taux de précision de 82 %, LegO permet d'analyser la conformité des centaines de milliers d'offres d'emploi proposées chaque mois à France Travail avant d'être mises en ligne.
Et ce ne sont pas moins de 20 % d'entre elles qui ont été désignées par l'IA comme non conformes, car discriminatoires (prérequis sur les biens personnels, permis de conduire obligatoire, biens en possession, demandes basées sur le genre, etc.). « Nous pouvons dire que c'est un grand succès », se réjouit Agathe Ravilly.
Mais si elle reste très performante, car disponible 100 % du temps et ayant un temps de réponse de 300 millisecondes, LegO est aussi perfectible, grâce à la main de l'homme. En effet, les conseillers devront corriger à la main les offres que LegO aura mentionnée comme non conformes, ou bien adapter celles que l'IA n'aura pas correctement traitées. Ils doivent également fournir des retours réguliers aux experts sur les résultats obtenus et leur expérience. Un temps encore trop long consacré par les conseillers à assister une IA plutôt que d'accompagner les demandeurs d'emploi.
Source : L'Usine Digitale
