Le projet

Conception et amélioration des chaînes de traitement IA
  • Concevoir et optimiser des pipelines d’extraction d’informations structurées à partir de données textuelles.
  • Définir les meilleures stratégies d’interaction avec les LLM : structured outputs, function calling, validation et correction des réponses.
  • Concevoir et maintenir les schémas de données utilisés par les modèles.

 

Évaluation et mesure de performance
  • Construire et maintenir des jeux de tests représentatifs des cas métier.
  • Définir des métriques d’évaluation objectives (qualité, précision, rappel, coût, latence).
  • Comparer les performances des prompts, modèles et architectures au travers d’expérimentations rigoureuses.
  • Mettre en place des méthodologies d’évaluation reproductibles.

 

Validation et gouvernance des systèmes IA
  • Évaluer la pertinence des approches de type LLM-as-Judge.
  • Mesurer la cohérence des évaluations automatiques par rapport à des validations humaines.
  • Identifier les biais, les variations d’exécution et les limites des systèmes génératifs.
Choix technologiques et optimisation
  • Participer à la sélection des modèles en arbitrant entre qualité des résultats, coûts d’exploitation et performances.
  • Contribuer à la définition d’architectures IA compatibles avec des contraintes de souveraineté et de sécurité.
  • Réaliser des recommandations fondées sur des données quantitatives et des résultats mesurés.

 

Industrialisation et accompagnement
  • Développer des composants robustes et testés en environnement de production.
  • Mettre en place les mécanismes d’observabilité, de supervision et de gestion des dérives.
  • Participer à la montée en compétences des équipes sur les sujets liés à l’IA générative et à l’évaluation des modèles.

Profil recherché

Expérience
  • Minimum 5 ans d’expérience en développement logiciel.
  • Au moins 2 ans d’expérience sur des produits ou solutions basés sur des LLM en production.
  • Expérience significative dans la mise en œuvre et l’évaluation de systèmes d’IA générative.

 

Compétences techniques
  • Maîtrise avancée de Python.
  • Solide expérience des LLM, des architectures RAG (Retrieval-Augmented Generation) et des mécanismes d’extraction d’informations.
  • Connaissance approfondie du Function Calling, des sorties structurées et de la validation de schémas.
  • Mise en œuvre de stratégies d’évaluation : datasets de référence, métriques, analyse statistique, LLM-as-Judge.
  • Développement de code industrialisé, testé et maintenable.

 

Compétences fonctionnelles
  • Forte capacité d’analyse et de prise de décision basée sur des mesures objectives.
  • Aptitude à comparer plusieurs approches techniques et à argumenter les choix retenus.
  • Excellentes capacités de communication auprès d’interlocuteurs techniques et métiers.

Vous souhaitez postuler ?

< 256 MB.
< 256 MB.

D'autres missions vous correspondent !

Ces offres pourraient également vous intéresser.

09.11.2026

Chef de projet Digital Workplace (H/F)

Dans le cadre de la modernisation de son environnement de travail numérique, nous recherchons un(e) Chef de projet Digital Workplace (H/F) chargé(e) de piloter des projets d’évolution des outils collaboratifs et des services numériques destinés aux utilisateurs.
Vous intervenez de la phase de cadrage jusqu’au déploiement des solutions, en assurant la coordination des équipes internes, des métiers et des prestataires. Vous contribuez à améliorer l’expérience utilisateur, à développer les usages collaboratifs et à garantir la qualité des services proposés.

09.11.2026

Développeur Python (H/F) Polars/Pandas

Dans le cadre du développement et de la modernisation de nos outils de traitement de données et d'automatisation, nous recherchons un(e) Développeur Python (H/F) capable d'intervenir sur des sujets variés mêlant développement, analyse de données, intégration continue et amélioration des processus. Le candidat devra faire preuve de curiosité et s'intéresser aux enjeux métiers afin de proposer des solutions pertinentes et robustes.

09.11.2026

Ingénieur DevOps Ibm I As400 (H/F)

W HUB recherche un Ingénieur DevOps IBM i (AS/400) (H/F).
Dans le cadre de la modernisation de notre système d'information, vous serez chargé(e) de concevoir et de déployer une chaîne CI/CD adaptée à notre environnement IBM i, en collaboration étroite avec les équipes de développement RPG et d'exploitation.