Ingénieur Développeur IA Senior - Évaluation et Production de LLM K259 H/F
Votre mission Au sein d'une équipe projet travaillant sur l'intégration de l'intelligence artificielle générative, vous apportez une expertise senior en développement IA pour fiabiliser les usages actuels des modèles de langage, améliorer les méthodes d'évaluation et faire évoluer l'architecture existante sur la base de résultats mesurables.
- ️os missions
- Concevoir et optimiser la chaîne d'extraction de données : choisir l'approche (function calling, sortie structurée, vérification, réparation) et définir le schéma d'entrée donné au modèle
- Construire et maintenir les jeux de cas de test, mener les expériences et comparer prompts, modèles et méthodes sur des critères chiffrés
- Qualifier la fiabilité des juges basés sur LLM en les comparant à un jugement humain de référence
- Arbitrer le choix des modèles en fonction de la qualité, du coût et de la latence dans un cadre souverain (Mistral, AWS Bedrock en région UE)
- Industrialiser les approches validées en production : code testé, observabilité, gestion des pannes et des dérives
- Transmettre vos choix à l'équipe et au métier, et faire monter l'équipe en compétence sur l'évaluation des LLM
- Au moins 5 ans d'expérience en développement, dont au moins 2 ans sur des produits LLM en production
- Évaluation de LLM : jeux de cas, métriques, LLM-as-judge et ses biais, variance entre exécutions
- Extraction d'informations structurées depuis du texte libre : sortie structurée, function calling, validation de schéma
- Python avancé et code testé
- Capacité à trancher entre plusieurs approches à partir de mesures et à l'expliquer simplement
- Rigueur et exigence technique
- Autonomie et prise de décision basée sur les données
- Pédagogie et capacité à transmettre son expertise
- Esprit d'équipe et collaboration
- Curiosité pour l'innovation en IA générative
Emplois Recommandés
Internship Customer Relations Management - France
Holidog ( the global marketplace for pet owners, is looking for highly talented and aspiring entrepreneurs to join this exciting venture as Customer Relations Intern. The objective of the Holidog Cust…
Responsable d'études en Génie Energétique et Climatique (H/F) - CDI - Paris (75)
Bureau d’études tous corps d’état identifié comme spécialiste de la conception de bâtiments publics, tertiaires et industriels de haute technicité, notre société place l’humain au cœur de ses projets…
MOA ASSURANCE (F/H)
Carnet de route Chef de Projet MOA spécialisé en assurance depuis au moins 4 ans, vous êtes à la recherche de nouveaux défis. Bouclez votre ceinture, la suite est pour vous ! Pour l’un de nos cl…
Stage Graphic Designer Coordinator F/H
Stage - Graphic Designer Coordinator F/H Paris Stage de 6 mois VALIUZ : QUI SOMMES-NOUS ? Valiuz a pour mission d’accélérer la transformation des retailers grâce à la data et à l’IA af…
Job nounou bilingue anglais H/F
Every year, we offer 2,000 jobs for native or bilingual nanny : do you speak English ? Find a flexible and fulfilling job! With Mômji, it’s quick and easy to find a job in your native language! Les…
Directeur Général (F/H)
Meent accompagne la filiale événementielle d’un groupe à dimension nationale dans le recrutement de son/sa Directeur(rice) Général(e) en CDI. Notre client est spécialisé dans l’organisation d’événem…
Chef.fe adjoint.e maintenance (F/H)
À propos de nous Chimie ParisTech-PSL forme depuis sa création en 1896 des ingénieurs chimistes responsables et des scientifiques engagés, capables de mettre la science au service des grandes transiti…
Infirmier en Psychiatrie (H/F)
Infirmier en Psychiatrie (H/F) 319919255 Je suis Massine Kejat, consultant en recrutement spécialisé dans le secteur de la santé au sein du cabinet Harry Hope. Dans le cadre d'un renforcement d'équip…
PLENDI - Conducteur de travaux Confirmé F/H
PLENDI, marque de luxe de VINCI Construction, recherche un(e) conducteur(trice) Travaux pour ses opérations situées à Paris PLENDI est spécialisée dans la réhabilitation haut de gamme et intervien…
Chef de projet Maintenance & Arrêt H/F
Le poste : Dans le cadre de notre développement, nous recherchons un Chef de projet maintenance et arrêt H/F rattaché à notre centre Ile de France. Vos missions : Détaché au sein de nos client…