QC IA - Qualité & Agents de test IA - Freelance
Le contexte
Notre client est un grand cabinet d’audit et de conseil. Il développe et opère en interne une quinzaine de produits applicatifs en C# .NET / Vue.js sur Microsoft Azure, destinés à ses métiers Audit, Advisory et à ses fonctions support.
Il renforce aujourd’hui sa capacité à industrialiser des POC/POV construits rapidement avec l’IA générative (« vibe coding »). Ces prototypes s’appuient sur des services d’IA cloud (LLM, RAG, agents) et doivent devenir des produits fiables, sécurisés et exploitables en production.
Vos missions
Concevoir, développer et améliorer des agents IA de conception et de scripting de tests : génération de cas de test, de scénarios et de scripts automatisés
Définir et mettre en œuvre la stratégie de qualification des solutions IA (LLM, RAG, agents)
Mettre en place des méthodes d’évaluation adaptées à l’IA générative :
jeux de tests de référence
métriques de qualité (pertinence, fidélité, hallucinations)
non-régression des prompts et des modèles
Sécuriser le passage du POC au produit : critères d’acceptation, robustesse, sécurité (injection de prompt, fuite de données), performance et maîtrise des coûts
Intégrer les tests dans les chaînes CI/CD (Azure DevOps / GitHub)
Accompagner les équipes produit sur les bonnes pratiques qualité appliquées à l’IA
Emplois Recommandés
Développeur GO - Paris - H/F
Description de l'entreprise Chez Free, tu trouveras une culture interne singulière et très marquée. Il règne un fort état d’esprit collectif. Le recrutement est ouvert, sans a priori : on ne juge…
Stage Assistant RH & Recrutement (H/F/X)
Présentation de l'entreprise Chez Gruppo Peppe, on partage bien plus que des pizzas : une ambiance chaleureuse, une équipe soudée et pleine d’énergie, portée par la passion de la tradition napolit…
Infirmier -Gériatrie (H/F/D)
Samsic Médical Île-de-France recrute ! Vous êtes Infirmier(ère) Diplômé(e) d’État (IDE) et souhaitez rejoindre un établissement de santé réputé, Découvrez cette opportunité en gériatrie Date : S…
Stage - Chargé de réponses aux appels d'offres (stage) H/F
Service d'acceuil : CPRAM, société de gestion d'actifs et filiale du Groupe Amundi, en quelques chiffres Plus de 30 ans d’expérience dans la gestion d’actifs Près de 100 milliards d’euros d…
Comptable
Secteur Cinéma - Audiovisuel Description de l'entreprise/de l'organisme Vendôme Films est une société de production cinématographique indépendante basée dans le 8ème arrondissement. Elle s'…
Manipulateur Chef d'équipe en Imagerie Médicale (H/F)
Manipulateur Chef d'équipe en Imagerie Médicale (H/F) 3dt0wyh4ne L'Institut Curie recrute un Chef d'équipe manipulateur (H/F) en imagerie médicale , dans le cadre d'un CDI à temps plein sur le si…
Agent commercial immobilier
Chaque journée est différente, rythmée par les échanges, les visites et les négociations. Vous avancez à votre rythme, avec la liberté d'organiser votre activité tout en étant soutenu par un réseau so…
Problem manager informatique - H/F (IT)
#StormYourCareer ? Rejoins STORM GROUP et construis ta carrière avec nous ! Garantis la stabilité des servicesDans le cadre de la mise en place d?un domaine IT transverse pour l?un de nos clients str…
Stage - Ingénieur Fonctionnel MOA - Services Financiers - Paris
En tant qu'organisateur de forums de recrutement, Talents Handicap accompagne de très nombreuses entreprises & organisations en France dans leurs recrutements de collaborateurs en situation de handic…
Chirurgien-dentiste - Paris 75012 H/F
Présentation de l'entrepriseRetrouvez plus de 4000 offres d'emploi santé sur notre site et application mobile Jober Group. Profitez d'un réseau de 2000 partenaires sur toute la France, d'une équip…