Ingénieur Développeur IA Senior - Évaluation et Production de Llm K259 H/F - Kaiman Services

💼 KAIMAN Services - L'humain au coeur de la tech

Chez KAIMAN Services, nous pensons que la vraie richesse d'une ESN, ce sont ses collaborateurs. Depuis plus de 10 ans, nous développons une entreprise à taille humaine, basée à Aix-en-Provence, avec une présence active dans tout le Sud-Est, à Lyon et à Paris. Notre mission : accompagner nos clients dans leurs projets IT, en plaçant l'humain, la transparence et la qualité au centre de chaque action.

🚀 Nos domaines d'expertise

Nous intervenons sur 3 grands pôles techniques :

🔧 Développement & Ingénierie logicielle

Applications sur-mesure, API, outils métiers, DevOps, front/back-end, en environnement PHP, Symfony, JavaScript, Python, .NET, Java...

📊 Data & Intelligence Artificielle

Collecte, traitement et valorisation de données, automatisation, IA, machine learning, analyse prédictive.

☁️ Infrastructure, Cloud & Cybersécurité

Systèmes et réseaux, cloud (Azure, AWS, GCP), support, supervision, sécurité, maintien en conditions opérationnelles.

🤝 Une ESN centrée sur ses collaborateurs

Chez KAIMAN Services, chaque collaborateur est accompagné avec proximité, respect et bienveillance.
Nous croyons qu'un consultant épanoui, qui comprend son rôle et sa trajectoire, est un acteur clé de la réussite des projets.

👉 Pas de missions imposées.
👉 Des parcours personnalisés selon vos envies et vos compétences.
👉 Une relation directe avec la direction, fluide et sans superflu.

🌱 Nos engagements RH

Favoriser l'épanouissement personnel et professionnel

Encourager la montée en compétences continue

Garantir un management accessible et humain

Proposer des missions avec du sens et de la valeur technique

🎯 Pourquoi nous rejoindre ?

Parce que chez KAIMAN Services, on prend le temps de vous connaître.
Parce que votre avis compte.
Parce que vous avez besoin de perspectives, pas seulement d'un contrat.
Et parce que travailler sérieusement n'empêche pas la bonne ambiance.

📩 Envie de faire partie de l'aventure ?
Contactez-nous : ****@****.**
🌐 www.kaiman.fr

🎯 Votre mission

Au sein d'une équipe projet travaillant sur l'intégration de l'intelligence artificielle générative, vous apportez une expertise senior en développement IA pour fiabiliser les usages actuels des modèles de langage, améliorer les méthodes d'évaluation et faire évoluer l'architecture existante sur la base de résultats mesurables.

🛠️ Vos missions

- Concevoir et optimiser la chaîne d'extraction de données : choisir l'approche (function calling, sortie structurée, vérification, réparation) et définir le schéma d'entrée donné au modèle

- Construire et maintenir les jeux de cas de test, mener les expériences et comparer prompts, modèles et méthodes sur des critères chiffrés

- Qualifier la fiabilité des juges basés sur LLM en les comparant à un jugement humain de référence

- Arbitrer le choix des modèles en fonction de la qualité, du coût et de la latence dans un cadre souverain (Mistral, AWS Bedrock en région UE)

- Industrialiser les approches validées en production : code testé, observabilité, gestion des pannes et des dérives

- Transmettre vos choix à l'équipe et au métier, et faire monter l'équipe en compétence sur l'évaluation des LLM

🧩 Compétences techniques

- Au moins 5 ans d'expérience en développement, dont au moins 2 ans sur des produits LLM en production

- Évaluation de LLM : jeux de cas, métriques, LLM-as-judge et ses biais, variance entre exécutions

- Extraction d'informations structurées depuis du texte libre : sortie structurée, function calling, validation de schéma

- Python avancé et code testé

- Capacité à trancher entre plusieurs approches à partir de mesures et à l'expliquer simplement

🤝 Savoir-être

- Rigueur et exigence technique

- Autonomie et prise de décision basée sur les données

- Pédagogie et capacité à transmettre son expertise

- Esprit d'équipe et collaboration

- Curiosité pour l'innovation en IA générative

🎓 Expérience

Minimum 5 ans d'expérience en développement, dont au moins 2 ans d'expertise concrète sur des produits LLM en production.

• Python
• Pédagogie
• Autonomie
• Prise de décision