Vous aurez comme objectif d'assurer la validation de la performance, de l'efficacité et de la robustesse des modèles d'IA, en élaborant des stratégies de test adaptées aux use cases IA (RAG, agents autonomes, LLM), avec une attention particulière aux aspects responsables et éthiques.
Vous aurez comme missions :
- Collaborer avec les équipes produit et data pour garantir l'alignement des résultats de test avec les besoins métier.
- Élaborer l'approche de test, les scénarios et plans de validation couvrant les aspects fonctionnels, non-fonctionnels (performance, sécurité) et les vulnérabilités.
- Mettre en place des processus et outils de test adaptés aux use cases IA (validation de RAG, agents autonomes).
- Suivre et partager des indicateurs de qualité (KPI) pour mesurer l'efficacité des modèles.
- Industrialiser les pratiques de test IA au sein des équipes.
- Assurer une veille technologique sur les évolutions des frameworks et méthodologies de test IA.
- Être force de proposition pour transformer les concepts en solutions opérationnelles de test.
Diplômé(e) d'un Bac+5 en informatique.
Expérience : Minimum 3 ans.
Compétences requises :
- Méthodologies : Agile Testing, guide ISTQB, acculturation Data/IA (GenAI et non-GenAI)
- Programmation : Python, Pandas, NumPy
- IA Générative : RAG, Prompt Engineering, Agentique, LLM
- Frameworks IA : LangChain, LangGraph ou équivalents
- Outils de test IA : Giskard, RAGAS, Deep-Eval ou solutions similaires pour l'évaluation de modèles
ALTEN DELIVERY CENTER MAROC, Filiale du leader mondial de l’ingénierie et du conseil en technologie créé en 2008 et présent à Fès, Rabat, Tétouan et Casablanca, compte aujourd’hui plus de 2300 consultants et vise un centre d’excellence de 3100 consultants ALTENiens en fin 2027. Avec plus de 90 recrutements par mois, ALTEN Maroc est désormais un acteur majeur de l’insertion professionnelle des ingénieurs. Nous accompagnons nos clients, leaders de l’Industrie dans leurs stratégies de développement dans les domaines de l’automobile, du ferroviaire, de l’IT, de la R&D et des Télécoms & Médias.
Au plaisir de vous lire !