About this role
Summary: This apprenticeship role involves improving virtual customer personas, evaluating AI evaluators, and optimizing voice interactions for large-scale LLM simulations. The candidate will build scripts and dashboards to monitor system performance and contribute to production improvements.
Chez muchbetter, les commerciaux et conseillers de plus de 30 grands groupes s'entraînent en voix à voix face à des clients virtuels propulsés par l'IA : plus de 50 000 utilisateurs, 400 000 simulations à ce jour. Chaque simulation, c'est un LLM qui joue un client, une voix qui lui donne vie et un évaluateur qui note la performance. On ouvre cette alternance parce qu'on veut quelqu'un qui grandisse avec ces 3 briques sur la durée, et finisse par en porter une.
🎯 Ce que tu pilotes
- Qualité des clients virtuels : tu améliores les prompts et la logique des personas pour qu'ils réagissent, doutent et objectent comme de vrais clients, en t'appuyant sur les conversations réelles.
- Évaluation : tu mesures et fiabilises les évaluateurs IA qui notent chaque simulation, en les confrontant à des annotations humaines (vérité terrain).
- Expérience voix : tu travailles la latence, la prise de parole et les coupures, de la trace en prod jusqu'au correctif.
- Outillage : tu construis les scripts et tableaux de bord qui permettent à l'équipe de repérer un problème avant que le client ne le remonte.
🗓️ Une semaine type en entreprise
- Premier jour : revue des conversations mal notées depuis ton dernier passage, tu choisis les 2 ou 3 sujets qui comptent
- Au milieu : tu testes, tu mesures, tu codes, tu pousses en review
- Dernier jour : tu présentes à l'équipe ce qui a bougé, chiffres à l'appui, et tu laisses le sujet propre avant ton retour à l'école
✅ Ce que tu auras livré
- Au bout de 6 mois : des évaluateurs dont on connaît le taux d'accord avec un humain
- Au bout d'un an : un chantier dont tu es le ou la référent·e (évaluation, voix ou personas)
- En fin d'alternance : des améliorations en production que tu peux chiffrer, et un vrai dossier pour ton mémoire
🧠 Ce que tu vas apprendre
- Faire tourner des LLM en production, à grande échelle, face à de vrais utilisateurs
- Évaluer un système IA proprement : jeux de test, calibration, intervalles de confiance
- Travailler au contact direct des clients et du terrain, pas seulement du code
👥 Ton équipe
Tu rejoins l'équipe tech, encadré·e par Antoine Grenard (CTO et co-fondateur), avec les équipes produit et ops qui vivent les retours clients au quotidien.
✨ Pourquoi rejoindre muchbetter
- Ton travail est en prod en quelques jours, pas en quelques mois
- Mutuelle Alan, 50 % du transport, carte Swile, petit-déjeuner et snacks
- Séminaires d'été et d'hiver, soirée du mois
### Profile
- En école d'ingénieur ou en master IA, data ou informatique, en recherche d'une alternance de 12 à 24 mois à partir de janvier 2027
- Solide en Python ou TypeScript
- Tu as déjà construit quelque chose avec un LLM : projet perso, stage, hackathon
- Rigoureux·se sur la mesure : tu ne dis pas « c'est mieux » sans le prouver
- Très bon français (nos simulations sont majoritairement en français), bon anglais
- ⭐ Bonus : expérience en traitement de la voix (STT, TTS) ou en évaluation de modèles
Pas besoin de cocher toutes les cases pour postuler.
### Recruitment process
Un process court et transparent, en 4 étapes :
1. Un appel de 20 min pour faire connaissance
2. Un entretien technique avec Antoine, CTO
3. Un cas pratique avec Raphaël, co-fondateur
4. Une rencontre avec Julien, CEO et co-fondateur