En un coup d'œil
- Missions: Évaluez et maintenez des systèmes d'IA pour garantir leur fiabilité.
- Entreprise: Entreprise innovante spécialisée dans l'IA avec une culture collaborative.
- Avantages: Travail à distance, horaires flexibles et opportunités de développement professionnel.
- Autres infos: Environnement dynamique avec des possibilités de croissance de carrière.
- Pourquoi ce job: Soyez le garant de la qualité des systèmes d'IA et faites une réelle différence.
- Qualifications: Expérience en QA, tests d'ingénierie ou SDET, idéalement sur des systèmes d'IA.
Le salaire estimé est compris entre 61650 - 75350 € par an.
200 systèmes en production, et ils doivent tenir. Au-delà d'un certain nombre de systèmes en production, la contrainte n'est plus de construire. Il s'agit de garantir que cela fonctionne. Ce rôle est nouveau. Une clarification utile : il s'agit de QA pour des systèmes d'IA, pas de tests d'interface. Vous testez des sorties non déterministes, pas des boutons.
Ce que vous prenez en charge :
- Vous écrivez une suite d'évaluation et elle échoue. Vous construisez un ensemble de tests pour un agent de support client. Cela réussit à 95 %. Deux semaines plus tard, un utilisateur pose une question formulée différemment de tout ce qui se trouve dans votre ensemble de tests, et le système répond des absurdités. Votre travail : maintenir un ensemble de tests qui se rapproche de plus en plus du trafic réel, semaine après semaine.
- Vous cassez un workflow n8n pour de bonnes raisons et vérifiez que rien d'autre ne se casse avec. Un nœud est modifié pour corriger un bug ; une étape en aval qui dépendait d'un format de sortie précis échoue silencieusement. Vos tests de régression détectent cela avant que le client ne le fasse.
- Vous êtes la dernière barrière avant la livraison. Ensemble de tests commerciaux, cas limites du client, vérification que les sorties sont présentables à un responsable qui les utilisera pour décider. Vous dites oui ou non à la mise en ligne.
- Vous vérifiez un chiffre que l'entreprise répète partout. "7 heures par semaine récupérées en moyenne" est un argument commercial central et une affirmation vérifiable. Vous construisez la méthode pour l'auditer projet par projet, et vous dites quand cela ne tient pas pour un cas donné.
- Vous surveillez ce qui se dégrade sans avertissement. La qualité diminue pendant plusieurs semaines sans alerte, les coûts des jetons explosent. Vous construisez les signaux qui rendent ces dérives visibles avant que le client ne les voie.
- Vous écrivez beaucoup, et pour être compris immédiatement. Rapports d'acceptation, notes de non-conformité, comptes rendus de dérive : lisibles en trente secondes par quelqu'un qui n'a pas suivi le projet.
Vos 90 premiers jours :
- Mois 1, vous auditez ce qui existe et nous dites où cela casse le plus souvent.
- Mois 2, vous mettez en place les fondations de l'évaluation sur un système en direct.
- Mois 3, aucun système n'est expédié à un client sans passer par votre acceptation.
Le profil :
- Techniques d'évaluation : ensembles de données dorées, rubriques de notation, LLM-en-juge calibré contre annotation humaine, tests de régression.
- Outils : Python solide, un cadre d'évaluation (promptfoo, DeepEval ou équivalent), lecture et test des workflows n8n, CI/CD.
- Non-déterminisme : Pense en plages de qualité acceptables, distingue la variation normale d'une véritable régression.
- Écriture : Rapports clairs, lisibles par un public non technique.
- Expérience terrain : 3 à 8 ans en QA, ingénierie de test ou SDET, une partie sur des systèmes d'IA en production, à l'aise pour dire non sous pression.
Ce qu'on ne cherche pas : Quelqu'un qui exécute des plans de test écrits par d'autres. Ici, vous écrivez la stratégie.
Contexte :
- Où cela diffère des rôles voisins :
| Rôle | Ce qu'ils font | Qui possède le résultat |
|---|---|---|
| QA généraliste ou testeur manuel | Scénarios prédéfinis sur des logiciels déterministes | La couverture fonctionnelle possède le résultat |
| MLOps ou Ingénieur Plateforme | Infrastructure qui exécute les modèles | La disponibilité technique possède le résultat |
| Data Scientist ou Ingénieur ML | Conçoit et entraîne les modèles | La performance du modèle en amont possède le résultat |
| QA Engineer, Systèmes IA, Créateurs IA | Construit les évaluations, décide d'aller ou non | Vous possédez la fiabilité des chiffres publiés |
Où : À distance, dans un fuseau horaire compatible avec la France et le Maroc (Europe, Afrique du Nord ou à proximité), sans exigence de résidence, et occasionnellement dans nos bureaux.
Ce rôle est-il fait pour vous ? Pas de lettre de motivation. Le formulaire prend cinq minutes et commence par montrer ce que vous avez construit.
QA Engineer employeur : Ai Makers
En tant qu'employeur, notre entreprise se distingue par son engagement envers l'innovation et la qualité, offrant un environnement de travail dynamique où les ingénieurs QA peuvent véritablement influencer la fiabilité des systèmes d'IA. Nous valorisons la croissance professionnelle avec des opportunités de développement continu et une culture de collaboration qui encourage la créativité et l'autonomie. Située dans une zone horaire compatible avec la France et le Maroc, notre structure permet un équilibre entre travail à distance et interactions en personne, favorisant ainsi un cadre de travail flexible et inclusif.
Conseils d'expert StudySmarter🤫
Voici comment nous pensons que tu pourrais décrocher QA Engineer
✨Participe à des meetups tech
Les meetups et les hackathons sont des super occasions pour rencontrer des gens du milieu de l'ingénierie et du développement logiciel. C'est là que tu peux échanger des idées, découvrir des projets et même te faire repérer par des recruteurs comme ceux de Ai Makers.
✨Contribue à des projets open-source
Ne sous-estime pas le pouvoir des contributions open-source. En proposant tes compétences sur des plateformes comme GitHub, tu peux non seulement améliorer ton portfolio, mais aussi prouver ta capacité à travailler en équipe. Ça pourrait faire toute la différence dans ta candidature chez Ai Makers.
✨Réseau sur LinkedIn, mais avec du contenu
Sur LinkedIn, partage du contenu lié à tes projets ou tes réflexions sur les tendances technologiques. Cela peut attirer l'attention de recruteurs et de professionnels du secteur. Qui sait, peut-être que quelqu'un de Ai Makers remarquera tes posts et te contactera pour un entretien !
✨Postule directement via notre site
N’oublie pas que postuler sur le site de Ai Makers est souvent le moyen le plus direct et efficace d'attirer l'attention. Sois proactif et n'hésite pas à postuler même si tu n'as pas tous les critères d'une offre : montrer ton enthousiasme peut faire toute la différence !
Nous pensons qu'il te faut ces compétences pour exceller en tant que QA Engineer
Quelques conseils pour ta candidature 🫡
Montre tes compétences techniques:Dans le secteur de l'ingénierie et développement logiciel, il est crucial de mettre en avant tes compétences techniques dans ton CV. Mentionne ton expérience avec des langages de programmation spécifiques, des frameworks, ou des projets antérieurs. N'hésite pas à intégrer des liens vers ton GitHub ou des projets personnels pour donner vie à ton profil !
Personnalise ta lettre de motivation:Avec un poste à temps plein, ta lettre de motivation doit refléter ta passion pour le développement logiciel. Explique pourquoi tu souhaites rejoindre Ai Makers et comment tu peux contribuer à leurs projets. Parle aussi de ton intérêt à apprendre et à évoluer au sein de l'équipe.
Démontre ta capacité à travailler en équipe:Les projets de développement logiciel sont souvent le fruit d'un travail collaboratif. Mets en avant dans ton CV des expériences où tu as fait partie d’une équipe, que ce soit dans des stages, des projets universitaires ou des contributions open-source. Les soft skills, ça compte aussi !
Sois clair sur tes attentes:Dans ta candidature pour un poste à temps plein, n'hésite pas à mentionner tes attentes concernant le rôle et la culture d'entreprise. Dis-nous ce qui est important pour toi, que ce soit les technologies utilisées ou l'environnement de travail, pour que Ai Makers sache que tu es sérieux dans ta démarche et que tu es motivé pour un engagement à long terme.
Comment te préparer à un entretien d'embauche chez Ai Makers
✨Maîtrise des langages de programmation
Pour un poste en ingénierie et développement logiciel chez Ai Makers, assure-toi de bien maîtriser les principaux langages demandés dans l'annonce. Prépare-toi à répondre à des questions techniques sur des projets que tu as réalisés ou même à coder en direct lors de l'entretien. Montre que tu sais comment résoudre des problèmes en temps réel !
✨Prépare ton portfolio technique
N'oublie pas d'apporter ton portfolio, surtout si tu as des projets de développement logiciel que tu peux montrer. C'est toujours un plus de pouvoir parler de ton expérience concrète et des challenges que tu as surmontés lors de tes projets précédents. Ça peut vraiment faire la différence chez Ai Makers !
✨Compréhension des méthodologies agiles
Dans notre domaine, on utilise souvent des méthodologies agiles. Sois prêt à discuter de ton expérience avec des frameworks tels que Scrum ou Kanban. Explique comment tu as travaillé en équipe et comment cela a impacté tes projets précédents. Cela montrera ta capacité à t'adapter rapidement au sein d'équipes dynamiques.
✨Sois prêt pour des mises en situation
Attends-toi à des questions comportementales où tu devras prouver ta capacité à gérer des situations stressantes, comme des délais serrés ou des conflits au sein de l'équipe. Prépare quelques anecdotes précises sur ces expériences, car chez Ai Makers, ils rechercheront des candidats réactifs et capables de travailler sous pression.
