AI Quality Analyst - Expert en Évaluation de Modèles LLM

A propos du poste

Rejoignez une mission de pointe à l'intersection de l'intelligence artificielle et de l'expérience utilisateur. En tant qu'AI Quality Analyst, vous jouerez un rôle crucial dans l'optimisation de Gemini en évaluant sa capacité à offrir une personnalisation ultra-pertinente basée sur l'écosystème Google.

Missions principales

• Évaluer la nouvelle fonctionnalité de personnalisation de Gemini en analysant l'exploitation des données contextuelles (Gmail, Google Search, YouTube, etc.).
• Concevoir des prompts créatifs et complexes basés sur des scénarios d'utilisation réels pour tester les limites du modèle.
• Mesurer la qualité des réponses selon des critères rigoureux : grounding (ancrage), intégration des données et utilité globale.
• Rédiger des justifications analytiques détaillées pour chaque classement et évaluation effectuée.
• Collaborer au sein d'une équipe globale opérant en flux continu (24/7).

Profil recherché

• Doté d'une pensée analytique exceptionnelle et d'une grande rigueur méthodologique.
• Capacité à faire preuve de créativité dans l'ingénierie de prompts (Prompt Engineering).
• Excellentes compétences rédactionnelles pour argumenter vos analyses de manière claire et précise.
• Autonomie totale en télétravail et capacité à gérer votre temps selon votre fuseau horaire local.
• Attention méticuleuse aux détails pour garantir la fiabilité des données de test.

Competences requises

• Prompt Engineering & Créativité rédactionnelle
• Analyse de données et évaluation de modèles IA
• Maîtrise de l'écosystème Google (Gemini, Gmail, Search, YouTube)
• Capacité d'évaluation de la pertinence et du grounding
• Communication écrite professionnelle

Conditions de travail

• Poste en télétravail (Remote)
• Nécessite un équipement informatique personnel performant et une connexion internet stable