• Hi Interns
Principal
  • Mon Espace
  • Mon Espace
  • Offres
  • Profil
  • Hi Academy
  • Monthly Check-Up
  • LeaderboardNew
Outils
  • Hi Resume
  • Hi Resume
  • PDF to Hi Resume
  • AI Outreach
  • CV Sur Mesure
  • LinkedIn to Email
  • Fiche entretien
  • PDF to Hi Resume
  • AI Outreach
  • CV Sur Mesure
  • LinkedIn to Email
  • Fiche entretien
Accompagnement
  • Career Consultant
  • Hi Agent
  • Career Consultant
  • Hi Agent
  • Passer au Premium
  • Premium / Plus
  • Tarifs

 

Info session

Gratuit

La méthode pour décrocher des entretiens, en live avec l’équipe.

  1. Offres
  3. Détail de l'offre
Se connecter
WEVIOO

WEVIOO

TunisieTunisiaPublication : 12 nov. 2026

Conception d'un framework d'évaluation continue et de benchmarking des LLM et des systèmes RAG (LLMOps)

  • Stage
  • 4-6 mois
  • Hybride
  • Échéance : 26 nov. 2026
  • LLMOps
  • NLP/LLMs
  • Food & Beverage
  • Machine learning

Description du poste

Référence

MC08_2026

Projet

Concevoir un banc d'évaluation automatisé comparant les LLM et mesurant la qualité des assistants RAG. Constituer des golden datasets en français, anglais et arabe ; mesurer fidélité, pertinence, précision/rappel du retrieval et hallucinations ; comparer les modèles selon qualité, latence et coût ; intégrer LLM-as-a-judge calibré sur annotations humaines et feedback utilisateur ; intégrer les tests à la CI/CD pour détecter les régressions ; créer un dashboard de suivi.

Profil

Ingénieur en IA, Data Science ou génie logiciel. Maîtrise de Python, bonnes connaissances NLP/LLM et statistiques.

Technologies

Python, Ragas/DeepEval, Langfuse, LangChain/LangGraph, Qdrant, Ollama/vLLM, MLflow, GitLab CI/GitHub Actions, Superset ou Grafana. 1 à 2 stagiaires.

Offres similaires

  • Data storytelling : génération automatisée de commentaires de gestion à partir des dashboards BIWEVIOO · Tunisie · Stage
  • Assistant BI conversationnel (Text-to-SQL) avec couche sémantique gouvernée pour le self-service analyticsWEVIOO · Tunisie · Stage
  • Conception d'un framework d'évaluation continue et de benchmarking des LLM et des systèmes RAG (LLMOps)WEVIOO · Tunisie · Stage
  • Infra IT - Infra IT et cloud - DSI 003 - Industrialisation d'une plateforme LLMOps & Serving IA Cloud Native (Private AI Infrastructure)Orange Tunisie · Tunisie · Stage
  • PFE 2027 — MC08_2026 — Conception d'un framework d'évaluation continue et de benchmarking des LLM et des systèmes RAG (LLMOps)WEVIOO · Tunisie · Stage
  • Plateforme LLMOpsB2H · Tunisie · Stage
  • Stages et emplois en intelligence artificielle
  • Stages en Tunisie