Assistant d'exploitation basé sur le RAG, évalué et sécurisé

Construire un assistant qui répond aux questions d'exploitation à partir des runbooks internes, avec recherche hybride, citations, évaluation automatique et garde-fous de sécurité.

Senior20 h

Les équipes d'astreinte perdent du temps à chercher la bonne procédure. Vous livrez un assistant qui retrouve et cite les passages pertinents des runbooks, reconnaît quand il ne sait pas, respecte les droits d'accès et dont la qualité est mesurée à chaque évolution.

embeddingsrecherche hybridecontexte + question
Runbooks
Ingestion
pgvector + FTS
API assistant
LLM (API)
Évaluation (MLflow)
Astreinte
Architecture : Runbooks, Ingestion, pgvector + FTS, API assistant, LLM (API), Évaluation (MLflow), Astreinte

Architecture

Pipeline d'ingestion (découpage par sections, métadonnées), base vectorielle pgvector + recherche plein texte, API d'orchestration, modèle de langage via API, jeu d'évaluation et suivi des expériences.

Livrables

  • Pipeline d'ingestion et stratégie de découpage justifiée
  • API avec citations et filtrage par droits
  • Jeu d'évaluation (≥ 50 questions) et résultats par itération
  • Analyse de risques OWASP LLM Top 10 et garde-fous mis en place