Aller au contenu

TechniqueExpert1 min de lecture

Quiz : Méthode d'observabilité GenAI

Dix questions pour vérifier ce que vous retenez de la méthode : défaillance silencieuse, SLO de qualité, impact chiffré, conformité et organisation.

Pour : ingénieurs et SRE · architectes · managers d’équipePrérequis : Avoir suivi les leçons du parcours.

Mode de lecture

Avant de présenter la méthode à votre équipe ou à votre direction, prenez cinq minutes pour vérifier ce que vous en avez retenu. Les dix questions reprennent les notions qui reviennent le plus souvent en réunion : pourquoi une IA tombe en panne sans bruit, comment promettre un niveau de qualité, combien coûte un angle mort, qui fait quoi.

Chaque réponse est corrigée tout de suite, avec une explication et un lien vers la leçon concernée. Rien n’est envoyé : votre meilleur score reste dans ce navigateur.

  1. Question 1 sur 10Selon le modèle de la défaillance silencieuse, quelle est la question pertinente à se poser pour un signal que l'on ne mesure pas ?Une seule réponse
  2. Question 2 sur 10Un serveur MCP de confiance modifie la définition d'un de ses outils entre deux appels (rug pull). Quel signal de la grille MCP rend ce changement visible ?Une seule réponse
  3. Question 3 sur 10Parmi ces pratiques, lesquelles correspondent à la façon dont la méthode définit et surveille un SLO de qualité ?Plusieurs réponses possibles
  4. Question 4 sur 10Le taux d'accord entre votre juge LLM et le golden set chute nettement. Que faut-il en conclure ?Une seule réponse
  5. Question 5 sur 10Passerelle : businessPour défendre un budget d'observabilité devant une direction financière, comment la méthode estime-t-elle la valeur d'un signal ?Une seule réponse
  6. Question 6 sur 10Passerelle : businessDans l'exemple chiffré de la partie V (50 000 appels par jour), que représente un taux de hit de cache atteignable de 30 pour cent laissé inexploité ?Une seule réponse
  7. Question 7 sur 10Passerelle : organisationDans le RACI de la méthode, qui est redevable (A) des SLO de qualité ?Une seule réponse
  8. Question 8 sur 10Passerelle : humainVotre équipe met en place une astreinte qualité. Quelles actions font partie du playbook de mitigation décrit par la méthode ?Plusieurs réponses possibles
  9. Question 9 sur 10Passerelle : métiersLe service conformité vous demande comment vous démontrez la sécurité de votre chaîne d'approvisionnement au titre de NIS2. Quel signal la matrice de preuve associe-t-elle à cette obligation ?Une seule réponse
  10. Question 10 sur 10Où et comment traiter le contenu des échanges (prompts, réponses) dans les traces, pour éviter deux anti-patterns coûteux ?Plusieurs réponses possibles

Si une question vous a fait hésiter, la présentation de la formation vous renvoie à la bonne partie. Le calculateur d’exposition économique permet de passer de la théorie à vos propres chiffres. Le glossaire reprend les termes du quiz et les passerelles entre les plans montrent comment ces notions se répondent d’un plan à l’autre.


Révisé le 4 octobre 2026 : explications des questions sur les tableaux de bord et le contenu mises à jour (renvois au chapitre 9 du guide, règle de capture du contenu alignée sur la spécification OpenTelemetry).

Révisé le 25 octobre 2026 : textes d’introduction et de fin de page réécrits, quiz inchangé.