AMAADOR ACADEMYCertificatsVérifier un certificat

RAGE

Test final — Construire des applications RAG et LLM

Répondez aux 43 questions. Il faut 80 % ou plus pour réussir. Vous pouvez réessayer autant de fois que vous le souhaitez.

Suivre la formation →

Question 1Quel problème la génération augmentée par la recherche résout-elle le mieux ?
Question 2Une FAQ de 10 pages change rarement et quelques employés la consultent chaque jour. Quelle est la conception la plus simple et solide ?
Question 3Quelles étapes du RAG tournent normalement hors ligne, à chaque changement des documents ?
Question 4Un assistant affiné cite encore les prix de l’an dernier après un changement de tarifs. Quelle est la bonne correction ?
Question 5Un assistant RAG donne de mauvaises réponses. Les journaux montrent que le passage contenant la bonne règle n’est jamais arrivé dans le prompt. Où concentrer l’effort ?
Question 6Pourquoi une réponse RAG doit-elle afficher ses sources ?
Question 7Un responsable estime qu’un avertissement dans la fenêtre de chat (« les réponses peuvent être fausses ») suffit et que les contrôles d’ancrage sont facultatifs. Quelle est la meilleure réponse ?
Question 8Pourquoi documents et requêtes doivent-ils être transformés avec le même modèle d’embedding ?
Question 9Une équipe passe à un embedding plus récent pour les nouveaux documents seulement, et la qualité de recherche baisse. Quelle est la bonne correction ?
Question 10Quel élément est le plus utile à stocker avec chaque vecteur pour sécuriser une future migration de modèle ?
Question 11Des passages d’environ 2000 jetons donnent des correspondances floues et remplissent le prompt de texte hors sujet. Quel est le meilleur changement ?
Question 12Qu’ajoute la recherche contextuelle à chaque passage avant son embedding et son indexation ?
Question 13Le corpus est en français et en arabe, et un modèle d’embedding centré sur l’anglais renvoie de mauvais résultats. Que faire ?
Question 14Dans pgvector, quel type d’index n’exige aucune phase d’entraînement et peut être créé sur une table vide ?
Question 15Un assistant multi-clients filtre par identifiant de client. Avec un filtre très sélectif, une requête de 10 résultats n’en renvoie que 3. Quel remède est judicieux ?
Question 16Sur quoi la fusion de rangs réciproques s’appuie-t-elle pour fusionner une liste lexicale et une liste vectorielle ?
Question 17Une équipe porte hnsw.ef_search de 40 à 200. À quoi s’attendre, et que faut-il faire ?
Question 18Pourquoi n’applique-t-on un reclasseur qu’à un nombre limité de candidats, et non à tout l’index ?
Question 19Une question hors corpus récupère des passages de très faible similarité, et pourtant l’assistant rédige une réponse assurée. Que faut-il ajouter ?
Question 20Pourquoi étiqueter chaque passage source avec un identifiant comme [S3] dans un prompt ancré ?
Question 21Deux documents récupérés donnent des préavis différents : une politique de 2022 et une de 2025. Que doit dire le prompt ?
Question 22Quand un modèle renvoie un appel d’outil, qui exécute réellement l’outil ?
Question 23Le modèle renvoie un JSON auquel manque un champ obligatoire de votre outil de consultation de commande. Quelle gestion est robuste ?
Question 24Quel type d’outil exige les contrôles les plus stricts, comme des limites et une validation humaine ?
Question 25Avec un outil de recherche, le modèle l’appelle 40 fois sur une question vague et la requête expire. Que doit faire l’équipe ?
Question 26Pourquoi évaluer séparément la recherche et la génération ?
Question 27En évaluation RAG, que mesure un score de fidélité (ancrage) ?
Question 28Le rappel à 5 n’est que de 55 % sur le jeu de test et les réponses sont souvent fausses. Que doit améliorer l’équipe en premier ?
Question 29Un modèle juge note mieux les réponses longues même lorsqu’elles sont moins exactes. Quelle est la meilleure réponse ?
Question 30Outre les questions avec réponse, quels cas doivent figurer dans un bon jeu de test ?
Question 31Une modification du prompt améliore la moyenne, mais un cas de question juridique échoue désormais. Que doit faire le processus de livraison ?
Question 32Qu’est-ce que l’injection de prompt indirecte ?
Question 33L’interface de chat affiche la sortie du modèle en Markdown et charge toute URL d’image. Un document piégé fait produire au modèle un lien d’image dont l’adresse transporte des données privées. Quel contrôle aide le plus ?
Question 34Où faut-il appliquer les droits d’accès aux documents dans une application RAG ?
Question 35Un développeur place une clé d’API et des adresses de serveurs internes dans le prompt système « car les utilisateurs ne le voient pas ». Quelle est la bonne décision ?
Question 36Quelle combinaison rend un assistant LLM particulièrement dangereux ?
Question 37Un utilisateur exerce son droit à l’effacement et le document source est supprimé. Une semaine plus tard, l’assistant le cite encore. Qu’a-t-on oublié ?
Question 38Pourquoi mettre le texte stable au début du prompt et le texte variable à la fin ?
Question 39Le fournisseur du modèle subit une panne en heures ouvrées. Quelle solution de repli préparée garde les utilisateurs productifs ?
Question 40Pourquoi suivre le 95e centile de la latence et pas seulement la moyenne ?
Question 41Après une montée de version du modèle, les plaintes augmentent en quelques heures. L’équipe a gardé les versions du prompt, du modèle et de l’index. Quelle est la meilleure suite ?
Question 42Quelles données doivent figurer dans la trace de chaque requête pour le débogage ?
Question 43La tâche d’ingestion nocturne échoue en silence depuis trois semaines et l’assistant cite une procédure périmée. Quelle supervision manquait ?