Jour 8 sur 14 · Production AI Engineering · 14 min
Systèmes d’évaluation
D’une poignée de prompts de test à un système de mesure qui protège chaque livraison
Dans le cours Débutant, vous avez construit un . En production, vous avez besoin d’un système : des jeux de données qui grandissent, des scores auxquels vous pouvez faire confiance et des portes qui arrêtent les régressions avant que les utilisateurs ne les voient. L’évaluation est la pratique d’ingénierie la plus importante dans le travail sur l’IA.
Ce que couvre cette leçon
- 01Trois niveaux d’évaluation
- 02Des métriques adaptées au système
- 03Des juges fiables
- 04Gérer le bruit
- 05En faire une porte
- 06Alimentez-le depuis la production
Inclus dans cette leçon
- 9diapositives commentées
- 3cases de bande dessinée
- 3questions de quiz
2 modèles de prompts
- Membres
Eval Plan
A one-page plan for measuring an AI feature
- Membres
Pairwise Judge Prompt
Compare two versions with reduced bias
Suivez la leçon complète gratuitement
Inscrivez-vous pour débloquer la leçon complète, la présentation commentée, les modèles et le quiz — et avancer vers votre certificat.
Commencer le cours — gratuit