Jour 8 sur 14 · Production AI Engineering · 14 min

Systèmes d’évaluation

D’une poignée de prompts de test à un système de mesure qui protège chaque livraison

Dans le cours Débutant, vous avez construit un . En production, vous avez besoin d’un système : des jeux de données qui grandissent, des scores auxquels vous pouvez faire confiance et des portes qui arrêtent les régressions avant que les utilisateurs ne les voient. L’évaluation est la pratique d’ingénierie la plus importante dans le travail sur l’IA.

Ce que couvre cette leçon

  1. 01Trois niveaux d’évaluation
  2. 02Des métriques adaptées au système
  3. 03Des juges fiables
  4. 04Gérer le bruit
  5. 05En faire une porte
  6. 06Alimentez-le depuis la production

Inclus dans cette leçon

  • 9diapositives commentées
  • 3cases de bande dessinée
  • 3questions de quiz

2 modèles de prompts

  • Eval Plan

    A one-page plan for measuring an AI feature

    Membres
  • Pairwise Judge Prompt

    Compare two versions with reduced bias

    Membres

Suivez la leçon complète gratuitement

Inscrivez-vous pour débloquer la leçon complète, la présentation commentée, les modèles et le quiz — et avancer vers votre certificat.

Commencer le cours — gratuit