Observabilité et sécurité de l'IA
Cette leçon couvre le monitoring des systèmes IA avec Langfuse et la protection contre les risques de sécurité.
Comme un médecin qui surveille les signes vitaux — l'observabilité de l'IA suit la latence, le coût et les erreurs du LLM pour repérer les problèmes avant que les utilisateurs ne les ressentent.
- Langfuse
- Une plateforme d'observabilité pour LLM qui enregistre les traces, la latence et le coût de chaque appel.
- Prompt injection
- Une tentative d'un utilisateur de remplacer le system prompt via le message utilisateur.
- Fuite de PII
- La fuite d'informations personnelles identifiables (noms, emails, cartes bancaires) à travers les réponses de l'IA.
- Abus de coût
- Un abus de l'API par l'envoi de requêtes excessives qui provoquent des coûts incontrôlés.