Improvements and additions to usage in production and interaction with end users

[bowni]

List of topics to study to improve/complement the existing eval elements and answer items:

[U] Usages en production

U1- Si usage en production, quelle procédure de validation pour passage en prod ? Intéressant d’avoir une checklist de tout ce qui doit être vérifié, validé

U2- Usages en inférence : a) logger les prédictions réalisées ; b) avec un id unique du modèle utilisé. Cela permet d’analyser a posteriori d’éventuels cas inattendus

U3- Si erreurs constatées / remontées par utilisateurs : les logger et les exploiter

[I] Interactions avec les utilisateurs finaux / parties prenantes des systèmes d’IA

I1- Répondre aux utilisateurs qui demandent des infos ou remontent des points !