Mesurer l’immesurable : Comment évaluer les systèmes à base d’IA générative ?

Faire un POC avec un LLM prend 2 jours… avoir le cran de le brancher face à de vrais clients prend parfois 6 mois 😅 En interne sur 5 questions parfaites, tout le monde crie au génie. Mais pour la mise en prod, la question est : « Est-ce qu’on est VRAIMENT sûrs que ça marche bien ? » Erin Pacquetet, Ph.D. (Senior AI et Data Scientist chez SCIAM) nous donne des pistes pour exploiter les LLM tout en maîtrisant l’évaluation de leurs résultats. 👉 Au programme : limites des métriques classiques,…