You're Not AI-Fluent Until You Understand Evals
Alex Lieberman · 9 min utiles
Pourquoi cette vidéo. Tu confies de plus en plus de travail à l'IA, souvent sans règle claire pour dire si le résultat est bon. Au tableau blanc, Viv Trivedy, de LangChain, explique à Alex Lieberman ce que les équipes techniques appellent une « eval » : une liste de tâches précises et, pour chacune, un contrôle qui répond oui ou non. Son meilleur conseil vaut pour tes emails et tes posts. Une grille de questions fermées juge mieux le ton qu'une note sur 10, où le modèle se réfugie presque toujours sur 7 ou 8 (06:30). La vidéo prolonge la règle « vérifier avant de livrer » de vendredi dernier.
Ce que tu peux en faire : la décision de l'année tient en une phrase : avant de généraliser un agent qui écrit à tes clients ou touche ton CRM, écris noir sur blanc ce qu'est un bon résultat, puis teste-le sur une copie de tes données plutôt que sur ta vraie base (11:00). Neuf minutes suffisent : regarde jusqu'à 09:00, puis ce passage sur les données de test. La suite s'adresse aux développeurs et met en avant les outils de LangChain.
Regarde, puis ferme l'onglet.