IFTTD - If This Then Dev

#338.src - Evaluation de GenAI: Pourquoi l'évaluation de l'IA n'a rien d'automatique avec Louis Pinsard


Listen Later


"La solution à tout, pour moi, c'est une complémentarité de technologie. Mais pour ça, il faut comprendre les limites de chacune."

Le D.E.V. de la semaine est Louis Pinsard, cofondateur et CTO chez Dialog. On plonge dans les coulisses de l'évaluation des modèles d'intelligence artificielle générative appliqués au e-commerce. Louis partage comment son équipe adapte tests A/B, datasets et observabilité pour améliorer les performances des assistants IA. Ils abordent la difficulté des tests unitaires face au non-déterminisme des LLM et la nécessité de nouvelles pratiques, notamment contre les hallucinations. Un échange pragmatique sur l'humain derrière la tech et l'importance de garder un esprit critique face à la hype GenAI.

Chapitrages

00:01:00 : Introduction à l'IA Générative

00:01:30 : Présentation de Louis

00:01:53 : Être AI First

00:05:10 : Évaluation des Modèles

00:09:09 : Outils d'Observabilité

00:09:53 : Tests Unitaires en IA

00:12:28 : Agents et Workflow

00:17:55 : Évaluation des Réponses

00:18:29 : Évaluation et Labellisation

00:23:08 : Démarche de Recherche

00:26:09 : L'Importance des ML Engineers

00:28:45 : Conversion vs Qualité

00:34:54 : Gestion des Hallucinations

00:39:00 : Normes de Qualité

00:43:34 : Humanisation des Réponses

00:47:02 : Recommandations et Conclusion

Liens évoqués pendant l'émission

Thomas Walter : Comment j'ai codé 2 mois de features en 3 semaines

🎙️ Soutenez le podcast If This Then Dev ! 🎙️ Chaque contribution aide à maintenir et améliorer nos épisodes. Cliquez ici pour nous soutenir sur Tipeee 🙏

Archives | Site | Boutique | TikTok | Discord | Twitter | LinkedIn | Instagram | Youtube | Twitch | Job Board |

Hébergé par Audiomeans. Visitez audiomeans.fr/politique-de-confidentialite pour plus d'informations.

...more
View all episodesView all episodes
Download on the App Store

IFTTD - If This Then DevBy Bruno Soulez | Orso Media

  • 5
  • 5
  • 5
  • 5
  • 5

5

3 ratings


More shows like IFTTD - If This Then Dev

View all
Le rendez-vous Tech - RDV Tech by NotPatrick

Le rendez-vous Tech - RDV Tech

41 Listeners

Tech&Co, la quotidienne by BFM Business

Tech&Co, la quotidienne

12 Listeners

Thinkerview by Thinkerview

Thinkerview

81 Listeners

Génération Do It Yourself by Matthieu Stefani | Orso Media

Génération Do It Yourself

114 Listeners

Artisan Développeur by Benoit Gantaume

Artisan Développeur

2 Listeners

C dans l'air by France Télévisions

C dans l'air

122 Listeners

La Martingale by Orso Media

La Martingale

24 Listeners

Le Panier by Laurent Kretz | Orso Media

Le Panier

11 Listeners

Silicon Carne, un peu de picante dans un monde de Tech ! by Carlos Diaz

Silicon Carne, un peu de picante dans un monde de Tech !

76 Listeners

Pitch Pong by Orso Media

Pitch Pong

1 Listeners

Message à caractère informatique by Clever Cloud

Message à caractère informatique

0 Listeners

Mediarama by François Defossez | COSA

Mediarama

1 Listeners

Les Investisseurs 4.0 by Paco Debonnaire

Les Investisseurs 4.0

8 Listeners

HugoDécrypte - Actus et interviews by Hugo Décrypte

HugoDécrypte - Actus et interviews

88 Listeners

Underscore_ by Micode

Underscore_

20 Listeners

Nota Bene by Benjamin Brillaud

Nota Bene

18 Listeners

LEGEND by Guillaume Pley

LEGEND

173 Listeners

Les Lueurs by Jonathan Langlois

Les Lueurs

17 Listeners