2017. Une équipe de Google publie un article intitulé Attention Is All You Need. Personne ne réalise que cet article va tout changer. Aujourd'hui, ChatGPT, Claude, Gemini, Mistral — tout est construit sur cette architecture. Dans cette capsule, Brief IA vous explique le transformeur sans équation et sans jargon.
Sources : Vaswani et al. Attention Is All You Need 2017, Stanford IA Index 2024, Google DeepMind Research Blog 2024.