Prompt und Antwort

153 - Agenten verstehen: Warum Agenten am Multi-Turn scheitern


Listen Later

In Folge 12 von "Agenten verstehen" widmen wir uns lokalen Modellen wie Gemma 4 und Qwen 3.6. Wir klären, warum lokale Agenten trotz gigantischer Kontextfenster bei längeren Dialogen (Multi-Turn) oft völlig den Faden verlieren und wie wir das architektonisch lösen.Die Themen dieser Folge:

    • Der Multi-Turn-Kollaps: Warum Sprachmodelle durch "Aufmerksamkeitsverfall" (Attention Decay) oft schon nach fünf Runden ihre eigenen Regeln vergessen und voreilig halluzinieren, anstatt bei Unklarheiten nachzufragen.
    • Dense vs. MoE: Warum "Mixture of Experts"-Modelle bei längeren Unterhaltungen durch mathematische Routing-Probleme einbrechen und kleinere "Dense"-Modelle oft deutlich stabiler bleiben.
    • Hybride Pipelines: Warum ein Sprachmodell keine kritischen Aktionen mehr allein ausführen darf und wie strikte Code-Schichten (Konsistenz-Gates) das System vor dem Chaos bewahren.
    • Gedächtnis & Tests: Wie "Context Repacking" (kompakte Briefings statt langer Chat-Verläufe) den Kontextverfall stoppt und wie man sein Modell durch zerschnittene Aufgaben ("Sharded Simulation") einem echten Stresstest unterzieht.
...more
View all episodesView all episodes
Download on the App Store

Prompt und AntwortBy KI-Gilde