Exploration-Exploitation-Dilemma
term_id: explorationexploitation_dilemma
Category: training_techniques
Definition
Bei Entscheidungsprozessen stehen Agenten vor einem Zielkonflikt: Sie können ihr aktuelles Wissen nutzen, um die beste unmittelbare Belohnung zu erhalten, oder unbekannte Optionen erkunden, um möglicherweise bessere langfristige Strategien zu finden.
Summary
Das Exploration-Exploitation-Dilemma ist ein grundlegendes Problem im Verstärkungslernen, bei dem ein Agent zwischen der Erkundung neuer Aktionen zur Informationsgewinnung und der Ausnutzung bekannter Aktionen zur Maximierung der Belohnung wählen muss.
Key Concepts
- Belohnungsmaximierung
- Epsilon-Greedy
- Upper Confidence Bound (Obere Konfidenzgrenze)
- Verstärkungslernen
Use Cases
- Empfehlungssysteme, die entscheiden, ob sie populäre oder neue Artikel vorschlagen
- A/B-Tests in Marketingkampagnen
- Ressourcenallokation in dynamischen Umgebungen