Dávkové zpracování
term_id: batch_processing
Category: engineering_practice
Definition
Dávkové zpracování zahrnuje agregaci vstupních dat do skupiny, neboli dávky, před provedením výpočtu nebo inferenčního kroku modelu. Tento přístup kontrastuje se zpracováním proudů v reálném čase tím, že umožňuje
Summary
Výpočetní metoda, při které se data sbírají v průběhu času a zpracovávají ve skupinách, nikoliv jednotlivě.
Key Concepts
- Optimalizace propustnosti
- Využití zdrojů
- Offline výpočty
- Skupinové provádění
Use Cases
- Trénink velkých neuronových sítí na historických datech
- Plánované ETL úlohy v datových skladech
- Generování nočních reportů