Kötegelt feldolgozás

term_id: batch_processing

Category: engineering_practice

Definition

A kötegelt feldolgozás során az adatbemeneteket egy csoportba, vagyis egy kötegbe aggregálják a számítás vagy a modellinferencia végrehajtása előtt. Ez a megközelítés ellentétben áll a valós idejű adatsugárzási feldolgozással, mivel lehetővé teszi a

Summary

Egy számítási módszer, ahol az adatokat idővel gyűjtik össze, és csoportokban, nem pedig egyenként dolgozzák fel.

Key Concepts

  • Terhelésoptimalizálás
  • Erőforrás-hasznosítás
  • Offline számítás
  • Csoportos végrehajtás

Use Cases

  • Nagy neurális hálózatok tanítása történelmi adatokon
  • Ütemezett ETL (Extract, Transform, Load) feladatok adattárházakban
  • Havi/heti jelentések generálása