流式处理

term_id: streaming

Category: engineering_practice

Definition

流式处理指在数据生成时实时或近实时地持续摄入和处理数据。与处理固定数据集的批处理不同,流式系统管理无边界的数据流,能够即时响应数据变化。

Summary

一种数据处理范式,信息以小块形式连续处理,而非作为大型静态批处理。

Key Concepts

  • 实时处理
  • 增量更新
  • 低延迟
  • 无界数据

Use Cases

  • 金融交易中的实时欺诈检测
  • 物联网系统中的传感器数据实时监控
  • 动态内容推荐流