流式处理
Definition
流式处理指在数据生成时实时或近实时地持续摄入和处理数据。与处理固定数据集的批处理不同，流式系统管理无边界的数据流，能够即时响应数据变化。
Summary
一种数据处理范式，信息以 …
Data Engineering
Terms tagged with Data Engineering
LlamaIndex
Definition
LlamaIndex 原名 GPT Index，是一个强大的数据框架，使 LLM 能够摄入并与结构化和非结构化数据进行交互。它提供用于索引、查询和管理
Summary …
知识集成
Definition
知识集成涉及从不同来源（如数据库、本体和未结构化文本）合并数据，形成连贯的模式。它解决了语义异质性和不一致性问题。
Summary
将异构知识源合并为统一、一致表示的过程，以增强 …
批处理
Definition
批处理涉及在执行计算或模型推理之前，将数据输入聚合为一个组（即批次）。与实时流处理相比，这种方法允许对数据进行批量操作，从而提高效率。
Summary
一种计算方法，数据随时间收 …