数据预处理

term_id: data_preprocessing

Category: basic_concepts

Definition

数据预处理是将原始的、非结构化或嘈杂的数据转换为标准化格式的关键任务，使机器学习模型能够有效处理这些数据。此阶段通常包括数据清洗、归一化、编码和特征缩放等操作。

Summary

将原始数据转换为干净、一致的格式，以便机器学习算法使用的过程。

Key Concepts

  • 数据清洗
  • 归一化
  • 编码
  • 特征缩放

Use Cases

  • 对数值输入进行缩放以促进神经网络收敛
  • 将文本标签转换为数值向量
  • 对传感器数据中的缺失值进行插补

Code Example

1
2
3

from sklearn.preprocessing import StandardScaler
scaler = StandardScaler()
data_scaled = scaler.fit_transform(raw_data)

Related