Tiền xử lý dữ liệu

term_id: data_preprocessing

Category: basic_concepts

Definition

Tiền xử lý dữ liệu là nhiệm vụ thiết yếu nhằm biến đổi dữ liệu thô, không cấu trúc hoặc nhiễu thành định dạng chuẩn hóa mà các mô hình học máy có thể tiêu thụ hiệu quả. Giai đoạn này thường bao gồm làm sạch, chuẩn hóa và mã hóa.

Summary

Quy trình chuyển đổi dữ liệu thô thành định dạng sạch sẽ, nhất quán, phù hợp cho các thuật toán học máy.

Key Concepts

  • Làm sạch dữ liệu
  • Chuẩn hóa
  • Mã hóa
  • Thang đo đặc trưng

Use Cases

  • Thang đo đầu vào số để hội tụ mạng nơ-ron
  • Chuyển đổi nhãn văn bản thành vectơ số
  • Điền giá trị bị thiếu trong dữ liệu cảm biến

Code Example

1
2
3
from sklearn.preprocessing import StandardScaler
scaler = StandardScaler()
data_scaled = scaler.fit_transform(raw_data)