확장(Scaling)
term_id: scaling
Category: basic_concepts
Definition
확장(Scaling)은 더 많은 레이어, 뉴런 또는 학습 예제를 추가하여 AI 시스템을 확장하는 능동적인 방법론입니다. 여기에는 증가하는 계산 부하를 처리하기 위해 여러 GPU에 걸쳐 분산 훈련을 수행하는 기술이 포함됩니다.
Summary
학습 능력과 성능을 향상시키기 위해 모델 크기나 데이터 볼륨을 조정하는 과정입니다.
Key Concepts
- 분산 훈련(Distributed Training)
- 모델 복잡도
- 과적합(Overfitting)
- 하드웨어 가속(Hardware Acceleration)
Use Cases
- 분산 딥러닝
- 신경망 깊이 증가
- 학습 코퍼스 확장