פונקציית הפסד

term_id: loss

Category: training_techniques

Definition

פונקציות הפסד, המוכרות גם כפונקציות עלות, מודדות עד כמה התחזיות של מודל למידת מכונה תואמות למציאות (Ground Truth) במהלך האימון. מטרת אלגוריתם האופטימיזציה היא למזער ערך זה

Summary

ערך מספרי המכמת את השגיאה בין התחזיות של המודל לערכי המטרה האמיתיים.

Key Concepts

  • פונקציית עלות
  • אופטימיזציה
  • ירידה במדרגה (Gradient Descent)
  • מדד שגיאה

Use Cases

  • אימון מסווגי תמונות
  • אופטימיזציה של מודלי רגרסיה
  • הערכת התכנסות המודל

Code Example

1
2
3
import torch.nn as nn
criterion = nn.CrossEntropyLoss()
loss = criterion(outputs, targets)