贝叶斯优化
Definition
贝叶斯优化使用概率代理模型（通常为高斯过程）来建模目标函数。它采用采集函数来平衡探索与利用，从而高效地找到最优参数配置。
Summary
一种用于全局优化昂贵评估黑盒函数的顺序设 …
Hyperparameters
Terms tagged with Hyperparameters
批大小
Definition
批大小是一个关键的超参数，决定了在更新模型内部参数之前处理多少个样本。较大的批大小能提供更准确的梯度估计，但可能增加内存需求并影响收敛特性。
Summary
在随机梯度下降算法的 …
学习率
Definition
学习率决定了在每次训练迭代中，模型权重相对于计算出的梯度更新了多少。如果学习率过高，可能导致模型在优化过程中越过最优解；如果过低，则可能导致训练收敛缓慢。
Summary
控制模 …
率
Definition
在AI中，“率”最常指学习率，这是一个超参数，控制每次更新模型权重时，根据估计误差对模型进行调整的幅度。一个适……
Summary
频率或速度的度量，通常指优化中的学习率或令牌生 …