深度学习面试问题汇总(二)
文章目录
深度学习面试问题汇总(二)
Batch Normalization、Layer Normalization、Instance Normalization、Group Normalization
1BN
1.1什么是**internal covariate shift**问题?具体表现是什么呢?
1.2BN的具体实现及细节问题
2LN
3GN
4 BN、LN、IN、GN的区别
优化器
1. Batch gradient descent(BGD)
2.Stochastic gradient descent(SGD)
3. Mini-batch gradient descent(MBGD)
4.Adam
文章目录
深度学习面试问题汇总(二)
Batch Normaliza