题目 ID: q-12133

深度学习常用的一些知识点如relu，warmup的作用，只答上原理和公式，不记得作用了。