激活函数

这次就想把激活函数从 ReLU 到 Swish 的实践过程梳理一遍，毕竟这东西调不好，模型再复杂也白搭。