易百教程

28、什么是 Swish 函数?

Swish 是一种新的自门控激活函数。谷歌的研究人员发现了 Swish 功能。根据他们的论文,它比 ReLU 表现更好,具有相似的计算效率水平。