发现模型加bn,很快就会过拟合,不加bn,还是会过拟合,只是学得慢而已。嗐,难道还是数据问题吗?
激活函数试试relu、leakyrelu和gelu吧
normalization还是bn吧,前面试过其他的,也都差不多。
后面接两层全连接吧,要不试试全连接不加偏置?
算了,什么都不会,好菜呀
发现模型加bn,很快就会过拟合,不加bn,还是会过拟合,只是学得慢而已。嗐,难道还是数据问题吗?
激活函数试试relu、leakyrelu和gelu吧
normalization还是bn吧,前面试过其他的,也都差不多。
后面接两层全连接吧,要不试试全连接不加偏置?
算了,什么都不会,好菜呀