[❓질문] 활성화함수 추천좀

[딥부이(108.147)]

은닉층에 relu 출력층에 softmax 쓰는데 다른 함수 써보고싶음

함수 추천좀...

[익명(218.232)]

리키렐루

[딥부이 1(58.142)]

swish, mish

[익명(39.7)]

Gelu

[익명(58.238)]

SwiGlu

[딥부이 2(118.235)]

어허 이번 한번만 해드립니다

[딥부이 3(223.38)]

하이퍼볼릭 탄젠트

[딥부이 4(211.36)]

Rz게이트

[딥부이 5(165.132)]

Mo?LU

[딥부이 6(152.99)]

swish