mish活性化関数を使う

pip install tensorflow-addonsでTensorFlowのaddonを入れると使えるようになる。

import tensorflow_addons as tfa
...
tfa.activations.mish(x)

参考： www.tensorflow.org