이론/메모

작은 네트워크

gldmg 2018. 9. 23. 16:44

네트워크(신경망) 크기가 작을 수록

내부 구조에 대한 영향을 많이 받음.


그래서 더 다양한 시도를 해볼 필요가 있음.

optimizer

dropout

batchnormal

l1 norm, l2 norm

등등