웨이트초기화를 잘하자.

여러분은 웨이트의 값을 설정할때 어덯게 설정하시나요?????

필자는 웨이트와 바이어스를 설정하는 것이 항상 정해진 코드(개념)인줄 알았습니다. 하지만 오늘 강의를 듣고 나니 제 생각이 틀렸더라구요 (웃음)

저는 이전까지

W = tf.Variable(tf.random_normal([784, 10]))
b = tf.Variable(tf.random_normal([10]))

방법대로 초기값을 설정했었습니다. 

 하지만 이렇게 하면 문제가 생기더 군요..............

바로 웨이트의 처음 초기값이 '0'이 되게 되면 학습을 하게 되면 웨이트가 0 이기 때문에 학습이 되지 않는다는점.........

 

 

여러분은 알고 계셧나요???