shine_hyun shine_hyun

Softmax 활성화 함수 역전파 (backpropagation algorithm) 소프트 맥스 함수 (softmax) 출력벡터에 소프트 맥스 함수를 합성하면 특정 클래스에 속할 확률로 해석할 수 있다. def softmax(output): denum = np.exp(output - np.max(vec,axis=-1, keepdims=True)) num = np.sum(denum, axis=-1, keepdims=True) val = denum/num return val 활성화 함수 선형 함수 여러개가 비선형성을 띌 수 있도록 합성하는 함수 여러 활성함수가 있지만, 믿고 쓰는 Relu.. 선형모델에 활성함수를 합성한 함수를 신경망(perceptron)이라 부른다. 다중 퍼셉트론 (Multi Layer P..