소프트맥스 썸네일형 리스트형 Python(33)- 비선형 활성화 함수 *이 글을 읽기전에 작성자 개인의견이 있으니, 다른 블로그와 교차로 읽는것을 권장합니다.*1. 비선형 활성화 함수(Activation Functions)신경망의 성능을 향상시키기 위해 사용 선형 함수는 입력값과 가중치를 곱한 결과를 그대로 출력하기 때문에, 신경망에서 여러 개의 레이어를 사용한다면 최종 출력값은 입력 값과 가중치의 선형 조합으로 표현되므로 입력 데이터의 비선형 관계를 표현할 수 없음 신경망이 입력 데이터의 비선형 관계를 잘 학습할 수 있도록 하기 위해 비선형 활성화 함수가 필요 활성화 함수 조건: 미분 가능 요약 : 선형 함수 + 비선형 함수 = 비선형 함수1-1. 시그모이드import numpy as npimport matplotlib.pyplot as pltdef sigmoid(x):.. 더보기 이전 1 다음
