기본 콘텐츠로 건너뛰기

인공신경망


뉴런(Neuron)

활성 함수(Activation)
활성화와 비활성화를 결정한다

직선의 방정식
aX + b = y

곡선의 방정식
W1X1 + W2X2 + W3X3 + ... + b(Bias) = y

손실함수(Loss Function)
추정과 실제의 차이를 계산하는 함수
고차함수로 계산함
Label : 아주 많아짐
Prediction : 추정(실제값과 추정값을 비교해서 최적의 값을 찾아냄)
MSE(각각의 에러의 제곱의 평균,Mean Square Error) : 회귀
MAE
Binary_CrossEntropy : 
Categorical_CrossEntropy

확률적 경사하강법(SGD : Stochastic Gradiant Descendent)
가중치를 올려서 기울기 0(최적의 가중치)을 찾는 방법

최적화(Optimizer) : 학습률을 조정하는 것
학습률을 최적화 해준다
SGD(Stochastic Gradient Descent, 확률적 경사하강법)
Adam : 가장 좋은 옵티마이저

오차 역전파(Backpropagation)
과적합, 과소적합
순정파, 역전파

라벨:

이 블로그의 인기 게시물

Python 인공신경망 추천 시스템(회귀)

예제 # 인공신경망을 이용한 추천 시스템 # - 순차형(Sequential) 신경망 생성법 # - 함수형(Functional) 신경망 생성법 # - 지금까지 나온 추천 방식 중에서 가장 좋은 성능 # - Regression 방식으로 분석가능 # - 영화의 평점 정보(userid, movieid, rating) # - 이용자는 영화에 대한 취향이 모두 다르다 # - 영화는 다양한 장르가 혼합되어 있다 # - 이용자는 자신의 취향에 맞는 영화에 높은 rating을 제시함 # - 어떤 이용자에게 어떤 장르의 영화를 추천할 것인가? # __call__() 함수를 가진 클래스는 파이썬 함수 callable(클래스)를 사용하면 True를 반환한다 from tensorflow.keras.models import Sequential, Model from tensorflow.keras.layers import Dense, Embedding, Input input = Input(shape=(1,)) # 함수형 신경망 생성법 hidden1 = Dense(2, activation='relu')(input) # Dense(2, activation='relu')__call__() hidden2 = Dense(2, activation='relu')(hidden1) # callable.object callable(Dense) # __call__ 함수가 있으면 True, 없으면 False # Using Functional API from keras.models import Sequential from keras.layers import * model = Sequential() model.add(Input(shape=(3,))) # Input tensor model.add(Dense(4)) # hidden layer 1 model.add(Dense(units=4)) # hidden layer 2 model.add(Dense(units=1)) # ou...
더보기

Blogger

코드 하이라이트 사이트 http://hilite.me/ 코드 <!-- 나만의 공간 --> <style id='daru_css' type='text/css'> .code {      overflow: auto;      height: 200px;      background-color: rgb(239,239,239);      border-radius: 10px;      padding: 5px 10px; } .code::-webkit-scrollbar-thumb {      background-color: grey;      border: 1px solid transparent;      border-radius: 10px;      background-clip: padding-box;   } .code::-webkit-scrollbar {      width: 15px; } </style> <!-- 나만의 공간 -->
더보기

Javascript on 함수

엔터키 감지하기 <input type="password" onkeypress="func(event)" /> function func(event) {      if(event.keyCode == 13) { // keyCode 13은 엔터이다           alert("엔터를 입력했습니다.");     }     if (event.tartget.value == 13) {          alert("엔터를 입력했습니다.");     } }
더보기