본문 바로가기

Ann9

[ANN] 05. Output Layer and Forward Propagation 이번에는 세번째 글로 인공신경망(ANN)의 출력층 설계 및 순전파에 대해서 알아보겠습니다. 예전에 Regression에서 알아본 내용을 다시 회상해보면서 시작해 보겠습니다. 인공신경망(ANN)의 개요 및 퍼셉트론과의 차이점 인공신경망(ANN)의 활성화함수(AF, Activation Function) 인공신경망(ANN)의 출력층 설계 및 순전파(Forward Propagation) 인공신경망(ANN)의 손실함수(Loss) 구현 수치미분 및 편미분, 그리고 GDA 인공신경망(ANN)의 역전파(Back Propagation) 개념 인공신경망(ANN)의 역전파(Back Propagation) 구현 0. Regression 회상 이전에 Regression에 대해서 목적과 실제 코드로 구현하여 3가지 종류에 대해서.. 2020. 5. 12.
[ANN] 04. Activation Function of Neural Network 이번에는 ANN의 개별 node에 적용되는 활성화함수(AF, Activation Function)에 대해서 알아보도록 하겠습니다. 기존에 퍼셉트론에서 알아본 node에 적용된 임계치를 통해서 넘을때 1, 못넘으면 0... 이것도 활성화함수(AF)의 종류중에 하나입니다. 인공신경망(ANN)의 개요 및 퍼셉트론과의 차이점 인공신경망(ANN)의 활성화함수(AF, Activation Function) 인공신경망(ANN)의 출력층 설계 및 순전파(Forward Propagation) 인공신경망(ANN)의 손실함수(Loss) 구현 수치미분 및 편미분, 그리고 GDA 인공신경망(ANN)의 역전파(Back Propagation) 개념 인공신경망(ANN)의 역전파(Back Propagation) 구현 활성화함수는 기본적.. 2020. 5. 9.
[ANN] 03. Basic of Neural Network 이번 글부터 몇회가 될지 모르게 여러 회 동안 인공신경망(Artificial Neural Network)에 대해서 알아보려 합니다. 인공신경망은 기계학습(Machine Learning)과 딥러닝(Deep Learning)에서 인간의 중추신경계 중 뇌에서 뉴런을 통해 발전된 알고리즘입니다. 그 논리적인 내용에 대해서는 기존 퍼셉트론을 통해서 인공신경망(ANN)의 개별 Node대해서 그 형태 및 동작방식에 대해서 알아보았습니다. 2020/05/06 - [Tensorflow] - [ANN] 01. Single Layer Perceptron [ANN] 01. Single Layer Perceptron 그 동안 일이 있어서... 진짜 오랫만에 새로운 글을 쓰게 되었습니다. 어느정도 상황이 정리되어서 마음을 다잡고.. 2020. 5. 8.
[ANN] 02. Multi Layer Perceptron 이번에는 지난시간에 알아본 SLP(Single Layer Perceptron)에 대해서 컴퓨터를 만들려고 보니... 인공신경망의 등장에 지대한 영향을 끼친 XOR의 문제와 그 해결방법으로 고안된 MLP(Multi Layer Perceptron)에 대해서 알아보겠습니다. 뉴런과 비교 및 SLP(Single Layer Perceptron) 구현 MLP(Multi Layer Perceptron)의 등장배경 및 구현 1. XOR은 무엇인가... SLP로 구현이 가능한가? SLP을 기준으로 생각해보면, 퍼셉트론의 결과는 Node를 통해서 Sum과 임계치의 비교를 통해서 나오게 되며... 이는 공식으로 보자면, X1 * W1 + X2 * W2 + b 이고, Matrix Multiply로 보면 X * W + b 따라.. 2020. 5. 7.