FFNN(Feed Forward Neural Net) 배경 **트랜스포머(transformer)**를 이해하려면 Attention을 이해해야한다. Attention을 이해하려면 RNN을 이해해야하고 RNN을 이해하기 위해선 FFNN을 이해해야한다. FFNN은 아래 목차 수준으로 이해하고 있으면 된다. 퍼셉트론이란 AND분류 OR분류 XOR분류 직선 두 개를 이용한다. Multi-layer Perceptron MLP학습을 위해 해야할 일 Input Layer의 Node 수 결정 output Layer의 Node 수 결정 hidden Layer의 Node 수 결정 학습 Algorithm을 이용한 weight 추정 Forward propagation Back-propagation알고리즘 이용 Activatio..