Рассказывается о:
Softmax

Cross Entropy

ReLU

2-Layer NN

Backprop

Dropout

CNN (Свёрточная NN) - включая Convolution, Pooling

RNN

LSTM