cs

deep learning

    [DL] RNN(Recursive Neural Network)의 이해

    RNN(Recurrent Neural Network) Sequential data 일반적으로 deep neural network에서는 input과 output이 하나의 vector인 one-to-one으로 이루어진다. 하지만 어떤 경우에는 sequential data가 input이나 output에 포함되는 경우가 있다. 예를 들어 stochastic process(time series)나 ordered data structures가 있다. speech recognition이 time series에 해당하는 주요 예시가 될 것이고, machine translation이 ordered data structure의 예가 될 것이다. 이런 경우에 one-to-many나 many-to-many, many-to-o..

    [paper review] ImageNet Classification with Deep Convolutional Neural Network (AlexNet)

    Abstract participated in LSVRC-2010 contest classify 1.2 million high-resolution images into the 1000 different classes on the test data, acheived top-1 and top-5 error rate of 37.5% and 17.5% architecture has 60 million parameters and 650,000 neurons consists of 5 Conv layer, 3 FC layer Used non-saturating neuron and GPU implementation 1. Introduction 지금까지의 machine learning method를 이용한 object r..