My Vision, Computer Vision

이 글은『오일석, Machine Learning(기계 학습), 한빛아카데미(2017년)』에서 공부한 내용을 토대로 작성되었다.https://mvcv.tistory.com/41 이 글에서 이어집니다. 평균 제곱 오차(Mean Squared Error)의 문제 위 그림을 보면 입력값 x가 1.5이고 타겟값이 0.0인 상태에서 왼쪽 노드는 0.7503, 오른쪽 노드는 0.9971을 출력값으로 내보낸 상황이다. 출력 노드는 한 개이기 때문에 평균제곱 오차의 목적함수는 다음과 같이 쓸 수 있다. ($\sigma$는 sigmoid 함수) $$e = \frac{1}{2}(y-o)^2 = \frac{1}{2}(y-\sigma(wx+b))^2$$ 위 그림에서 업데이트해야 할 파라미터는 w(weight)와 bias인데, ..

이 글은『오일석, Machine Learning(기계 학습), 한빛아카데미(2017년)』에서 공부한 내용을 토대로 작성되었다.4장 - 딥러닝 기초MLP가 등장하여 혁신을 이루던 1980년대 이미 깊은 신경망에 대한 아이디어는 나왔었다. 하지만 층을 늘릴수록 가중치가 소실되는 문제가 있었다. 이에 다양한 연구가 진행되고 1990년, 2000년에 걸쳐 딥러닝에 대한 긍정적인 연구 결과가 발표되었다.딥러닝 기술의 혁신 요인컨볼루션 신경망이 딥러닝의 가능성을 열었다.값싼 GPU가 등장하였다.인터넷 덕분에 학습 데이터가 크게 늘어났다.계산은 단순한데 성능은 더 좋은 활성함수가 개발되었다.학습에 효과적인 다양한 규제 기법이 개발되었다.층별 예비학습 기법이 개발되었다.특징 학습의 부각기계학습의 적용 범위는 분류, 회..