보통의 개발자

본 내용은 Do it! 정직하게 코딩하며 배우는 딥러닝 입문(이지스퍼블리싱) - 박해선 저자님의 책을 읽고 공부를 목적으로 작성한 글입니다. 코드는 https://github.com/on1ystar/Do-it-DL 에 Google Colab 파일(jupyter notebook)로 업데이트 될 예정입니다. 03-3 손실 함수와 경사 하강법 손실 함수 예상한 값과 실제 타깃값의 차이를 함수로 정의한 것으로 보통 '제곱 오차 ' 를 손실 함수로 사용한다. 제곱 오차(squared error)는 다음과 같다. 경사 하강법은 이런 식으로 정의된 손실 함수의 최소가 되는 지점을 찾아가는 방법이다. 위 식을 전개해 보면 가중치 w와 절편 b에 대한 2차식으로 각각 나타낼 수 있다. 식을 보면 w^2의 계수와 b^2의..