questionet
제곱 손실함수, 절대값 손실함수 본문
제곱손실함수와 절대값 손실함수의 차이
제곱손실함수를 사용할 때 scale이 너무 크면 값이 비정상적으로 커져서 노이즈 데이터가 생성될 수 있다.
노이즈 데이터가 너무 많이 생성될 거 같으면 절대값 손실 함수를 사용한다.
'Learning questions > 쉽게 이해되지 않는 것들' 카테고리의 다른 글
SGD + Momentum에서 velocity vector는 어떻게 구하는 거지? (0) | 2021.02.25 |
---|---|
normalization, standardization, regularization (0) | 2021.02.02 |
부동 소수점 방식이 낳는 문제는 무엇인가? (0) | 2021.01.18 |
learning rate 와 optimization algorithm의 관계 (0) | 2021.01.17 |
embedding layer (0) | 2021.01.15 |