-
정규화 ridge(L2), lasso(L1) 와 ElasticNet 의 차이확률 및 통계 2022. 1. 24. 14:44




grid Search -->모든 조합 계산
Error 최소화되는 점 찾기 --> lambda 1,2 찾기





Prior Knowledge 를 이용해서 제약을 가해보자 !

람다가 무한대면 베타에 대해서 제약을 많이 가한다
모든 베타가 0이될수없어서 constant 한 값을 가진다



tunning parameter t -> 0 이 감으로 제약을 가함
중간에 0으로 떨어지는 변수가 있음(빨간색 기준)
selection 되는 효과가 있음(lasso에는)

solution path
lasso 마름모 형태로 나타남
모서리에서 0 이 되서 베타 값이 0 이되는 경우가 발생

'확률 및 통계' 카테고리의 다른 글
LOSS, likelihood (0) 2022.01.24 joint probability 결합확률 = 조건부확률 *( 예상 확률 ) (0) 2022.01.24 Cross Entropy (0) 2022.01.24