- Como você escolhe o parâmetro de regularização de tikhonov?
- Por que a regularização de L1 cria escassez?
Como você escolhe o parâmetro de regularização de tikhonov?
Dada uma função, uma estimativa do nível de ruído e um parâmetro positivo, escolha o parâmetro de regularização de modo que (2) d (α) = b δ para algum parâmetro b > b 0 . Se a solução não existir, escolha α (δ) = 0; Se esta equação tiver muitas soluções, escolha a menor solução.
Por que a regularização de L1 cria escassez?
Razão da escassidade
A regularização de L1 faz com que os coeficientes convergem para 0 rapidamente, pois a restrição limita todos. A taxa de convergência é maior para L1 devido à primeira derivada de perda simplesmente λ para L1, enquanto ser 2 λ 2 \ lambda 2λ para L2.