最新文章专题视频专题问答1问答10问答100问答1000问答2000关键字专题1关键字专题50关键字专题500关键字专题1500TAG最新视频文章推荐1 推荐3 推荐5 推荐7 推荐9 推荐11 推荐13 推荐15 推荐17 推荐19 推荐21 推荐23 推荐25 推荐27 推荐29 推荐31 推荐33 推荐35 推荐37视频文章20视频文章30视频文章40视频文章50视频文章60 视频文章70视频文章80视频文章90视频文章100视频文章120视频文章140 视频2关键字专题关键字专题tag2tag3文章专题文章专题2文章索引1文章索引2文章索引3文章索引4文章索引5123456789101112131415文章专题3
问答文章1 问答文章501 问答文章1001 问答文章1501 问答文章2001 问答文章2501 问答文章3001 问答文章3501 问答文章4001 问答文章4501 问答文章5001 问答文章5501 问答文章6001 问答文章6501 问答文章7001 问答文章7501 问答文章8001 问答文章8501 问答文章9001 问答文章9501
当前位置: 首页 - 教育 - 知识百科 - 正文

l1正则化和l2正则化的区别

来源:懂视网 责编:小采 时间:2020-11-19 06:23:42
文档

l1正则化和l2正则化的区别

L1是模型各个参数的绝对值之和。L2是模型各个参数的平方和的开方值。L1会趋向于产生少量的特征,而其他的特征都是0,因为最优的参数值很大概率出现在坐标轴上,这样就会导致某一维的权重为0,产生稀疏权重矩阵。L2会选择更多的特征,这些特征都会接近于0。
推荐度:
导读L1是模型各个参数的绝对值之和。L2是模型各个参数的平方和的开方值。L1会趋向于产生少量的特征,而其他的特征都是0,因为最优的参数值很大概率出现在坐标轴上,这样就会导致某一维的权重为0,产生稀疏权重矩阵。L2会选择更多的特征,这些特征都会接近于0。

l1和l2正则化的区别是:

  

  1、L1是模型各个参数的绝对值之和。L2是模型各个参数的平方和的开方值。

  

  2、L1会趋向于产生少量的特征,而其他的特征都是0,因为最优的参数值很大概率出现在坐标轴上,这样就会导致某一维的权重为0 ,产生稀疏权重矩阵。L2会选择更多的特征,这些特征都会接近于0。

  

  3、最优的参数值很小概率出现在坐标轴上,因此每一维的参数都不会是0。当最小化||w||时,就会使每一项趋近于0。

  

  

声明:本网页内容旨在传播知识,若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。TEL:177 7030 7066 E-MAIL:11247931@qq.com

文档

l1正则化和l2正则化的区别

L1是模型各个参数的绝对值之和。L2是模型各个参数的平方和的开方值。L1会趋向于产生少量的特征,而其他的特征都是0,因为最优的参数值很大概率出现在坐标轴上,这样就会导致某一维的权重为0,产生稀疏权重矩阵。L2会选择更多的特征,这些特征都会接近于0。
推荐度:
标签: 有什么 比较 不同
  • 热门焦点

最新推荐

猜你喜欢

热门推荐

专题ios正则表达式专题ipv4正则表达式专题正则\d专题正则表达式 工具专题中文 正则专题正则 中文专题py正则表达式专题js 正则 test专题中文正则专题正则中文专题正则表达式 教程专题find 正则表达式专题正则函数专题正则表达式 分组专题正则表达式 替换专题正则/g专题正则式专题正则\b专题正则化的作用专题正则化方法专题
Top