首站-论文投稿智能助手
典型文献
球面上l1正则优化的随机临近梯度方法
文献摘要:
本文研究球面上的l1正则优化问题,其目标函数由一般光滑函数项和非光滑l1正则项构成,且假设光滑函数的随机梯度可由随机一阶oracle估计.这类优化问题被广泛应用在机器学习,图像、信号处理和统计等领域.根据流形临近梯度法和随机梯度估计技术,提出一种球面随机临近梯度算法.基于非光滑函数的全局隐函数定理,分析了子问题解关于参数的Lipschtiz连续性,进而证明了算法的全局收敛性.在基于随机数据集和实际数据集的球面l1正则二次规划问题、有限和SPCA问题和球面l1正则逻辑回归问题上数值实验结果显示所提出的算法与流形临近梯度法、黎曼随机临近梯度法相比CPU时间上具有一定的优越性.
文献关键词:
球面约束;l1正则优化;随机梯度估计;全局隐函数定理;全局收敛
作者姓名:
米玲;薛文娟;沈春根
作者机构:
上海理工大学理学院,上海200093;上海电力大学数理学院,上海,200090
文献出处:
引用格式:
[1]米玲;薛文娟;沈春根-.球面上l1正则优化的随机临近梯度方法)[J].计算数学,2022(01):34-62
A类:
全局隐函数定理,Lipschtiz,逻辑回归问题,球面约束
B类:
l1,正则优化,优化问题,光滑函数,数项,非光滑,正则项,oracle,信号处理,流形,梯度法,随机梯度估计,种球,梯度算法,子问题,全局收敛性,随机数据,实际数据,二次规划问题,SPCA,上数,数值实验,黎曼,CPU
AB值:
0.262181
相似文献
机标中图分类号,由域田数据科技根据网络公开资料自动分析生成,仅供学习研究参考。