无约束优化之线性搜索技术研究

来源 :兰州文理学院学报(自然科学版) | 被引量 : 0次 | 上传用户:xyc76821
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
梯度下降法及其变体是最常用的数值优化算法之一,也是迄今为止优化神经网络最常用的方法.在每一个最新的深度学习库中几乎都包含了各种优化的梯度下降法的实现.作为其关键子问题的线性搜索技术解决了梯度下降法带来的收敛速度慢、易陷入局部极值等缺点,实现了非线性函数求全局极值的快速收敛.本文对线性搜索技术及其收敛性进行深入研究,实现了基于Armijo条件的回溯算法,并对其性能进行了分析.
其他文献
以2017年怀柔区一带一路峰会期间立体花坛的设计与施工为例,阐述此次花坛方案设计构思、立体花坛主题设计、符合环境特点花坛方案出台以及施工管理过程;并通过施工中稳固的结
随着我国社会主义市场经济结构不断调整以及互联网经济的高速发展,依靠互联网就业谋生的灵活就业人员的数量也在日渐增加。在这一群体中平台型受雇就业占比较大,这部分劳动力往往未与平台签订劳动合同,但实质受雇于平台全职为平台提供劳动力,并获取报酬,本文将这一群体统称为平台型受雇就业群体。由于他们具有就业灵活性大、收入不稳定、劳动关系不明确等特点,而我国目前尚未出台专门针对这一群体设计的养老保险相关法律法规,
海外汉学的繁荣早已引起了学术界的关注,然而时至今日我们仍很少见到国内学界对海外汉学具体学者或作品的研究综述性文章的出现。即使是费正清这样的标志性人物,也没有一篇研
语文课程兼具工具性与人文性,二者的和谐统一是其最基本的特点。但当下的语文教学,重内容的理解分析,轻语言的表达运用,这严重影响了学生读写能力的提升。为此,教学中,教师不
高职院校学生顶岗实习是实践教学体系的重要组成部分,学生通过顶岗实习可熟悉会计工作的全过程,明确岗位职责,增长专业知识与技能,积累实践经验,从而有效提高就业竞争力。由于会计
ue*M#’#dkB4##8#”专利申请号:00109“7公开号:1278062申请日:00.06.23公开日:00.12.27申请人地址:(100084川C京市海淀区清华园申请人:清华大学发明人:隋森芳文摘:本发明属于生物技
1.通过上节课的学习。你觉得王勃是个什么样的人?2.课文中都督是如伺评价王勃的呢?(相机板书:真是奇才)什么样的人才能称为“奇才”?这样的人多吗?
以语言表达为核心的语言实际运用,即语用,在语文教学中具有“霸主”地位。因而,教师应该牢固树立语用意识,巧妙借用文本,从学生习得语言表达的角度出发,以独特的洞察力在教材
欧泰科吊挂系统能提高缝制效率30%,为什么?在普遍低迷同时充满诱惑的国内服装市场,如果服装企业的加工效率能比同行快那么一点点,哪怕只有5%,就能解决招工难及订单来不及做的