首页
题库
公司真题
专项练习
面试题库
在线编程
面试
面试经验
AI 模拟面试
简历
求职
学习
基础学习课
实战项目课
求职辅导课
专栏&文章
竞赛
搜索
我要招人
发布职位
发布职位、邀约牛人
更多企业解决方案
AI面试、笔试、校招、雇品
HR免费试用AI面试
最新面试提效必备
登录
/
注册
牛客674377号fighting
2017-08-16 11:10
已编辑
Akademia Rolnicza w Szczecinie Java
关注
已关注
取消关注
为啥给定初始值,梯度下降算法能取得最优值?
为啥给定初始值,梯度下降算法能取得最优值?
提示
全部评论
推荐
最新
楼层
骏博日博的迷弟
浙江交通职业技术学院 算法工程师
首先,泰勒展开,负梯度方向是descent direction。 其次,梯度下降(其他的line search、trust region也一样)只有在原问题是凸问题的情况下,才能保证以任意精度(因为毕竟是数值方法)取得最优解。 非凸情况下,改进的GD(比如随机初始化,escape saddle等trick等等)也只能保证以概率无限接近于1取得局部最优。
点赞
回复
分享
发布于 2017-08-16 11:12
haolexiao
北京大学 C++
泰勒定理展开取第一项,当delta x取导数的相反数的时候其稳定为负,所以就能一直下降
点赞
回复
分享
发布于 2017-08-16 11:08
我不是渣神
中国科学院大学 算法工程师
个人见解:梯度下降求解无约束最优化问题实现简单,好用。例如LR中的目标函数是光滑的凸函数,这时候保证能找到全局最优解,因为负梯度的方向朝向函数下降最快的方向,永远朝向全局最小值(最大值则反之)。当有多个极大值或极小值时,需要对梯度下降进行优化,比如动量,NAG,Adagrad,RMSprop等,可以减少陷入极大值极小值的可能性,设置得当可以得到全局最优解,但并不能100%保证获得全局最优解。
点赞
回复
分享
发布于 2017-08-16 10:58
256785
汽车之家_算法工程师
不一定啊,得是凸优化才行吧
点赞
回复
分享
发布于 2017-08-16 11:42
已删除
最初版本的GD是不能取得最优的,会陷入局部最优。
点赞
回复
分享
发布于 2017-08-16 11:16
暂无评论,快来抢首评~
相关推荐
05-07 10:50
东北农业大学 C++
c++简历求指导
投了十几个无人回应
花环鞣:
佬,我隔壁的
点赞
评论
收藏
分享
05-07 11:11
运营
半导体塑封模具调研分析:年复合增长率CAGR为4.6%(2026-2032)
半导体塑封模具在半导体器件封装流程中担当芯片保护与电引出核心精密工具,它针对经过晶圆锯切、管芯贴装和引线键合后的铅帧或基板条带,进行高温高压转移成型(transfer molding)操作,使用环氧树脂封装料(EMC)在模具闭合状态下通过柱塞推动熔融树脂经浇道(runner)、浇口(gate)精准注入多腔体(cavity)内,快速填充芯片周围空隙并固化形成坚固塑封体,将脆弱芯片与外部环境隔离,同时固定引线框架确保外引脚暴露用于后续连接;模具典型采用多腔并行设计,支持单条带数十至数百个器件同时成型,以匹配前段高节拍生产,内置顶出销(ejector pin)系统在开模后精确推出固化后的条带,避免粘...
点赞
评论
收藏
分享
04-13 21:04
已编辑
门头沟学院 C++
27届找实习
三月底投到现在至今0约面,是哪里出了问题,是背景问题还是简历问题呢希望大佬指点一下已修改,希望大佬指点一下
梦想不为空:
看着像ai写的简历,而且你就一个项目
听劝,我这个简历该怎么改...
点赞
评论
收藏
分享
04-27 20:33
华东理工大学 C++
春招至今0offer,我的人生会完蛋吗
太丢脸了 但是实在太焦虑了,请问一下26届的友友们,大家都找到工作了吗
夏目LTH:
这个真的很看运气,多投吧。我从去年十二月底一直投到现在,之前没一个offer,结果两周前投的一家面试官聊的特别好,直接速通offer还给的SP待遇开的比我期望都够。
我的求职进度条
点赞
评论
收藏
分享
05-08 09:24
武汉大学 C++
面试凉经,又凉了好没意思啊
海康威视嵌入式面经随记起初兴致勃勃地投了海康,没想到还是挂在了二面,感觉整体难度还好但是自己当时没想起来。复盘了一下,很多考点其实是有规律可循的。备考建议:如果你也在准备嵌入式方向,推荐先系统过一遍这份面经 我也是看完之后才意识到自己哪里没准备到位的。一面(50min)Linux 中断流程,谈谈你对中断上下文的理解C 语言字节对齐的规则,为什么要字节对齐?进程间通信的方式,为什么分用户空间和内核空间?C++ 多态怎么理解?C++ 有哪些多态的典型例子?C 语言程序运行时的内存分配const 关键字的用法extern C 有什么用?为什么声明 C 语言环境?与 C++ 环境区别?delete [...
查看26道真题和解析
点赞
评论
收藏
分享
评论
点赞成功,聊一聊 >
点赞
收藏
分享
评论
提到的真题
返回内容
全站热榜
更多
1
...
26届0offer0面试,准备送外卖😄
1.6W
2
...
27双非本暑期实习终于结束,分享一下timeline吧
1.0W
3
...
招了一年实习生,撑过三个月的一只手数得清
6997
4
...
得物暑期golang
6886
5
...
春招没进大厂,我的人生会完蛋吗
6651
6
...
腾讯云智暑期timeline
5754
7
...
许愿米哈游游戏客户端oc
5500
8
...
百度内部大调整批量毁offer
5316
9
...
破防了,腾讯技术实习月薪涨了近50%…
5300
10
...
现在的实习生都是不学就进来实习的吗?
5221
创作者周榜
更多
正在热议
更多
#
AI让海力士市值突破9000亿美元
#
119次浏览
7人参与
#
百度工作体验
#
334613次浏览
2276人参与
#
在爱玛,骑向未来
#
45795次浏览
440人参与
#
打工人的精神状态
#
154892次浏览
1561人参与
#
职场新人体验
#
193126次浏览
1250人参与
#
工作后,你落下了哪些病根
#
42576次浏览
300人参与
#
百度求职进展汇总
#
730566次浏览
6445人参与
#
机械人,说说你的烦心事
#
149078次浏览
1173人参与
#
简历当中有水分算不算造假?
#
176697次浏览
2330人参与
#
机械人,你最希望上岸的公司是?
#
218231次浏览
1946人参与
#
你收到了哪些公司的笔试?
#
69487次浏览
446人参与
#
毕业季,给职场新人一些建议
#
221679次浏览
2608人参与
#
工作压力大,你会干什么?
#
82828次浏览
713人参与
#
机械/制造每日一题
#
97989次浏览
1501人参与
#
如果秋招能重来,我会____
#
105619次浏览
514人参与
#
你以为的实习VS真实的实习
#
142948次浏览
758人参与
#
米哈游求职进展汇总
#
691506次浏览
3362人参与
#
招聘要求与实际实习内容不符怎么办
#
222908次浏览
1063人参与
#
重来一次,我还会选择这个专业吗
#
467474次浏览
3987人参与
#
稳定和高薪机械人更看重哪个?
#
594255次浏览
5583人参与
#
我想象的实习vs现实的实习
#
338692次浏览
2308人参与
牛客网
牛客网在线编程
牛客网题解
牛客企业服务