首页
题库
公司真题
专项练习
面试题库
在线编程
面试
面试经验
AI 模拟面试
简历
求职
学习
课程
专栏·文章
竞赛
搜索
我要招人
发布职位
发布职位、邀约牛人
更多企业解决方案
在线笔面试、雇主品牌宣传
登录
/
注册
时间的终点线
获赞
0
粉丝
0
关注
0
看过 TA
0
男
河北科技大学
2012
数据采集
IP属地:河北
大数据攻城狮
私信
关注
拉黑
举报
举报
确定要拉黑时间的终点线吗?
发布(3)
刷题
时间的终点线
2020-07-22 22:31
已编辑
数据采集
2020-07-22 最近工作总结
从7月初开始安排任务去写spark程序,到现在为止将近一个月的时间,收获颇多,今天程序终于写完上线,抽时间总结一下开发过程中遇到的问题及经验。刚开始安排开发spark程序,要求是将数据实时的存储到phoenix内,我内心是感觉很轻松的,毕竟原来也开发过类似的程序,但是当我开始开发后,wtf!!!根据需求来看居然无法使用phoenix的原生api实现,也就是说使用savetophoenix方法是行不通, 于是再次确认产品相关细节,最后得到结果,无法使用原生api,只能通过jdbc的方式去实现,好吧,多少有点心虚,毕竟没有这么干过。但是没办法,在其位谋其职,只能硬着头皮写,接下来就是各种查资料,搜...
0
点赞
评论
收藏
转发
时间的终点线
2020-06-16 21:23
已编辑
数据采集
2020-06-03 记sqoop的一个小坑
今天工作中通过sqoop导出hive内数据到Mysql内,sqoop版本是1.4.6,当时导出设置参数--update-key指定了3个主键,但是Mysql内建表未设置主键,想当然的以为sqoop导出数据只在sqoop脚本内指定主键就可以,与mysql关系不大,导出数据后惊奇的发现,数据量不对!!!在导一次还是不对。。。经过网上查询相关资料,有说mysql内的主键和--update-key参数指定主键有关系。。好吧,重新在mysql内建表,并指定相对应的主键,最终问题解决。耗时1个小时总算成功导出数据。。再次记录一下。但是其中的具体原理尚未搞懂,需要有时间在去查一些资料。。留个小问题。。希望有...
0
点赞
评论
收藏
转发
时间的终点线
2020-04-18 14:02
数据采集
2020-04-18
在牛客打卡1天,今天学习:刷题 123 道
0
点赞
评论
收藏
转发
1
工具箱
TA的圈子
暂未加入圈子
TA的圈子
TA的笔记
暂无笔记
TA的笔记
登录
0
天
已登录
0
天
连续登录
0
人
今日访客
牛客网
牛客企业服务