关注
RDD是Spark Core的API,相比DF的话偏底层一些,相比DF有更多的算子,实现逻辑更灵活,但同时带来的问题是交给Spark的优化空间比较小,Spark只能按你的逻辑来执行,性能你自己控制,而DF的话,像是数据库的一张表,携带数据信息,根据这些信息,Spark可以有自己的一套优化逻辑,所以Spark 3.0的优化大部分是SparkSQL方面的。
查看原帖
1 1
相关推荐
点赞 评论 收藏
分享
牛客热帖
更多
正在热议
更多
# 我的实习收获 #
18217次浏览 338人参与
# 夸夸我的求职搭子 #
190542次浏览 1890人参与
# 实习吐槽大会 #
20534次浏览 95人参与
# 小厂实习有必要去吗 #
46076次浏览 267人参与
# 晒一晒你的工位 #
82025次浏览 290人参与
# 我的租房踩坑经历 #
12002次浏览 167人参与
# 穿越回高考你还会选现在的专业吗 #
13866次浏览 188人参与
# 毕业旅行去哪玩儿 #
679次浏览 22人参与
# 工作压力大怎么缓解 #
78930次浏览 934人参与
# 实习中的菜狗时刻 #
365061次浏览 3290人参与
# 今年形式下双非本找得到工作吗 #
140060次浏览 1064人参与
# 互联网公司评价 #
382719次浏览 3796人参与
# 产运销实习日记 #
51737次浏览 544人参与
# 携程求职进展汇总 #
526153次浏览 3893人参与
# 你最满意的offer薪资是哪家公司? #
25683次浏览 134人参与
# 中兴求职进展汇总 #
602901次浏览 2641人参与
# 选完offer后,你后悔学机械吗? #
29068次浏览 162人参与
# 我的第一份实习怎么找的 #
105711次浏览 1041人参与
# 电网笔面经互助 #
33381次浏览 333人参与
# 机械人避雷的岗位/公司 #
17769次浏览 147人参与