SparkSQL Cache操作

dataframe用.cache()或者.persist()进行缓存

1、df.cache()等同于df.persist()或df.persist(storageLevel=pyspark.StorageLevel.MEMORY_AND_DISK)

table用.catalog.cacheTable进行缓存

全部评论

相关推荐

昨天 17:57
欣旺达_嵌入式软件工程师(准入职员工)
网易互娱内推，网易互娱内推码
网易**不管问你啥，记住一个话术原则小小的提醒下各位留子：**时不要直来直去有啥说啥；千万得多思考别说太满给自己留个思考或回旋的余地・1、被问 “有没有接触过网易的产品”（哪怕了解不多）别直接说 “没有”（容易显得缺乏兴趣）试试：“之前用过网易云音乐和网易新闻，对产品的界面设计和功能逻辑有过留意。虽然没有深入研究，但能感受到网易产品注重用户体验的特点，入职后会系统学习相关产品知识”・2、被问 “能接受高强度的项目加班吗”别勉强说 “没问题”（后续可能难以承受）试试：“我理解互联网行业项目推进时需要集中精力，在关键节点愿意配合团队加班。但也会注重提升工作效率，合理规划时间，尽量在正常工作时间完成...
点赞 评论 收藏
分享
头像
01-26 17:29
已编辑
牛客创作者运营
第三期「创作模范」名单揭晓！速来围观
上周的优质模范诞生啦！！让我们一同见证这些精彩内容✨我们根据“活人感、实用价值、情绪价值、内容独特性、时效性/话题性” 五大维度，层层筛选，优中选优，最终精选出本期优质内容模范。它们或是戳心共鸣的成长感悟，或是干货满满的经验分享，是成长故事、经验分享赛道的典型优质内容。创作模范每周持续更新，期待更多创作者深耕赛道，为大家带来走心、优秀的内容！【✨本期创作模范名单✨】✨经验攻略赛道：《把多线程的事情做好的关键，不是时间管理》作者：@sagima✨成长故事赛道：《天选华为人图鉴》作者：@段段Steady✨经验攻略赛道：《实习产出如何包装？》作者：@永泽one✨成长故事赛道：《阶段性的迷茫不过是人生...
点赞 评论 收藏
分享
昨天 15:45
已编辑
华中科技大学 前端工程师
大三寒假找不到大厂实习应该先小厂实习一段嘛
大三前端但是0实习，1月陆陆续续面了MiniMax，字节，小红书、米哈游、虾皮，除了字节发感谢信其他在泡池子今天boss上一个小厂hr打招呼，感觉条件挺优厚的，感觉可以干到4月再面暑期问问牛油们可以去试试嘛1.29新编虾皮日常oc了，多面中大厂总有机会的🥹
COLORSN：可以试一下，小厂看技术栈是不是很落后，如果太拉胯就别去，个人认为有实习氛围比你自己琢磨要高效不少，然后就是小厂其实也有可能会问的很难，这都比较难说，还是看自己项目含金量够不够，寒假还能不能推进学习再选择，毕竟去实习过年就10天假了
点赞 评论 收藏
分享
01-28 12:56
快手_快STAR广告引擎(准入职员工)
光峰科技内推，光峰科技内推码
结构工程师面试经验： 1. 自我介绍 2. 项目介绍 3. 使用的三维软件、仿真软件是什么？ 4. 建的模型里几个零部件之间的约束方式 5. 对身边常见的一些产品的内部构件有什么了解？ 6. 它们通过什么方式组装/连接？ 7. 如果给你个鼠标让你设计，首先要了解什么参数和内容？ 8. 对结构工程师岗位的认知 9. 未来的职业规划 10. 工作地点的选择 11. 家庭情况 12. 反问环节光峰科技2026届校园招聘进行中~【招聘岗位】光学 / 硬件 / 算法岗 / 产品研发类 / 技术研发类 / 产品类【我们提供】极具竞争力的薪酬回报机制+产品技术重大创新奖金、专利奖、国际三大工业设计奖等专项激...
点赞 评论 收藏
分享
评论
点赞
收藏
分享

全站热榜

更多

创作者周榜

更多
正在热议
更多
# 今年春招是金一银二嘛？ #
16627次浏览 190人参与
# 总结:哪家公司面试体验感最好 #
78956次浏览 439人参与
# 赚钱的意义在这一刻具象化 #
8048次浏览 181人参与
# 来聊聊你目前的求职进展 #
717173次浏览 6982人参与
# 没关系，至少我的__很曼妙 #
7310次浏览 128人参与
# AI求职实录 #
9924次浏览 282人参与
# 抛开难度不谈，你最想去哪家公司？ #
9317次浏览 174人参与
# 为什么有人零实习也能进大厂？ #
9124次浏览 196人参与
# 1月小结：你过的开心吗？ #
3298次浏览 67人参与
# AI时代的工作 VS 传统时代的工作，有哪些不同？ #
11750次浏览 287人参与
# 你的第一家实习公司是什么档次？ #
7414次浏览 101人参与
# 快手年终开大包 #
2055次浏览 39人参与
# 当你问AI“你会取代我的工作吗”，它说_？ #
5973次浏览 180人参与
# 你的landing期是如何度过的？ #
12204次浏览 235人参与
# 牛客吐槽大会 #
6512次浏览 119人参与
# 除了Java，最推荐学什么技术？ #
9954次浏览 210人参与
# 你见过最离谱的招聘要求是什么？ #
255074次浏览 1730人参与
# 机械人你知道哪些单休企业 #
83513次浏览 417人参与
# 初创公司值得加入吗？ #
37479次浏览 217人参与
# 你觉得什么岗位会被AI替代 #
37509次浏览 256人参与
牛客网
牛客网在线编程
牛客网题解
牛客企业服务