8.3 快手-数据采集-一面凉经

面试时间:60min

我的方向是数据开发,但感觉数开岗位比较卷,加上之前也有一段网络爬虫的实习经历,投了快手的数据采集岗。面试官人还不错,主要问了爬虫项目和我简历上一些大数据的技能,但好像还是方向不太符合,他们更想要会Java开发、app逆向的,最后还一直安慰我。

面试官介绍部门业务和流程

现在还在实习吗?有其他公司在流程吗?

自我介绍

实习介绍?(公司,部门,项目)

开发的Xpath工具介绍?

分布式爬虫介绍一下?

项目中遇到的最困难问题?

常见的反爬封禁策略?

验证码登录这么解决的?除了使用第三方库有试着用机器学习解决吗?

APP数据采集是这么做的?抓包吗?做过逆向吗?

为什么使用MongoDB存储?和MySQL有什么区别?

Http状态码?

TCP和UDP区别?

post和get区别?

HBase读流程和写流程?有什么差异?那个效率更高?

Kafka的消息投递保证机制?

Java线程池相关?

Hive分区怎么存储?

将Json字段转成一行行数据,Hive怎么实现?(get_json_object+行转列??)

介绍几个Linux命令?

显示进程用那个?

top命令是做什么的?

修改一个文件每行第一个字符,该用什么命令,怎么设计?

MySQL中索引会失效的场景?

有优化过慢查询SQL吗,该这么做?

#快手信息集散地#  #数据人的面试交流地#
全部评论
***这问的和我的一摸一样
点赞 回复 分享
发布于 2023-08-22 17:58 广东
将Json字段转成一行行数据,Hive怎么实现?用炸裂函数吧
点赞 回复 分享
发布于 2023-08-17 18:12 广东
想要app逆向?你一面面试官姓陈的是吗😂
点赞 回复 分享
发布于 2023-08-07 13:59 湖北
难度感觉还行
点赞 回复 分享
发布于 2023-08-06 17:46 北京

相关推荐

11-06 16:50
门头沟学院 Java
用微笑面对困难:word打字比赛二等奖的我,也要来凑合凑合
点赞 评论 收藏
分享
头像
10-13 18:10
已编辑
东南大学 C++
。收拾收拾心情下一家吧————————————————10.12更新上面不知道怎么的,每次在手机上编辑都会只有最后一行才会显示。原本不想写凉经的,太伤感情了,但过了一天想了想,凉经的拿起来好好整理,就像象棋一样,你进步最快的时候不是你赢棋的时候,而是在输棋的时候。那废话不多说,就做个复盘吧。一面:1,经典自我介绍2,项目盘问,没啥好说的,感觉问的不是很多3,八股问的比较奇怪,他会深挖性地问一些,比如,我知道MMU,那你知不知道QMMU(记得是这个,总之就是MMU前面加一个字母)4,知不知道slab内存分配器->这个我清楚5,知不知道排序算法,排序算法一般怎么用6,写一道力扣的,最长回文子串反问:1,工作内容2,工作强度3,关于友商的问题->后面这个问题问HR去了,和中兴有关,数通这个行业和友商相关的不要提,这个行业和别的行业不同,别的行业干同一行的都是竞争关系,数通这个行业的不同企业的关系比较微妙。特别细节的问题我确实不知道,但一面没挂我。接下来是我被挂的二面,先说说我挂在哪里,技术性问题我应该没啥问题,主要是一些解决问题思路上的回答,一方面是这方面我准备的不多,另一方面是这个面试写的是“专业面试二面”,但是感觉问的问题都是一些主管面/综合面才会问的问题,就是不问技术问方法论。我以前形成的思维定式就是专业面会就是会,不会就直说不会,但事实上如果问到方法论性质的问题的话得扯一下皮,不能按照上面这个模式。刚到位置上就看到面试官叹了一口气,有一些不详的预感。我是下午1点45左右面的。1,经典自我介绍2,你是怎么完成这个项目的,分成几个步骤。我大致说了一下。你有没有觉得你的步骤里面缺了一些什么,(这里已经在引导我往他想的那个方向走了),比如你一个人的能力永远是不够的,,,我们平时会有一些组内的会议来沟通我们的所思所想。。。。3,你在项目中遇到的最困难的地方在什么方面4,说一下你知道的TCP/IP协议网络模型中的网络层有关的协议......5,接着4问,你觉得现在的socket有什么样的缺点,有什么样的优化方向?6,中间手撕了一道很简单的快慢指针的问题。大概是在链表的倒数第N个位置插入一个节点。————————————————————————————————————10.13晚更新补充一下一面说的一些奇怪的概念:1,提到了RPC2,提到了fu(第四声)拷贝,我当时说我只知道零拷贝,知道mmap,然后他说mmap是其中的一种方式,然后他问我知不知道DPDK,我说不知道,他说这个是一个高性能的拷贝方式3,MMU这个前面加了一个什么字母我这里没记,别问我了4,后面还提到了LTU,VFIO,孩子真的不会。
走呀走:华子二面可能会有场景题的,是有些开放性的问题了
点赞 评论 收藏
分享
评论
7
34
分享

创作者周榜

更多
牛客网
牛客网在线编程
牛客网题解
牛客企业服务