2024腾讯面试数据岗位

#软件开发2024笔面经#

0)项目中遇到哪些问题?
1)业务数据采集框架选择(FlinkCDC，Maxwell,Canal)
2)Dwd 层新老访客修复、Dws层用户回流状态过大，选择状态后端不合理导致OOM3)状态后端选择 RocksDB导致链路延迟过高
4)Dws层读取外部数据库维度数据网络延迟过高导致反压
5)数据倾斜导致的反压
6)Flink SQL 未设置 TTL 导致的 OOM
7)改变程序拓扑结构，通过Savepoint恢复程序未指定算子Uid 导致的报错
8)Kafka 分区动态增加，Flink键控不到新分区数据导致数据丢失
9)某个Kafka分区没有数据，导致 Flink下游水位线无法抬升，窗口无法关闭计算10) Kafka的问题(挂了、丢了、重复了、积压了、乱序了、如何提高吞吐量)11) Hbase 的rowkey设计不合理导致的数据热点问题
12) Redis做旁路缓存，与Hbase的数据一致性问题
13) Flink写Clickhouse的精准一次性问题
14) Clickhouse 的优化问题 #大数据#  #数据人的面试交流地#  #offer#