【美团点评】【实习生】美团数据平台大数据开发实生内推 ~
部门介绍:
美团点评基础数据部的离线计算组
拥有国内顶级的hadoop集群规模与服务,主要负责Hadoop生态系统平台化的搭建,开发与维护服务,为美团点评所有的事业群,提供稳定的海量数据存储、计算、查询、数据分析平台,支撑起美团点评O2O和全渠道零售线上和线下大数据采集、整合、分析和应用。
团队在业内保持较高技术水平和影响力,有多个hadoop开源项目的commiter与contributor,主要突出成果包括:
1. 深度改造了hadoop底层架构, 支撑万节点集群常态跨机房运行
2. 维护的YARN版本性能做到了社区的100倍以上,并支持异构资源和环境的调度,同时支撑离线/实时/机器学习/深度学习/模型在线服务的混部
3. 有两名Apache Kylin PMC和一名Apache Kylin committer,向多个开源项目贡献超过100个patch,尤其向Apache Kylin社区贡献了独立HBase集群、精确去重计数、分布式构建与HA、构建性能优化等5项核心改进
4. 向Spark社区贡献了基于磁盘的Shuffle实现,Shuffle并发控制,推测执行算法优化等深度架构调整
一些公开资料:
美团大数据平台架构实践
Apache Kylin在美团点评的应用
美团点评数据平台融合实践
Spark在美团的实践
工作地点:北京 美团点评总部
工作职责:
- HDFS/HBase/Ceph等大数据分布式存储系统的性能改进、功能扩展、故障处理;
- 不断解决规模增长带来的技术和业务问题,确保大数据存储系统的稳定、高效、易用;
职位要求:
- 熟悉java/c /c/python等至少一门开发语言
- 熟练掌握软件开发,数据结构等计算机基本知识
- 对互联网技术保持强烈热情和强烈好奇心
- 对技术有着永无止境的追求,自认为是技术Geek,具备很强的问题解决能力优先;
- 熟悉Hadoop生态系统或其他开源存储项目源代码经验者优先;
- 2020,2019应届生同学优先,实习后优先转正
邮箱:mtdpzhaopin@163.com
主题:简历-学校-专业-姓名-学历