美团点评大数据开发工程师招聘


美团点评大数据开发工程师招聘

公司部门:美团点评技术工程及基础数据平台
所属部门:离线计算组
工作地点:北京美团点评总部
工作类型:实习/全职

【部门介绍】
美团点评技术工程及基础数据平台离线计算组拥有国内顶级的Hadoop集群规模与服务,主要负责Hadoop生态系统平台化的搭建,开发与维护服务,为美团点评所有的事业群,提供稳定的海量数据存储、计算、查询、数据分析平台,支撑起美团点评O2O和全渠道零售线上和线下大数据采集、整合、分析和应用。

团队在业内保持较高技术水平和影响力,有多个Hadoop开源项目的commiter与contributor; 主要突破事迹包括: 
1. 深度改造了Hadoop底层架构, 支撑万节点集群常态跨机房运行
2. 维护的YARN版本性能做到了社区的100倍以上,并支持异构资源和环境的调度,同时支撑离线/实时/机器学习/深度学习/模型在线服务的混部
3. 有两名Apache Kylin PMC和一名Apache Kylin committer,向多个开源项目贡献超过100个patch,尤其向Apache Kylin社区贡献了独立HBase集群、精确去重计数、分布式构建与HA、构建性能优化等5项核心改进
4. 向Spark社区贡献了基于磁盘的Shuffle实现,Shuffle并发控制,推测执行算法优化等核心模块优化改造

一些【公开资料】
美团大数据平台架构实践:http://www.infoq.com/cn/presentations/meituan-big-data-platform-architecture-practice
Apache Kylin在美团点评的应用:https://zhuanlan.zhihu.com/p/27461561
美团点评数据平台融合实践:https://tech.meituan.com/dataplat_coalesce.html
Spark在美团的实践:https://tech.meituan.com/spark-in-meituan.html

【工作职责】
- Spark/Hive/MapReduce, Tensorflow/MXNet, HDFS/HBase, Yarn, Kylin, Druid,Presto 等引擎性能改进、功能扩展、故障分析;
- 不断解决规模增长带来的技术和业务问题,构造高度稳定可用的大数据分布式系统, 支撑数据价值的持续交付.
- 构建与持续迭代符合公司数据开发新模式需要的计算平台能力. 如机器学习pipeline, 下一代BI分析能力.

【要求】
1. 熟悉常用数据结构与算法,代码能力必须过关。
2. 熟练掌握Java/Python/C ,熟练应用其中两者优先。
3. 学习能力强,对新技术能快速上手。
4.对分布式计算平台有理解和一定的实践经验, 对于构建超大规模集群系统以及革新开源架构有浓厚的兴趣.

下面几项是【加分项】,有其中一项或者多项最佳:
1. 有上述分布式计算平台内核研究经验优先。
2. 熟悉常见的机器学习算法或者深度学习算法优先。
3. 有科研能力并有成果发表在国际顶级会议、期刊者优先。

该团队现面向2018届的有能力的小伙伴开展部门定向招聘(包括校招正式岗位和长期实习岗位)

请发送简历到:mtdpzhaopin@163.com
简历及邮件主题命名方式:简历 姓名 学历 学校 专业,谢谢
#美团#
全部评论
绝对真实有效,欢迎加入新美大,简历砸过来吧! 期待你的加入~~~
点赞 回复
分享
发布于 2017-11-09 22:44

相关推荐

点赞 14 评论
分享
牛客网
牛客企业服务