- 岗位职责
和业界顶尖的工程师一起构架实现维护高性能高稳定百PB级别的大数据存储平台。
实现单日百TB以上数据到数据中心高效传输以及高稳定的单日PB级别数据到不同应用场景的消费。一起打造⽆人驾驶⾏业私有云数据存储规范化标准,建立起数据从⻋到存储中心,再到消费中心的全栈⾼效解决方案。
- 岗位要求
1.构建维护基于ZFS,HDFS和GlusterFS分布式⽂件系统;
2.设计实现分层式存储结构,实现存取数据的加速;
3.利用快照和冗余码技术实现数据的高稳定性;
4.设计实现基于存储卷和存储块为基本单元的存储结构;
5.跟踪监控文件系统的健康信息
技能要求:
1.本科及以上学历,2-5年年分布式存储⼯工作经验;
2.2+年左右HDFS, GlusterFS, ZFS 或者相关类分布式(ceph,FastDFS 等)文件系统操作经验;
3.了解RAID,存储池,⽂件快照,冗余码先关技术;
4.熟悉文件系统灾备和灾备恢复;
5.有过分层式存储系统操作经验 (了解基于内存的分布式文件系统,例如Alluxio) ;
6.日常存储卷的创建,管理和维护;
7.熟悉⽂件系统层的监控;
8.数据Spark、YARN 等分布式处理框架 (prefer)