大数据开发工程师

1. 设计和开发理想汽车大数据解决方案，优化现有的数据处理和工作流程，提高性能和稳定性； 2. 深入研究大数据计算存储相关源码，如Spark、Flink、StarRocks、Paimon、Iceberg、Hive等等，并在源码层面进行优化和改进，以满足业务需求和提高计算效率； 3. 参与理想汽车大数据集群的规划、部署和维护工作，优化Log、Trace和Monitor等方面的工作； 4. 协助业务团队进行性能调优、故障排查和资源优化工作，提供技术指导和培训。

1. 本科及以上学历，扎实的计算机基础和算法数据结构功底，良好的 Java 编程基础，了解大数据运行的原理； 2. 良好的沟通合作能力，热爱技术并善于钻研；能主动思考，有解决疑难问题的毅力和决心。 有以下经验的优先： 1. 熟悉 Spark、Flink、Mapreduce等一种或多种大数据系统原理及源码； 2. 熟悉 Presto、StarRocks、Doris、Clickhouse等一种或多种OLAP引擎的原理； 3. 熟悉 Hudi、Iceberg 及 Paimon 为代表的一种或多种数据湖技术； 4. 熟悉Kubernetes原理，有集群运维经验； 5. 熟悉JVM、IO、多线程、分布式、网络等相关技术； 6. 熟悉Java Web相关框架组件原理，例如：SpringCloud、Mybatis。