工作职责：1. 数据湖构建: 收集存储各交易所、数据商提供的数据；与研究同事沟通需求，开发程序对市场基础数据进行初始评估，清洗计算，供因子计算和策略开发使用；2. 数据维护: 关注数据更新任务的执行情况，确保数据及时更新。理解数据内容的基础上，编写检查程序对数据进行质量检查，确保数据质量，及时发现并处理数据异常；3. 用户支持: 协助研究同事使用数据，处理异常，推荐正确的数据集，改进使用效率；4. 数据治理：规划数据治理框架和数据标准，包含数据标准管理、主数据管理、元数据管理、数据质量管理、数据生命周期管理等领域的规划；制定数据标准、数据管理体系和流程。任职要求：1. 国内外知名大学本科及以上学历，计算机等相关专业；2. 2-4 年数据相关工作经历；3. 做事细心负责，注意细节，有求知欲；4. 优秀的沟通能力，执行力及团队合作精神。技能要求：5. 熟悉 Linux 操作系统，能够编写 Shell 脚本6. 熟悉 SQL 语法，有 Clickhouse, MySQL, MS SQL Server 等数据库使用经验优先7. 熟悉 Scala 或 Python，熟练使用 SparkSQL 进行数据处理8. 熟悉各类存储系统，有 MinIO, HDFS 使用经验优先9. 熟悉 Airflow 等调度执行工具，熟悉 Hudi 等数据湖工具10. 了解数据治理的相关概念，有实际项目经验优先11. 了解 Datahub, Metserver 等元数据管理工具12. 了解 Docker, Kubernetes, Jenkins 等 CI/CD 工具引流芷瀚卡方上国象貔坤上善御富启林盈赢茂源佳期会世成均元盛资本蒙玺纽达锐天高塔同花顺凯读鸣熙金湖无量敦和世纪前沿雷根顽岩灏象德劭偲科聆香农量派卓识奥奇.齐夫衍盛桥水赫富知至恒天算量化量道文艺复兴中信期货千惠艾略特九坤虑得衍复集微金戈量锐思勰念空致诚卓远希格斯涵德城堡投资通怡海悦高盈国际泛态火币靖奇衍舟玄元量游盛泉恒元二西格玛量桥伯兄双隆龙旗天演盛冠达凯纳千象鲁民投明崚君拙磐通灵均量盈黑翼平方和问月元胜投资艾方高维