数据平台开发工程师（离线计算方向）

岗位职责： 1. 负责离线计算基础组件&平台的开发和维护工作，保证系统的稳定、高效 2. 参与离线数据处理架构设计，提升数据开发效率和数据质量 工作内容： 1. 负责离线计算基础组件（Hadoop、Spark、Hive等）的优化和稳定性建设 2. 负责离线数据平台建设，提升数据开发、调度和运维效率 3. 解决离线数据处理中的性能瓶颈和稳定性问题 【任职要求】 1. 工作经验3～5年，本科学历及以上 2. 熟悉Linux操作系统，熟练使用Shell、Python等脚本语言 3. 精通Java或Scala，对分布式计算和性能调优有深刻理解，熟悉JVM原理，有JVM调优经验者优先 4. 熟悉Hadoop生态组件（HDFS、YARN、MapReduce），熟练掌握Spark或Hive，有实际的性能调优和故障排查经验 5. 有技术追求，善于利用AI工具提升开发和问题解决效率 6. 责任心强，具备良好的问题分析和解决能力 7. 熟悉任务调度系统（如Airflow、DolphinScheduler等）者优先 成长建议： 1. 深入学习Hadoop、Spark核心原理和源码，理解分布式计算底层机制 2. 探索AI工具在大数据开发中的应用场景，持续提升工作效率 3. 关注业界离线计算优化实践和新技术发展趋势