大数据开发（CRM数据平台方向）

【工作职责】 1. 负责CRM营销触达大数据处理流程开发，基于Flink构建实时数据链路，基于Spark完成离线人群圈选与数据加工； 2. 对大数据任务进行性能调优，保障集群的高效与平稳运行，提升系统稳定性和可扩展性； 3. 持续升级计算存储架构，探索和引入新技术方案（如Paimon湖仓一体、实时特征计算等），更好支持业务增长； 4. 构建和优化数据仓库体系，支撑用户画像、标签体系、人群圈选等核心数据能力； 5. 参与数据质量治理和成本优化，推动数据链路的标准化和自动化。 【任职要求】 1. 计算机及相关专业本科及以上学历，5年以上大数据开发经验，具有扎实的代码功底； 2. 精通Hadoop/Hive/Spark/Flink等大数据计算框架，有大规模数据处理实战经验（实时流处理或离线批处理）； 3. 熟悉Java/Scala/Python至少一种编程语言，具备良好的编程习惯和工程能力； 4. 熟悉数据存储方案（HBase/Hive/Kafka/Elasticsearch/StarRocks等），能根据业务场景进行合理选型与性能优化； 5. 掌握数据建模方法论，熟悉数仓分层设计（ODS/DWD/DWS/ADS），有数据质量治理经验。 【加分项】 1. 熟悉Paimon/Iceberg等湖仓一体技术，或有实时特征计算/实时数仓建设经验； 2. 有电商领域用户画像、标签体系、人群圈选的数据开发经验； 3. 有StarRocks/ClickHouse等OLAP引擎的使用和调优经验； 4. 有数据成本优化经验（存储压缩、计算资源治理、任务调度优化等）； 5. 熟悉Docker/Kubernetes容器化部署，有云原生数据平台经验； 6. 有跨境电商或全球化数据开发经验； 7. 有Java后端工程开发经验（Spring Boot/微服务），能独立完成数据服务接口开发和平台工程化建设。 【软性-个性特征】 1. 业务驱动能力强，能主动理解营销业务场景，将业务需求转化为数据方案； 2. 愿意尝试新技术、新框架，接受业界大数据处理的新思想； 3. 具备较强的沟通能力和跨团队协作能力，能高效推动项目落地； 4. 对数据敏感，关注数据质量和处理效率，具备数据驱动思维； 5. 有技术热情，乐于分享和沉淀，能持续推动团队技术能力提升。