大数据高级研发工程师

团队介绍：字节跳动推荐架构国际化团队大数据方向，负责国际化推荐场景大数据的设计和开发，为业务提供标准化高性能的特征计算，保障系统稳定和高可用。 1、为大规模推荐系统设计和实现合理的数据系统； 2、生产系统的trouble-shooting，设计和实现必要的机制和工具保障生产系统整体运行的稳定性； 3、打造业界领先的流式计算框架等分布式系统，为海量数据和大规模业务系统提供可靠的基础设施。 【任职要求】 1、对大数据系统有深入的了解，在生产环境有TB级别Flink实时计算系统开发经验，深入掌握Flink DataStream、FlinkSQL、Flink Checkpoint、Flink State等模块，有Flink源码阅读经验优先； 2、熟悉常见消息队列原理和应用调优，有Kafka、Plusar、RocketMQ等项目源码阅读经验优先； 3、熟悉Java、C++、Scala、Python等编程语言，有强悍的编码和 trouble-shooting能力； 4、乐于挑战没有明显答案的问题，对新技术有强烈的学习热情，有PB级别数据处理经验加分； 5、有数据湖开发经验，熟悉Hudi、Iceberg、DeltaLake等至少一项数据湖技术，有源码阅读经验优先； 6、熟悉其他大数据系统经验者优先，YARN、K8S、Spark、SparkSQL、Kudu等； 7、有存储系统经验加分，HBase、Casscandra、RocksDB等。