StarRocks/Doris资深开发（大数据工程/画像标签）-上海

StarRocks/Doris资深开发（大数据工程/画像标签）-上海 【核心职责】 1、平台设计与开发： 参与设计和开发基于 StarRocks 的实时数据仓库架构，负责集群的规划、部署、监控和性能调优。 2、数据模型建设： 深入理解电商业务（如交易、流量、用户、商品、供应链等），设计并构建高效的 StarRocks 表模型（明细模型、聚合模型、更新模型、主键模型），以支持低延迟的即席查询和多维分析。 3、数据接入与集成： 负责将来自不同数据源（如 Kafka（实时日志）、MySQL（业务库）、Hive/Spark（离线数仓）、Flink（实时计算）等）的数据高效、稳定地导入到 StarRocks 中。 4、性能优化： 持续监控和优化 StarRocks 集群性能，包括但不限于 SQL 查询优化、索引策略、分区分桶策略、物化视图设计与使用，解决线上慢查询问题。 5、服务与赋能： 为业务方、数据分析师和产品经理提供稳定、高效的查询服务，并编写技术文档和最佳实践，赋能业务团队自助进行数据分析。 6、技术攻关： 跟进社区发展，研究并引入 StarRocks 的新特性（如 Pipeline 执行引擎、存算分离、数据湖分析等），解决高并发、海量数据下的技术挑战。 【职位要求】 一、必备要求： 经验背景： 1、计算机相关专业本科及以上学历，3年以上大数据领域开发经验。 2、至少1年以上的 StarRocks/Doris 核心开发或运维调优经验，深刻理解其架构原理（FE/BE、数据分布、查询流程等）。 3、拥有在电商、广告、金融等海量数据和高并发查询场景下的实战经验。 技术能力： 1、精通 SQL，具备丰富的 SQL 性能调优经验，能够快速定位并解决慢查询问题。 2、熟悉大数据生态，精通至少一种 OLAP 引擎，如 StarRocks/Doris, ClickHouse, Druid, Kylin 等。 3、熟悉 Linux 操作系统，具备良好的 Shell/Python 脚本编程能力，用于日常运维和自动化。 4、熟悉数据仓库建模理论（如维度建模），具备良好的数据模型设计能力。 数据链路： 1、熟悉实时和离线数据开发流程，有使用 Flink/Spark Streaming 进行实时数据处理的经验。 2、熟悉一种以上数据同步工具，如 Flink CDC, DataX, Canal, Debezium 等。 软技能： 1、具备强烈的责任心、优秀的问题分析和解决能力，能承担工作压力。 2、良好的沟通能力和团队协作精神，能够清晰地向业务方解释技术方案和局限性。 二、优先考虑： 参与过 StarRocks、Doris 或其他分布式分析型数据库内核开发者优先；