Skip to content
← Back to job listings

数据平台研发专家工程师(J14218)

YMTC (Yangtze Memory) · 湖北省·武汉市

External listingFull-time3 months ago

About The Role

  1. 负责数据(湖)仓库体系的全生命周期建设,主导数据(湖)仓库架构设计、技术选型、

模型优化及落地实施,保障数据存储与查询效率,支撑数据实时、准实时处理需求;

  1. 负责 ETL/ELT 全流程开发工作,包括数据抽取、清洗转换、加载等核心环节;
  2. 深入理解业务场景,抽象复杂业务需求为数据解决方案,协同业务部门建立指标体系与

标签体系;

  1. 对接 BI 工具,提供高效数据服务支持,驱动数据驱动的业务决策闭环;
  2. 构建数据治理体系,主导元数据管理、数据标准制定及方案设计;
  3. 建立数据质量监控体系,构建数据血缘追踪机制,确保数据完整性与准确性;
  4. 建立数据流水线监控告警机制,制定灾备恢复策略,保障数据服务的稳定性和可靠性;
  5. 编制技术文档与操作规范,推动数据开发流程标准化建设。
  6. 本科及以上学历,5 年及以上相关工作经验;
  7. 精通 java/golang/python 任一语言;
  8. 精通数据仓库理论,掌握数据建模、数据分层设计方法论;
  9. 熟练掌握 Hadoop/Spark/Flink/Kafka 等大数据计算框架,熟悉实时数仓技术栈,有

大规模数据处理经验者优先;

  1. 熟练掌握 MySQL、MongoDB 等主流数据库,有 StarRocks 经验优先;
  2. 熟悉 Hudi、Iceberg、DeltaLake 等至少一项数据湖技术,有实践落地经验优先;
  3. 熟悉 HDFS 或对象存储,对列式存储格式,Parquet/ORC 的原理有了解优先;
  4. 具有数据血缘管理、数据质量监控体系搭建经验优先;
  5. 熟悉 BI 工具,如 Superset;
  6. 善于沟通,对业务敏感,能快速理解业务背景,具备优秀的技术与业务结合能力;
  7. 有良好的团队合作意识,较强的沟通能力,以及敬业和钻研精神,具备较强的逻辑思维

能力和问题解决能力。

This is an external listing. JobSpring does not represent or verify the employer. Report this listing