← Back to job listings
Y(
数据平台研发专家工程师(J14218)
YMTC (Yangtze Memory) · 湖北省·武汉市
About The Role
- 负责数据(湖)仓库体系的全生命周期建设,主导数据(湖)仓库架构设计、技术选型、
模型优化及落地实施,保障数据存储与查询效率,支撑数据实时、准实时处理需求;
- 负责 ETL/ELT 全流程开发工作,包括数据抽取、清洗转换、加载等核心环节;
- 深入理解业务场景,抽象复杂业务需求为数据解决方案,协同业务部门建立指标体系与
标签体系;
- 对接 BI 工具,提供高效数据服务支持,驱动数据驱动的业务决策闭环;
- 构建数据治理体系,主导元数据管理、数据标准制定及方案设计;
- 建立数据质量监控体系,构建数据血缘追踪机制,确保数据完整性与准确性;
- 建立数据流水线监控告警机制,制定灾备恢复策略,保障数据服务的稳定性和可靠性;
- 编制技术文档与操作规范,推动数据开发流程标准化建设。
- 本科及以上学历,5 年及以上相关工作经验;
- 精通 java/golang/python 任一语言;
- 精通数据仓库理论,掌握数据建模、数据分层设计方法论;
- 熟练掌握 Hadoop/Spark/Flink/Kafka 等大数据计算框架,熟悉实时数仓技术栈,有
大规模数据处理经验者优先;
- 熟练掌握 MySQL、MongoDB 等主流数据库,有 StarRocks 经验优先;
- 熟悉 Hudi、Iceberg、DeltaLake 等至少一项数据湖技术,有实践落地经验优先;
- 熟悉 HDFS 或对象存储,对列式存储格式,Parquet/ORC 的原理有了解优先;
- 具有数据血缘管理、数据质量监控体系搭建经验优先;
- 熟悉 BI 工具,如 Superset;
- 善于沟通,对业务敏感,能快速理解业务背景,具备优秀的技术与业务结合能力;
- 有良好的团队合作意识,较强的沟通能力,以及敬业和钻研精神,具备较强的逻辑思维
能力和问题解决能力。
This is an external listing. JobSpring does not represent or verify the employer. Report this listing
JobSpring