大数据架构后端开发工程师

核心技能 - 负责公司核心业务系统的数据ETL开发工作，使用Hive和Spark SQL完成数据抽取、转换与加载，优化ETL流程。 - 熟练掌握大数据技术栈，包括Hadoop、Spark、Flink、Hive、Kafka等，具备丰富的分布式系统设计与开发经验。 - 深入理解数据仓库架构，能够高效完成数据建模、ETL设计与优化，熟悉数据湖架构及技术实践。 - 熟悉 Linux 操作系统和相关操作 - 熟悉 docker/k8s 相关运维服务 - 可以使用 1-2 种脚本语言（Python）开发 - 熟悉Redis缓存、消息队列（如Kafka、RabbitMQ）的使用； - 有云平台（如AWS、阿里云、腾讯云）开发经验者优先。 - 有高并发、分布式系统开发经验者优先；