← Back to job listings
SK
Data Engineer Databricks / AWS / Spark (H/F) - Paris
skiils · Lille, Hauts-de-France, France
About The Role
Rejoins Data Factorii, une entreprise spécialisée dans la valorisation des données. En tant que Data Engineer, tu seras responsable du développement et de l'évolution des plateformes de données, de la conception des pipelines de traitement de données, et de la participation au développement des services Data. Tu travailleras également sur des traitements Big Data, l'évolution des infrastructures Cloud, l'industrialisation des développements, et la collaboration avec les équipes techniques.
- Développer et faire évoluer des plateformes de données, concevoir de nouveaux cas d'usage et maintenir les applications existantes.
- Concevoir des pipelines de traitement de données, développer des traitements robustes et performants pour collecter, transformer et mettre à disposition les données.
- Participer au développement des services Data, concevoir des APIs et des services d'ingestion en Python/Django afin de faciliter l'exploitation des données.
**Concrètement, qu'est-ce qu'on demande ?**
### En 1er, un savoir-être en phase avec notre culture
- Tu es autonome, rigoureux(se) et force de proposition.
- Tu apprécies travailler en équipe sur des projets complexes.
- Tu possèdes un excellent esprit d'analyse et sais résoudre des problématiques techniques.
- Tu es curieux(se) et en veille permanente sur les technologies Data et Cloud.
- Tu accordes une grande importance à la qualité du code et à l'amélioration continue.
### En 2nd, un bagage technique solide
- Une expérience de **4 à 8 ans** en tant que Data Engineer.
- Une excellente maîtrise de **Python**, idéalement avec **Django**.
- Une solide expérience sur **Apache Spark** et **Databricks**.
- Une bonne maîtrise de **SQL** et de **PostgreSQL**.
- Une expérience des environnements **AWS** et/ou **Microsoft Azure**.
- Une bonne connaissance de **Kubernetes** (EKS), **Rancher** et des architectures conteneurisées.
- Une expérience des outils CI/CD (**GitLab, Jenkins, Docker, Harbor...**).
- Une connaissance des systèmes de messagerie (MQ) serait appréciée.
- Une expérience des méthodologies **Agile / Scrum**.
### Les petits plus qui feront la différence
- Une expérience sur des plateformes Data critiques ou à forte volumétrie.
- Une bonne compréhension des architectures distribuées et des environnements cloud.
- **Une expérience dans le secteur ferroviaire, des transports ou des infrastructures critiques sera fortement appréciée.**
- Et surtout, tu souhaites mettre tes compétences Data au service de projets à fort impact, dans un environnement technique stimulant et en constante évolution ?
- **Alors rejoins Data Factorii et participe à la conception des plateformes Data de demain !**
This is an external listing. JobSpring does not represent or verify the employer. Report this listing
JobSpring