Data Engineer/Data Ops (IT)
Location
Guyancourt, Yvelines | France
Job description
Dans le cadre de refonte de la plateforme de Cash Management, du désengagement de la stack HDP, nous devons construire les services Spark, Kafka et Flink.
Nous souhaitons héberger ses services sur une plateforme Kubernetes.
Les principales activités de la prestations sont :
- En lien avec les architectes et experts de l'équipe, définir l'architecture technique cible
- Construction d'un MVP de ces services puis enrichissement de l'offre
- L?automatisation et l?industrialisation des solutions
- L?intégration dans le SI (observalibilité, alerting, gestion des droits, backup, etc)
Profil candidat:
Stack technique :
- Python/Java
- Hadoop / Spark / Kafka / Flink
- Kubernetes
- GitLab / Vault / Artifactory / CI/CD
- Jira
Une expertise AWS EMR et Snowflake serait un plus.
Expérience de développement Spark Kubernetes, Kafka Kubernetes,
Job tags
Salary