Dans le cadre du développement d’une nouvelle plateforme de données dédiée au marketing et à la personnalisation client, nous recherchons un Lead Data Engineer (H/F) spécialisé dans les architectures de streaming temps réel sur Google Cloud Platform (GCP).
Vous intégrerez une nouvelle équipe et participerez à la construction d’une plateforme data moderne, évolutive et performante, depuis les premières phases de conception jusqu’à l’industrialisation des pipelines de données.
Vos missions :
Concevoir, développer et maintenir des pipelines de données en streaming temps réel sur GCP
Participer à la conception et à la construction d’architectures de streaming reposant notamment sur Apache Beam et Google Cloud Dataflow
Collecter, transformer, enrichir et fiabiliser des données à grande échelle, notamment les flux issus de Google Tag Manager
Concevoir des traitements adaptés aux contraintes du temps réel : gestion des fenêtres temporelles, agrégations continues, watermarks et traitement des événements tardifs
Contribuer à la mise en place d’une plateforme data moderne, scalable et résiliente, adaptée aux enjeux de marketing et de personnalisation client
Participer aux choix d’architecture et aux premières phases de construction du projet
Garantir la qualité, la performance et la fiabilité des pipelines développés
Mettre en place les bonnes pratiques de développement, de tests et d’intégration continue
Contribuer à l’industrialisation et à l’automatisation des déploiements grâce à des outils CI/CD et Infrastructure as Code
Développement : Java et/ou Python.
Streaming temps réel : Apache Beam, Google Cloud Dataflow, Apache Spark Streaming ou Apache Flink.
Concepts de streaming : Event Time vs Processing Time, Windowing, Continuous Aggregation, Watermarks et gestion des événements tardifs.
Environnement GCP : BigQuery, Dataflow, Dataproc et services associés.
Industrialisation : CI/CD, GitHub Actions, Terraform et Git.
Data Engineering : traitement de données à grande échelle, qualité des données, optimisation des performances et fiabilité des pipelines.
La maitrise de l'anglais (écrit et oral) est mandatory
Vous êtes force de proposition et autonome, avec un bon leadership
"Meritis est engagée dans la Responsabilité Sociétale des Entreprises. Nous valorisons notre impact positif sur la société et l'environnement. Notre démarche RSE guide chacune de nos actions pour promouvoir l'équité, la durabilité et le bien-être de nos collaborateurs. Rejoignez-nous pour être partie prenante de cette démarche responsable, où chacun de nos talents contribue à construire un avenir meilleur.
Nos différences sont nos atouts. C’est pourquoi Meritis s'implique en faveur de la diversité et de la non-discrimination. Tous nos métiers sont accessibles aux personnes en situation de handicap."
Job details are sourced from the employer's original posting.
Open job postingAbout the company
Neofin Advisory is a specialized advisory entity within the Meritis Group, dedicated to supporting financial institutions on complex regulatory, risk and transformation challenges. Neofin is strengthening its Operational & Non-Financial Risk practice to support leading financial institutions in an increasingly demanding regulatory and risk environment. We are looking for a Non-Financial Risk Consultant to work on high-impact assignments, helping clients design, enhance and operationalize robust risk frameworks in line with regulatory expectations and business realities. This role offers exposure to complex transformation programs , close interaction with senior stakeholders, and the opportunity to develop strong expertise across operational, ICT and conduct risks.