Data Engineer confirmé

Il y a 5 jours

Valbonne, Provence-Alpes-Côte d'Azur, France Maestria Temps plein
Dans le cadre du développement d'une nouvelle plateforme Data pour l'un de nos clients grands comptes, MAESTRIA recherche un Data Engineer confirmé ou senior, disposant d'une solide expérience en développement Big Data et sur Google Cloud Platform (GCP). Vous rejoindrez une équipe internationale de Data Engineers travaillant sur des projets innovants de gestion et de valorisation des données clients, dans un environnement orienté marketing digital et personnalisation de l'expérience utilisateur. L'objectif est de concevoir et développer une plateforme capable de collecter, agréger et transformer des données issues de différentes sources afin de les rendre exploitables par des services de personnalisation et des modèles de Machine Learning. Vous interviendrez sur un projet en construction, avec une forte dimension d'innovation, au sein d'une équipe technique répartie entre plusieurs sites européens. Vos principales

responsabilités:
Développement et Data Engineering Concevoir, développer et maintenir des pipelines de traitement et de transformation de données. Participer à la collecte, à l'intégration et à l'agrégation de données issues de différentes sources applicatives et marketing. Développer des traitements de données en Java, avec une ouverture aux environnements Python. Mettre en œuvre des traitements distribués et des pipelines de données en temps réel. Participer à la conception et à la construction de la nouvelle plateforme Data. Garantir la qualité, la fiabilité et les performances des traitements développés. Streaming et traitement temps réel Développer et optimiser des traitements de données en streaming. Intervenir sur des technologies telles qu'Apache Beam, Spark Streaming ou Apache Flink. Maîtriser les mécanismes de traitement événementiel : event-time, processing-time, windowing, agrégations continues et watermarks. Contribuer à la gestion de flux de données volumineux et à leur mise à disposition des applications consommatrices. Cloud GCP et industrialisation Développer et faire évoluer des solutions Data sur Google Cloud Platform. Intervenir sur des services tels que BigQuery, Dataflow et éventuellement Dataproc. Participer à l'automatisation et à l'industrialisation des déploiements. Mettre en œuvre les bonnes pratiques CI/CD avec GitHub Actions. Contribuer à la gestion des infrastructures et configurations Cloud avec Terraform. Participer à l'amélioration continue des pratiques de développement et d'intégration. Collaboration et accompagnement Collaborer avec les équipes techniques responsables des différentes sources de données. Participer aux échanges avec les équipes métiers et les autres équipes internationales. Analyser les besoins, proposer des solutions techniques adaptées et contribuer aux choix de conception. Assurer le suivi et la résolution des problématiques techniques de bout en bout. Produire et maintenir la documentation technique. Les atouts de la mission Participation à la création d'une nouvelle plateforme Data Cloud. Projet à forte dimension d'innovation autour de la personnalisation et de la valorisation des données. Environnement technique moderne associant GCP, Big Data et streaming. Collaboration avec des équipes internationales. Mission de longue durée, offrant de la visibilité sur les évolutions de la plateforme. Possibilité de télétravail partiel selon l'organisation du projet MAESTRIA est une jeune entreprise de services & conseil spécialisée dans les activités d'innovation et transformation digitale à destination de ses clients. L'entreprise est située au sein de la Technopole de Sophia Antipolis, une position stratégique vis-à-vis de ses clients majeurs.