Data Engineer Awsf/h
il y a 7 jours
Jeune entreprise innovante, Digital Partners a pour ambition de devenir un acteur incontournable du digital, et ce dans l’ensemble de ses marchés.
Digital Partners intervient en transformation digitale, efficience opérationnelle et data analytics auprès de sociétés de tous secteurs d'activité.
**Vos missions ?**
Dans le cadre du développement de notre activité nous recrutons un.e** Data Engineer F/H.**
**Contexte**:
Création d'une équipe Data dans l'objectif d’accompagner les équipes du train dans la construction de leurs Data Set pour des finalités de consolidation de reporting.
**Environnement technique**: AWS
**Vos missions?**
Rédaction de scripts AWS Glue pour:
- Acquisition des données brutes (Get raw data) & dépôt des données dans une base de stockage de données brutes ( Bucket S3, base RDS, etc.)
- Transformation des données brutes (Transform Raw data) et dépôt des données dans une base de stockage de données transformées (calculs, anonymisations des données, normalisation, etc.) travail de modélisation est nécessaire pour le traitement des données
- Conversion de données au format attendu par le métier
- Lancer AWS glue crawler et observer les tables créer dans « Glue Data Catalog »
- Rédaction des requêtes Athéna pour exploiter les tables
- Monitoring des métriques liés aux scripts sur Datadog
**Votre Profil?**
Diplômé d'un Bac + 4/5 ( école d'ingénieur ou master ) vous avez au moins 7 ans d'expérience dont au moins 3 en tant que data engineer sur AWS : Glue, Athena, Glue Catalogue, S3, RDS, Lamba. Vous avez également des compétences en langage pySpark.
-
Data Engineer
il y a 7 jours
Paris, Île-de-France MP Data Temps pleinEn tant que Data Engineer Senior, vous jouerez un rôle clé dans la construction, l'optimisation et la fiabilisation de nos pipelines de données à grande échelle, au coeur de notre plateforme analytique. Votre expertise sur Databricks et l'environnement Spark sera essentielle pour garantir des traitements performants, sécurisés et scalables. Vos...
-
Data Engineer
il y a 2 semaines
Paris, Île-de-France MP DATA Temps pleinEn tant que Data Engineer Senior, vous jouerez un rôle clé dans la construction, l'optimisation et la fiabilisation de nos pipelines de données à grande échelle, au cœur de notre plateforme analytique. Votre expertise sur Databricks et l'environnement Spark sera essentielle pour garantir des traitements performants, sécurisés et scalables.Vos...
-
Data Engineer Expérimenté
il y a 2 semaines
Paris, Île-de-France MP DATA Temps pleinNous recherchons un(e)Data Engineer expérimenté(e)pour intervenir sur lamise en production, la fiabilisation et l'évolutiond'une plateforme data moderne basée surAWS, Spark et Dataiku.Vous participerez activement à laconstruction et l'optimisationdes environnements de traitement de données à grande échelle, en lien étroit avec les équipes Data...
-
Data Engineer
il y a 2 semaines
Paris, France MP DATA Temps pleinEn tant que Data Engineer Senior, vous jouerez un rôle clé dans la construction, l'optimisation et la fiabilisation de nos pipelines de données à grande échelle, au cœur de notre plateforme analytique. Votre expertise sur Databricks et l'environnement Spark sera essentielle pour garantir des traitements performants, sécurisés et scalables.Vos...
-
Graduate Data Engineer
il y a 5 jours
Paris, Île-de-France Data Reply Temps pleinGraduate Data EngineerTasks• Implementing new use cases• Mapping data and data flows• Implementing data analysis and processing pipelines• Industrializing data flows and their visualization through dashboards and reporting• Carrying out unit tests and integration tests Benefits• Structured career progression – at Reply, we encourage career...
-
Data Platform Engineer
il y a 1 semaine
Paris, France Data Recrutement Temps pleinUne entreprise de services numériques est à la recherche d'un Data Platform Engineer pour travailler sur des plateformes critiques dans le secteur bancaire. Le poste require environ 3 ans d'expérience, une expertise en Kubernetes et des connaissances en outils Big Data comme Spark et Airflow. Ce rôle offre une rémunération compétitive de 55-60K€ et...
-
Data Scientist NLP/LLM Engineer confirmé(e)
il y a 2 semaines
Paris, Île-de-France Mp Data Temps pleinESN spécialisée Data & IA pour les environnements industriels. Pour l'un de nos clients, nous recherchons un LLM Engineer chargé d'industrialiser les POC GenAI développés par les équipes Data Science et de déployer des solutions robustes et scalables en production.Développement et Industrialisation des POC LLM / GenAI.Conception et optimisation de...
-
Data Engineer | ESN high level
il y a 1 semaine
Paris, France Data Recrutement Temps pleinL'ENTREPRISE : ESN DATA EN FORTE CROISSANCE Magnifique ESN créée il y a quelques années par des experts du secteur IT, avec déjà plus de 70 consultants en mission et une croissance soutenue ! Elle accompagne aujourd’hui de grands comptes (banque, assurance, énergie, environnement) ainsi que de nouveaux secteurs comme les Life Sciences. Sa...
-
Data Scientist NLP/LLM Engineer confirmé(e)
il y a 7 jours
Paris, Île-de-France MP DATA Temps pleinESN spécialisée Data & IA pour les environnements industriels. Pour l'un de nos clients, nous recherchons unLLM Engineerchargé d'industrialiser lesPOC GenAIdéveloppés par les équipes Data Science et de déployer des solutions robustes et scalables en production.Développement et Industrialisation des POC LLM / GenAI.Conception et optimisation de...
-
Data Engineer AWS
il y a 2 semaines
Paris, Île-de-France Data Reply FR Temps pleinData Replyest une filiale du groupe Reply offrant une large gamme de services d'analyse avancée et de données alimentées par l'IA.Nous opérons dans différents secteurs et fonctions commerciales, en travaillant directement avec des professionnels de haut niveau et des directeurs généraux pour leur permettre d'obtenir des résultats significatifs grâce...