Big Data Engineer
il y a 19 heures
**Localisation**:
Paris
**Métier**:
Data
**Type de contrat**:
CDI
**Salaire**:
40/55K
**Type d'entreprise**:
Grand compte
**Compétences**:
Big Data
Description de poste
**ref**: 22-10
CDI - Mission au sein d’un grand groupe de transport
Nour recherchons un Data Engineer sénior avec maîtrise sur les différences aspects aux traitement de la data et avec du recul sur le cycle de vie en grand du delivery des projets data.
Vos missions incluront également une part de veille technologique et de montée en compétences sur les thématiques liées à la Data et leur intégration dans un environnement de production mature et complexe sur le cloud.
Vous évoluerez au sein du stream IA, équipe utilisant des méthodes agiles et avec un produit à vocation à être mis en production. Pour cela, vous échangerez quotidiennement avec des Data Scientists et Data Engineers. Dans le but d’optimiser la personnalisation, le taux de conversion et les assets, Le Data Ingénieur sera capable d’intervenir sur plusieurs plusieurs domaines.
**Activités détaillées**:
- Définir et analyser des structures de données
- Contribuer dans les assets des différentes équipes produits pour interconnecter et collecter les données
- Mise à disposition de la data et des recommandations à des systèmes externes (apis, exports, injection de donnée)
- Être garant de la production (mise en place de monitoring et alerting et intervention si nécessaire)
- Développer et maintenir le continuous delivery (participer à l’intégration continue et à l’usine logicielle, déploiements et tests automatisés)
- Construire l’architecture cloud AWS qui hébergera notre infrastructure existante ou future
- Présenter et expliquer réalisations à des publics métiers et techniques.
Profil recherché
- De formation BAC+5 en École d’Ingénieurs ou équivalent, avec un minimum de 3 ans d’expérience dans le développement
- Connaissances en développement dans un langage de programmation (python, scala et/ou java)
**- Maitrise en technologies Big Data**:
- Connaissances/expérience en développement Spark
- Maitrise des outils d’extraction de la donnée (workflows Spark)
- Maitrise des outils de stockage (stockage objet / Base Relationnelle / NoSQL)
- Expériences sur le cloud public AWS
- Capacité à vulgariser des analyses complexes
**Compétence**:
- Traitement (développement et analyse) de la data (Spark/Python/Scala)
- Connaissance de l’environnement AWS (Glue, Lambda, S3, EMR, Kinesis)
- Maitrise de Glue ou EMR ou équivalent
- Avoir travaillé dans un contexte agile et adhérer aux principes agiles
- Expérience Devops, déploiement continu, Infra as Code
- Avoir une appétence pour la partie métier
**Qualités requises**:
- Autonomie
- Proactivité
- Clarté de la communication
- Rigueur et à l’écoute des autres
Compétences
AWS, Connaissance architectures environnement à hautes exigences de charge et disponibilité, Big Data
-
Big Data
il y a 4 jours
Paris, France Blackfluo.ai Temps pleinAbout the job Big Data & Cloud Data Engineer Position Overview We are seeking a Big Data & Cloud Data Engineer to design, implement, and manage large-scale data processing systems using big data technologies (Hadoop, Spark, Kafka) and cloud-based data ecosystems (Azure, GCP, AWS), enabling advanced analytics and real-time data processing capabilities across...
-
Consultant Data Engineer H/F/N | Conseil Architecture Data | Paris |
il y a 1 semaine
Paris, France Data Recrutement Temps pleinL’ENTREPRISE : CABINET DE CONSEIL Cabinet de conseil en Architectiure management SI créé en 2009 50 collaborateurs Organisation en mode agile CA : 8 Millions Grande diversité de client LA MISSION : ACCOMPAGNER LES CLIENTS DANS LEURS STRATEGIES BIG DATA Sous la responsabilité d'un manager du département Architecture et Engineering Big Data, vous...
-
Alternant Data Engineer — Pipelines et Big Data
il y a 4 jours
Paris, France Alternance Professionnelle Temps pleinUne entreprise spécialisée en formation recherche un alternant en Data Engineer pour rejoindre une équipe de spécialistes. Vous serez impliqué dans le développement de pipelines de données, la création de solutions pour l'ingestion et le traitement, et bien plus encore. Des compétences en Python, Java, SQL et des connaissances en technologies Big...
-
Expert Big Data
il y a 1 semaine
Paris, France REDSEN Temps pleinNous recherchons pour notre client, un Data Engineer/ Expert Big Data dans le secteur de l'industrie grand compte. Le démarrage est prévu pour le début de décembre, néanmoins, une présélection est prévue pour cette été. Projet: - Création de Data Lake from scratch pour le service Marketing - Migration de flux vers le Data Lake interne Rôle: -...
-
Real-Time Cloud Data Engineer — Big Data
il y a 4 jours
Paris, France Blackfluo.ai Temps pleinA leading technology firm in France is seeking a Big Data & Cloud Data Engineer to design, implement, and manage large-scale data processing systems. You will leverage big data technologies and cloud platforms to enable advanced analytics and real-time data processing. The ideal candidate has over 5 years of experience in big data technologies and strong...
-
Big Data Engineer H/F
il y a 4 jours
Paris, Île-de-France CONSORT Group Temps pleinChaque moment compte. Surtout ceux que vous vivez à fond. Bienvenue chez Consort Group.Consort Group, accompagne depuis plus de 30 ans les entreprises dans la valorisation de leurs données et infrastructures. Elle s'appuie sur deux leaders, Consortis et Consortia, et place l'humain et la responsabilité sociétale au cœur de ses valeurs.C'est votre future...
-
Senior Data Engineer
il y a 4 jours
Paris, France Kicklox Temps pleinUne entreprise innovante dans le domaine des technologies recherche un Data Engineer pour concevoir et maintenir des architectures de données robustes. Le candidat idéal doit avoir plus de 7 ans d'expérience, avec des compétences en Big Data, bases de données NoSQL et programmation. Ce poste est basé à Paris, avec un salaire entre 55 000 € et...
-
Remote Freelance Data Engineer – ETL
il y a 2 semaines
Paris, France RED TIC Temps pleinUne société de conseil en données recherche un Data Engineer freelance basé à Paris. Vous serez responsable de la conception, du développement et de la maintenance de pipelines de données robustes. Le candidat idéal possède une expérience avérée dans des rôles similaires et maîtrise les technologies Big Data comme Hadoop et Spark, ainsi que...
-
Big Data Engineer H/F
il y a 6 jours
Paris, Île-de-France Consort Group Temps pleinChaque moment compte. Surtout ceux que vous vivez à fond. Bienvenue chez Consort Group.Consort Group, accompagne depuis plus de 30 ans les entreprises dans la valorisation de leurs données et infrastructures. Elle s'appuie sur deux leaders, Consortis et Consortia, et place l'humain et la responsabilité sociétale au cœur de ses valeurs.C'est votre future...
-
Big Data Engineer H/F
il y a 6 jours
Paris, Île-de-France Consort Group Temps plein 50 000 € - 60 000 €Chaque moment compte. Surtout ceux que vous vivez à fond. Bienvenue chez Consort Group.Consort Group, accompagne depuis plus de 30 ans les entreprises dans la valorisation de leurs données et infrastructures. Elle s'appuie sur deux leaders, Consortis et Consortia, et place l'humain et la responsabilité sociétale au cœur de ses valeurs.C'est votre future...