Data Engineer
Il y a 4 mois
Descriptif du poste
**Contexte**:
Au sein du département IT Data Science, nous recherchons une prestation de consultant Data Engineer avec expertise python pour participer au développement du Projet Vessel Profile.
Le projet Vessel profile est identifié comme projet Stratégique, il s agit de construire la brique logicielle qui porte la stratégie des lignes du groupe pour optimiser globalement le P&L des Lignes.
Le consultant travaillera au sein de l équipe projet et devra être sur place environ 3 jours par semaine. L'objectif étant d'accélérer au maximum la montée en connaissance et l'agilité de développement en restant à proximité directe du product owner, des experts métier, des experts data et des fournisseurs qui développeront l'applicatif.
**Mission et Responsabilités**:
Les principales missions du consultant en charge de la prestation seront notamment:
- Gestion des Données : Concevoir, développer et maintenir des pipelines ETL robustes pour l'extraction, la transformation et le chargement des données à partir de différentes sources vers notre entrepôt de données.
- Maîtrise de SQL : Utiliser de manière avancée SQL pour la manipulation et l'interrogation de grands ensembles de données, garantissant la performance et la fiabilité des requêtes.
- Utilisation de DBT : Expérience approfondie avec DBT (Data Build Tool) pour organiser, documenter et exécuter des transformations de données complexes tout en maintenant un niveau élevé de qualité.
- Développement d'API Python : Créer et maintenir des interfaces d'API en utilisant Python pour rendre les données accessibles aux différents systèmes internes et externes.
- Collaboration : Travailler en étroite collaboration avec les équipes techniques et métier pour comprendre les besoins en données, concevoir des solutions adaptées et garantir la qualité des livrables.
- Optimisation des Performances : Identifier et mettre en œuvre des améliorations pour optimiser les performances des processus de traitement de données et des requêtes.
Profil recherché
**Compétences Requises**:
**Hard Skills**:
- Maîtrise avancée de SQL, avec la capacité de concevoir des requêtes complexes et optimisées. Forte expertise attendue (min 5 ans).
- Expérience pratique avec DBT pour la modélisation de données et les transformations.
- Fortes compétences en développement Python pour la création d'API.
- Maitrise du versioning GIT.
- Compréhension des principes fondamentaux de l'ingénierie de données et des architectures de données distribuées.
- Expérience développement analytique.
**Soft Skills**:
- Doit pouvoir parler anglais pour se coordonner techniquement avec nos fournisseurs indiens.
- Capacité à travailler dans un environnement Agile (utilisation JIRA), avec de bonnes compétences en communication et en travail d'équipe.
Idéalement:
- Connaissance des algorithmes d optimisation python
**Environnement Technologique**:
- Base de données : Snowflake / PostgreSQL.
- DBT + GIT.
- API codées en Python.
**Livrables Attendus**:
- Développement et documentation des data pipelines (SQL + DBT).
- Développement et documentation des API Python.
- Rapport d avancement hebdomadaire.
- Participation à l ensemble des comité projets et sessions de travail.
- Organisation des sessions de travail nécessaires pour assurer la bonne intégration des développements effectués avec les consommateurs de ces développements.
Compétences attendues
- LANGUESAucune langue attendue
SAVOIR-ÊTRE
Agilité
Capacité d'analyse
**Voir plus**
SAVOIR-FAIRE
Outils de développement
Statistiques
**Voir plus**
Entreprise
EMC Talent est un leader européen du conseil en ingénierie. Notre portefeuille de solutions numériques, associé à notre expertise en matière d'ingénierie produits, nous positionne de façon privilégiée pour accompagner nos clients, exploiter la puissance des données connectées, accélérer l'innovation et stimuler l'avenir de l'industrie intelligente.
EMC Talent accompagne les acteurs industriels de multiples secteurs tout au long du cycle de vie de leurs produits, pour les aider à repenser leurs produits et processus industriels.
Le groupe EMC Talent se distingue par sa force culture entrepreneuriale et une large présence internationale.
- Autres offres de l'entreprise**Personne en charge du recrutement**
PRISCA TIDA
- _Chargée de recrutement_
Salaire
A partir de 30 k€ brut annuel
Prise de poste
Dès que possible
Expérience
Minimum 4 ans
Métier
Ingénieur en études et développement informatiques
Statut du poste
Cadre du secteur privé
Zone de déplacement
Pas de déplacement
Secteur d’activité du poste
CONSEIL POUR LES AFFAIRES ET AUTRES CONSEILS DE GESTION
-
Data Engineer SQL
Il y a 3 mois
Marseille, France MP DATA Temps pleinBonjour ! MP DATA est une société spécialisée dans l’acquisition, le traitement, et la valorisation des données. Depuis sa création en 2015, MP DATA accompagne ses clients, majoritairement industriels, dans le management de leur performance, l’exploitation de leur données et leur décarbonation. Les collaborateurs, incarnent au quotidien les...
-
Data Engineer
Il y a 4 mois
Marseille 1er, France ADDIXGROUP Temps pleinDescriptif du poste - Un peu de contexte : Choisis ton projet, bâtis la carrière que tu souhaites, deviens un AddixWarrior ! Nous recherchons un Data Engineer pour rejoindre notre équipe. Vous serez amené à: - Transformer les données brutes pour l'analyse (pipelines ETL). - Construire et gérer l'infrastructure Big Data. - Collaborer avec les Data...
-
Data Engineer
il y a 3 jours
Marseille, Provence-Alpes-Côte d'Azur, France Olympique de Marseille Temps pleinJoin Our Team as a Data EngineerAt Olympique de Marseille, we are looking for a talented Data Engineer to join our Technology & Innovation department. As a Data Engineer, you will play a key role in designing, implementing, and maintaining our data infrastructure, ensuring the accuracy, reliability, and security of our data.Key Responsibilities:Design and...
-
Data Engineer
il y a 3 jours
Marseille, Provence-Alpes-Côte d'Azur, France Olympique de Marseille Temps pleinJoin Our Team as a Data EngineerAt Olympique de Marseille, we are looking for a talented Data Engineer to join our Technology & Innovation department. As a Data Engineer, you will play a key role in designing, implementing, and maintaining our data infrastructure, ensuring the accuracy, reliability, and security of our data.Key Responsibilities:Design and...
-
Data Engineer
Il y a 4 mois
Paris 1er, France ITIZEN Temps pleinDescriptif du poste Data Engineer - Paris ou Bordeaux - 1 mois sur site puis 90% full remote Mission: - Accompagnement des Data Scientists lors de leur mise en prod - Optimisation de la CI/CD... Pré-requis : forte exepertise en ML et/ou Data, NLP et traitement d’image - Stack : Airflow, Delta Lake, Python, DataBricks, SQL, Spark, Ansible, Terraforl,...
-
Data Scientist Alternance
Il y a 4 mois
Marseille, France Data ScienceTech Institute Temps pleinData ScienceTech Institute (DSTI) a été créé avec une ambition principale : former des experts du big data et de l'Intelligence Artificielle pour répondre aux besoins de l'industrie 4.0. Depuis 2015, DSTI forme des Data Analyst, Data Engineer et Data Scientist opérationnels, en offrant les programmes les plus internsifs du marché et les plus reconnus...
-
Data Engineer
Il y a 4 mois
Paris 1er, France TOMORROW JOBS Temps pleinDescriptif du poste En tant que Data Engineer, vos missions seront les suivantes: - Conception et test de pipelines d'ingestion de données ; - Mise en œuvre de services de diffusion ; - Participation à l'acquisition de nouvelles sources de données et description de leur faisabilité et potentiel ; - Création et maintenance de pipelines de collecte et...
-
Data Scientist Alternance
Il y a 4 mois
Marseille, France Data ScienceTech Institute Temps pleinDSTI - School of Engineering s'est donnée pour mission première de former des spécialistes en **Informatique, Cloud** et **Intelligence Artificielle**. Depuis 2015, DSTI a formé **+ de 1000 étudiants** sur les métiers de la donnée (Data Analyst/Data Engineer/Data Scientist), en offrant les programmes les plus intensifs du marché et les plus reconnus...
-
Data Engineer Expérimenté
il y a 3 semaines
Marseille 1er, France Potentiel IT Temps pleinChez **Potentiel-IT**, notre mission est de transformer les pratiques de recrutement Tech en offrant une expérience qualitative, transparente et éthique. Inspiré du Clean Code, Potentiel-IT crée le **Clean Recrutement**. Nous sommes convaincus que des développeurs épanouis mènent à des projets réussis c’est pourquoi nous avons inversé la...
-
Data Engineer Lead
il y a 2 jours
Marseille, Provence-Alpes-Côte d'Azur, France Devoteam Temps pleinJoin Devoteam as a Data Engineer LeadAt Devoteam, we are Digital Transformakers. Together, we help our clients win the battle of Digital. With 000 collaborators across the globe, we accompany businesses in their digital transformation. We imagine and concretize their ambitions through the infinite possibilities of digital platforms, to evolve their culture...
-
Data Engineer
Il y a 4 mois
Paris 1er, France EXALT IT Temps pleinDescriptif du poste eXalt IT recherche un(e) data engineer eXalté(e) ! Nous recherchons actuellement notre futur(e) data engineer pour une mission chez l'un de nos clients. Vous interviendrez dans un environnement techniquement exigeant autour du big data. Vous seriez amené à travailler avec des nouvelles technologies (Kafka, Python, Pyspark, Scala,...
-
Data Engineer Confirmé
Il y a 4 mois
Marseille 1er, France Potentiel IT Temps pleinAvant de te parler de l’entreprise, je te propose que l’on commence par un petit focus sur les points essentiels : Rémunération, Télétravail & Stack Comme ça, pas de perte de temps pour toi, enfin quoi que, déjà la je viens de te faire perdre 10 secondes. Concernant la rémunération, on est entre 45 et 55K, si tu es hors scope, tu peux tout de...
-
Data Engineer Lead
il y a 2 jours
Marseille, Provence-Alpes-Côte d'Azur, France Devoteam Temps pleinDescription du poste Nous recherchons un Lead Data Engineer pour rejoindre notre équipe de Data Marseille. Vous serez chargé de l'animation de la squad DATA Marseille, en insufflant une dynamique d'innovation et d'excellence. Vous porterez nos offres DATA (DataGov ; DataDriven ; DataProduct...) auprès de grands comptes, en démontrant notre expertise et...
-
Data Engineer
Il y a 4 mois
Paris 1er, France Banque de France Temps pleinDescriptif du poste En tant que Data Engineer vous devrez: - Participer aux études détaillées techniques et proposition de solutions - Réaliser les développements de nouveaux composants d’ingestion (récupération de données internes ou externes) et de traitements de la donnée répondant à des patterns définis - Réaliser les développements des...
-
Data Engineer
Il y a 4 mois
Paris 1er, France Nonstopconsulting Temps pleinDescriptif du poste Responsabilités: Concevoir et développer des pipelines de données pour collecter, stocker et traiter les données, tout en travaillant sur des projets super élaborés, tels que la migration de Systèmes d'Information Collaborer avec des équipes internationales sur des projets d'envergure mondiale. Participer à des projets de grande...
-
Data Engineer
Il y a 4 mois
Marseille, France ADDIXWARE Temps pleinUn peu de contexte : Choisis ton projet, bâtis la carrière que tu souhaites, deviens un AddixWarrior ! Nous recherchons un Data Engineer pour rejoindre notre équipe. Vous serez amené à: - Transformer les données brutes pour l'analyse (pipelines ETL). - Construire et gérer l'infrastructure Big Data. - Collaborer avec les Data Scientists et les...
-
Data Engineer
Il y a 4 mois
Marseille, France ADDIXWARE Temps pleinUn peu de contexte : Choisis ton projet, bâtis la carrière que tu souhaites, deviens un AddixWarrior ! Nous recherchons un Data Engineer spécialisé en SnowFlake pour rejoindre notre équipe. Vous serez amené à: - Transformer les données brutes pour l'analyse (pipelines ETL). - Construire et gérer l'infrastructure Big Data. - Collaborer avec les...
-
Data Engineer AWS
il y a 1 jour
Marseille, Provence-Alpes-Côte d'Azur, France The AI Company Temps pleinMissionDans le cadre de notre stratégie de développement, nous recherchons un Data Engineer (5 / 6 ans d'expérience minimum) pour rejoindre notre équipe produit.Le candidat idéal aura une expérience éprouvée dans la création de pipelines de données fiables, une expérience prolongée de AWS cloud et une expertise dans Snowflake.De plus, une...
-
Data Engineer
Il y a 3 mois
Paris 1er, France Dogfinance Temps pleinDescriptif du poste Tu rejoindra notre team Data ! Tu participeras à la réalisation de solutions, en collaboration étroite avec des machine learning engineer, software architect, designers, developers... Force de proposition en interne, tu interviendras pour être garant du développement d'architecture Data, de la collecte multi-source de données, du...
-
Data Engineer H/F
Il y a 2 mois
Marseille, Bouches-du-Rhône, France JEMS Temps pleinA propos de JEMSNous sommes le seul industriel de la donnée en Europe. Notre métier est de créer, manager et exploiter le patrimoine data de nos clients.Nous avons la conviction que chaque entreprise peut adopter une démarche innovante de gestion de la donnée et créer des cas d'usage disruptifs en réduisant l'impact écologique et en diminuant...
