Data Engineer
il y a 1 mois
Descriptif du poste
**Contexte**:
Au sein du département IT Data Science, nous recherchons une prestation de consultant Data Engineer avec expertise python pour participer au développement du Projet Vessel Profile.
Le projet Vessel profile est identifié comme projet Stratégique, il s agit de construire la brique logicielle qui porte la stratégie des lignes du groupe pour optimiser globalement le P&L des Lignes.
Le consultant travaillera au sein de l équipe projet et devra être sur place environ 3 jours par semaine. L'objectif étant d'accélérer au maximum la montée en connaissance et l'agilité de développement en restant à proximité directe du product owner, des experts métier, des experts data et des fournisseurs qui développeront l'applicatif.
**Mission et Responsabilités**:
Les principales missions du consultant en charge de la prestation seront notamment:
- Gestion des Données : Concevoir, développer et maintenir des pipelines ETL robustes pour l'extraction, la transformation et le chargement des données à partir de différentes sources vers notre entrepôt de données.
- Maîtrise de SQL : Utiliser de manière avancée SQL pour la manipulation et l'interrogation de grands ensembles de données, garantissant la performance et la fiabilité des requêtes.
- Utilisation de DBT : Expérience approfondie avec DBT (Data Build Tool) pour organiser, documenter et exécuter des transformations de données complexes tout en maintenant un niveau élevé de qualité.
- Développement d'API Python : Créer et maintenir des interfaces d'API en utilisant Python pour rendre les données accessibles aux différents systèmes internes et externes.
- Collaboration : Travailler en étroite collaboration avec les équipes techniques et métier pour comprendre les besoins en données, concevoir des solutions adaptées et garantir la qualité des livrables.
- Optimisation des Performances : Identifier et mettre en œuvre des améliorations pour optimiser les performances des processus de traitement de données et des requêtes.
Profil recherché
**Compétences Requises**:
**Hard Skills**:
- Maîtrise avancée de SQL, avec la capacité de concevoir des requêtes complexes et optimisées. Forte expertise attendue (min 5 ans).
- Expérience pratique avec DBT pour la modélisation de données et les transformations.
- Fortes compétences en développement Python pour la création d'API.
- Maitrise du versioning GIT.
- Compréhension des principes fondamentaux de l'ingénierie de données et des architectures de données distribuées.
- Expérience développement analytique.
**Soft Skills**:
- Doit pouvoir parler anglais pour se coordonner techniquement avec nos fournisseurs indiens.
- Capacité à travailler dans un environnement Agile (utilisation JIRA), avec de bonnes compétences en communication et en travail d'équipe.
Idéalement:
- Connaissance des algorithmes d optimisation python
**Environnement Technologique**:
- Base de données : Snowflake / PostgreSQL.
- DBT + GIT.
- API codées en Python.
**Livrables Attendus**:
- Développement et documentation des data pipelines (SQL + DBT).
- Développement et documentation des API Python.
- Rapport d avancement hebdomadaire.
- Participation à l ensemble des comité projets et sessions de travail.
- Organisation des sessions de travail nécessaires pour assurer la bonne intégration des développements effectués avec les consommateurs de ces développements.
Compétences attendues
- LANGUESAucune langue attendue
SAVOIR-ÊTRE
Agilité
Capacité d'analyse
**Voir plus**
SAVOIR-FAIRE
Outils de développement
Statistiques
**Voir plus**
Entreprise
EMC Talent est un leader européen du conseil en ingénierie. Notre portefeuille de solutions numériques, associé à notre expertise en matière d'ingénierie produits, nous positionne de façon privilégiée pour accompagner nos clients, exploiter la puissance des données connectées, accélérer l'innovation et stimuler l'avenir de l'industrie intelligente.
EMC Talent accompagne les acteurs industriels de multiples secteurs tout au long du cycle de vie de leurs produits, pour les aider à repenser leurs produits et processus industriels.
Le groupe EMC Talent se distingue par sa force culture entrepreneuriale et une large présence internationale.
- Autres offres de l'entreprise**Personne en charge du recrutement**
PRISCA TIDA
- _Chargée de recrutement_
Salaire
A partir de 30 k€ brut annuel
Prise de poste
Dès que possible
Expérience
Minimum 4 ans
Métier
Ingénieur en études et développement informatiques
Statut du poste
Cadre du secteur privé
Zone de déplacement
Pas de déplacement
Secteur d’activité du poste
CONSEIL POUR LES AFFAIRES ET AUTRES CONSEILS DE GESTION
-
Data Engineer SQL
il y a 4 semaines
Marseille, France MP DATA Temps pleinBonjour ! MP DATA est une société spécialisée dans l’acquisition, le traitement, et la valorisation des données. Depuis sa création en 2015, MP DATA accompagne ses clients, majoritairement industriels, dans le management de leur performance, l’exploitation de leur données et leur décarbonation. Les collaborateurs, incarnent au quotidien les...
-
Data Engineer
il y a 1 mois
Marseille 1er, France ADDIXGROUP Temps pleinDescriptif du poste - Un peu de contexte : Choisis ton projet, bâtis la carrière que tu souhaites, deviens un AddixWarrior ! Nous recherchons un Data Engineer pour rejoindre notre équipe. Vous serez amené à: - Transformer les données brutes pour l'analyse (pipelines ETL). - Construire et gérer l'infrastructure Big Data. - Collaborer avec les Data...
-
Data Engineer
il y a 1 mois
Marseille, France Ardemis Partners Temps plein**Localisation**: Marseille **Métier**: Data Engineer **Type de contrat**: mission **Salaire**: Selon Profil **Type d'entreprise**: Grand compte **Compétences**: AWS #Snowflake Description de poste Pour l'un de nos projets stratégiques, nous recherchons un Data Engineer expérimenté pour rejoindre une expérience dans l'ingénierie des données...
-
Data Engineer
il y a 4 semaines
Paris 1er, France Agence Rogala Temps pleinL'Agence Rogala recrute pour son client (Cabinet de conseil en Real Estate) un Data Engineer f/h. Le département « Data, Analytics & Technology » de l'entreprise créé des solutions digitales innovantes destinées aux professionnels de l’immobilier. Les solutions permettent d’avoir un accès direct aux bases de données exclusives sur le marché...
-
Data Engineer
il y a 1 mois
Paris 1er, France Banque de France Temps pleinDescriptif du poste En tant que Data Engineer vous devrez: - Participer aux études détaillées techniques et proposition de solutions - Réaliser les développements de nouveaux composants d’ingestion (récupération de données internes ou externes) et de traitements de la donnée répondant à des patterns définis - Réaliser les développements des...
-
Data Engineer H/F
il y a 1 mois
Marseille, Provence-Alpes-Côte d'Azur, France ADDIXWARE Temps pleinUn peu de contexte : Choisis ton projet, bâtis la carrière que tu souhaites, deviens un AddixWarrior Nous recherchons un Data Engineer pour rejoindre notre équipe. Vous serez amené à : - Transformer les données brutes pour l'analyse (pipelines ETL).- Construire et gérer l'infrastructure Big Data.- Collaborer avec les Data Scientists et les analystes.-...
-
Data Engineer H/F
il y a 1 mois
Marseille, France ADDIXWARE Temps pleinUn peu de contexte : Choisis ton projet, bâtis la carrière que tu souhaites, deviens un AddixWarrior ! Nous recherchons un Data Engineer pour rejoindre notre équipe. Vous serez amené à : - Transformer les données brutes pour l'analyse (pipelines ETL).- Construire et gérer l'infrastructure Big Data.- Collaborer avec les Data Scientists et les...
-
Data Engineer Confirmé
il y a 1 mois
Marseille 1er, France Potentiel IT Temps pleinAvant de te parler de l’entreprise, je te propose que l’on commence par un petit focus sur les points essentiels : Rémunération, Télétravail & Stack Comme ça, pas de perte de temps pour toi, enfin quoi que, déjà la je viens de te faire perdre 10 secondes. Concernant la rémunération, on est entre 45 et 55K, si tu es hors scope, tu peux tout de...
-
Data Engineer
il y a 1 mois
Marseille, France ADDIXWARE Temps pleinUn peu de contexte : Choisis ton projet, bâtis la carrière que tu souhaites, deviens un AddixWarrior ! Nous recherchons un Data Engineer spécialisé en SnowFlake pour rejoindre notre équipe. Vous serez amené à: - Transformer les données brutes pour l'analyse (pipelines ETL). - Construire et gérer l'infrastructure Big Data. - Collaborer avec les...
-
Data Engineer
il y a 1 mois
Paris 1er, France 1G LINK Temps pleinDescriptif du poste - Compétences attendues : Au moins trois ans d expérience en données L expérience de Spark est obligatoire. L expérience de Spark dans les cas d utilisation de transformation d ETL/data est plus. L expérience dans le développement de pipelines IC/CD pour les cas d utilisation du Big Data/AI est plus. Responsabilité : Travailler...
-
Data Engineer
il y a 4 semaines
Paris 1er, France 1G LINK Temps pleinDescriptif du poste Compétences attendues : Au moins trois ans d expérience en données L expérience de Spark est obligatoire. L expérience de Spark dans les cas d utilisation de transformation d ETL/data est plus. L expérience dans le développement de pipelines IC/CD pour les cas d utilisation du Big Data/AI est plus. Responsabilité : Travailler...
-
Data Engineer
il y a 1 mois
Paris 1er, France HELPLINE Temps pleinEt si vous choisissiez plus qu’un job ? Si vous êtes à la recherche d’un poste stimulant, dans une entreprise bienveillante et innovante, vous êtes au bon endroit. **HELPLINE**, c’est plus de 25 années d’expérience dans l’innovation IT au service des entreprises en pleine transformation digitale. **Chiffres clés**: +200 clients (+50% du...
-
Data Quality Engineer
il y a 4 semaines
Paris 1er, France DEEPKI Temps pleinFounded in 2014, Deepki supports real estate players in their transition to net zero and sustainability. To achieve this transition towards sustainability, Deepki helps realign stakeholders’ interests to build efficient strategies and transform real estate into a positive force for the planet. Deepki is the only company offering a fully populated ESG data...
-
Data Engineer
il y a 4 semaines
Paris 1er, France EXTIA Temps pleinDescriptif du poste Vous aurez le rôle de support technique aux équipes d analyse : structurer les données, réaliser des analyses « statistiques » ou « techniques » sur les données, développer des outils d analyse Vous mènerez des études afin d évaluer les nouvelles technologies dans le domaine du Big Data, Data Mining ou Machine Learning afin...
-
Tech Lead Data Engineer
il y a 1 mois
Marseille, France Axa en France Temps pleinEnvironnementEn tant que Tech Lead Data Engineer F/H, vous allez contribuer directement aux projets des directions métier (ex : fraude santé, multiéquipements, pricing IARD, optimisation du lead management, fragilité auto, …) d’AXA France et à la construction du socle technique Big Data.Vous allez intégrer une équipe d'une dizaine de personne...
-
Data Engineer Marseille H/F
il y a 1 mois
Marseille, France JEMS S.A Temps pleinA propos de JEMSNous sommes le seul industriel de la donnée en Europe. Notre métier est de créer, manager et exploiter le patrimoine data de nos clients.Nous avons la conviction que chaque entreprise peut adopter une démarche innovante de gestion de la donnée et créer des cas d'usage disruptifs en réduisant l'impact écologique et en...
-
DATA Engineer AWS
il y a 1 mois
Marseille, France The AI Company Temps pleinThe AI Company est une ESN pure player Data, IA & Cloud. La valorisation des données, l’intelligence artificielle et l’adoption des solutions cloud sont pour nous les éléments clés de la transformation digitale des entreprises. Dans le cadre du développement ambitieux de notre pôle d'expertise Data et IA, nous recrutons deux consultant(e)s Data...
-
DATA Engineer AWS
il y a 1 mois
Marseille, France The AI Company Temps pleinThe AI Company est une ESN pure player Data, IA & Cloud. La valorisation des données, l’intelligence artificielle et l’adoption des solutions cloud sont pour nous les éléments clés de la transformation digitale des entreprises. Dans le cadre du développement ambitieux de notre pôle d'expertise Data et IA, nous recrutons deux consultant(e)s Data...
-
Data Engineer
il y a 1 mois
Paris 1er, France KLANIK Temps pleinDescriptif du poste Dans le cadre de la réalisation d un prototype hybride, assurer les développements Big Data qui permettront de décliner opérationnellement les choix d architecture et les choix techniques et d en vérifier la validité. - Vos missions: - Assurer l articulation avec la partie des développements reposant sur un socle PostgreSql / -...
-
Data Engineer
il y a 1 mois
Marseille, France Orchestra Temps pleinDans le cadre d'une création de poste, nous recherchons un(e) Data Engineer H/F en CDI. Rattaché au service data, votre mission principale sera la conception, la construction et la maintenance de l’infrastructure de données de l’entreprise. Vous travaillerez en étroite collaboration avec les équipes de développement et de science de données pour...
