Data Engineer

Descriptif du poste

**Contexte**:
Au sein du département IT Data Science, nous recherchons une prestation de consultant Data Engineer avec expertise python pour participer au développement du Projet Vessel Profile.

Le projet Vessel profile est identifié comme projet Stratégique, il s agit de construire la brique logicielle qui porte la stratégie des lignes du groupe pour optimiser globalement le P&L des Lignes.

Le consultant travaillera au sein de l équipe projet et devra être sur place environ 3 jours par semaine. L'objectif étant d'accélérer au maximum la montée en connaissance et l'agilité de développement en restant à proximité directe du product owner, des experts métier, des experts data et des fournisseurs qui développeront l'applicatif.

**Mission et Responsabilités**:
Les principales missions du consultant en charge de la prestation seront notamment:

- Gestion des Données : Concevoir, développer et maintenir des pipelines ETL robustes pour l'extraction, la transformation et le chargement des données à partir de différentes sources vers notre entrepôt de données.
- Maîtrise de SQL : Utiliser de manière avancée SQL pour la manipulation et l'interrogation de grands ensembles de données, garantissant la performance et la fiabilité des requêtes.
- Utilisation de DBT : Expérience approfondie avec DBT (Data Build Tool) pour organiser, documenter et exécuter des transformations de données complexes tout en maintenant un niveau élevé de qualité.
- Développement d'API Python : Créer et maintenir des interfaces d'API en utilisant Python pour rendre les données accessibles aux différents systèmes internes et externes.
- Collaboration : Travailler en étroite collaboration avec les équipes techniques et métier pour comprendre les besoins en données, concevoir des solutions adaptées et garantir la qualité des livrables.
- Optimisation des Performances : Identifier et mettre en œuvre des améliorations pour optimiser les performances des processus de traitement de données et des requêtes.

Profil recherché

**Compétences Requises**:
**Hard Skills**:

- Maîtrise avancée de SQL, avec la capacité de concevoir des requêtes complexes et optimisées. Forte expertise attendue (min 5 ans).
- Expérience pratique avec DBT pour la modélisation de données et les transformations.
- Fortes compétences en développement Python pour la création d'API.
- Maitrise du versioning GIT.
- Compréhension des principes fondamentaux de l'ingénierie de données et des architectures de données distribuées.
- Expérience développement analytique.

**Soft Skills**:

- Doit pouvoir parler anglais pour se coordonner techniquement avec nos fournisseurs indiens.
- Capacité à travailler dans un environnement Agile (utilisation JIRA), avec de bonnes compétences en communication et en travail d'équipe.

Idéalement:

- Connaissance des algorithmes d optimisation python

**Environnement Technologique**:

- Base de données : Snowflake / PostgreSQL.
- DBT + GIT.
- API codées en Python.

**Livrables Attendus**:

- Développement et documentation des data pipelines (SQL + DBT).
- Développement et documentation des API Python.
- Rapport d avancement hebdomadaire.
- Participation à l ensemble des comité projets et sessions de travail.
- Organisation des sessions de travail nécessaires pour assurer la bonne intégration des développements effectués avec les consommateurs de ces développements.

Compétences attendues
- LANGUESAucune langue attendue

SAVOIR-ÊTRE
Agilité
Capacité d'analyse

**Voir plus**

SAVOIR-FAIRE
Outils de développement
Statistiques

**Voir plus**

Entreprise

EMC Talent est un leader européen du conseil en ingénierie. Notre portefeuille de solutions numériques, associé à notre expertise en matière d'ingénierie produits, nous positionne de façon privilégiée pour accompagner nos clients, exploiter la puissance des données connectées, accélérer l'innovation et stimuler l'avenir de l'industrie intelligente.

EMC Talent accompagne les acteurs industriels de multiples secteurs tout au long du cycle de vie de leurs produits, pour les aider à repenser leurs produits et processus industriels.

Le groupe EMC Talent se distingue par sa force culture entrepreneuriale et une large présence internationale.
- Autres offres de l'entreprise**Personne en charge du recrutement**
PRISCA TIDA
- _Chargée de recrutement_

Salaire

A partir de 30 k€ brut annuel

Prise de poste

Dès que possible

Expérience

Minimum 4 ans

Métier

Ingénieur en études et développement informatiques

Statut du poste

Cadre du secteur privé

Zone de déplacement

Pas de déplacement

Secteur d’activité du poste

CONSEIL POUR LES AFFAIRES ET AUTRES CONSEILS DE GESTION