Data Engineer

Vous ambitionnez d’intégrer un acteur important du secteur agricole ? Postulez.

Hays Technology recherche un Data engineer.

Rattaché à la Direction Systèmes d'Information (DSI), vous intégrez une équipe de 4 personnes. Votre rôle consiste à mettre en place la collecte et la mise à disposition des données au sein de l’entreprise, industrialiser et mettre en production des traitements sur les données (par exemple : mise à disposition de tableaux de bord, intégration de modèles statistiques) en lien avec les équipes métiers et les équipes qui les analysent.

C’est un rôle central et très important, situé au cœur du développement de l'entreprise Vous êtes le maillon essentiel pour fournir les données fiables aux métiers leur permettant de créer leurs nouveaux produits et services.

Acheminement de la donnée:

- Recueillir les besoins métiers des différentes unités demandeuses et utilisatrices de solutions de collecte et stockage de la donnée.
- Développer les solutions techniques de collecte de la donnée via des API.
- Développer des solutions techniques de stockage de la donnée (Hadoop).
- Réaliser les tests unitaires et d’intégration.
- Mettre en place et maintenir les batchs, c’est-à-dire les automatisations d’une série de traitements.

Mise à disposition des données aux équipes utilisatrices:

- Industrialiser et automatiser le nettoyage de la donnée selon les spécifications retenues.
- Gérer, maintenir et documenter de multiples bases de données (via l’importation de données externes en open data ou de données internes par exemple).
- Gérer le cycle de vie de la donnée conformément aux directives inscrites dans le RGPD.
- Assurer le suivi de production et la maintenance.
- Développer l’industrialisation de modèles statistiques ou de machine learning.
- Implémentation du suivi de la validité du modèle statistique.
- Assurer le suivi de production et la maintenance.

Suivi des projets de développement:

- Établir les spécifications techniques à partir de l’analyse des besoins.
- Reporter l’activité auprès du chef de projet.
- Assurer une veille technologique sur les outils big data.
- Écrire la documentation relative aux bases de données (règles de gestion, dictionnaire des variables ).

En synthèse, vous êtes le gardien des données:

- Automatiser la collecte de données.
- Industrialiser le traitement de données.
- Travailler sur le pipeline des données pour augmenter sa robustesse et performance.
- Faire évoluer le modèle des données en fonction des nouveaux usages.
- Fournir des extractions de données à la demande.

De formation Bac +5 type école d'Ingénieur orienté développement, ou Master spécialisé en Data, avec une spécialisation Big Data, vous êtes passionné par l'innovation et les technologies liées aux domaines Data Analytics & AI.

Le travail en équipe est votre leitmotiv ? C'est parfait, car le poste nécessite de travailler avec des interlocuteurs multiples et demande ainsi une grande adaptabilité. Vos capacités organisationnelles, votre autonomie, votre sens de l'initiative, votre rigueur et votre orientation résultat sont autant d'atouts qui vous permettront d'exceller dans la fonction.

Compétences:

- Maîtrise de l'environnement technique du cloud provider (GCP),
- Maîtrise des bases de données (BigQuery),
- Maîtrise de langages de programmation (Java, Python, Spark, Scala, Sql, ),
- Maîtrise des outils de gestion de flux et de manipulation de données ETL/ELT (Semarchy DI, Google DataFlow, Dataproc, etc.),
- Connaissance des méthodes de développement agile,
- Maîtrise des systèmes d'exploitation (Unix, Windows ). #1312223