Data Engineer Databricks

il y a 2 jours

SaintDenis, France VISIAN Temps plein

Bonjour,
Dans le cadre de ses projets clients Visian est à la recherche d'un Data Engineer Databricks
La mission du Data Engineer est de developper et de maintenir la liaison entre les besoins du métier Asset management et l?équipe Data Plateforme du Pôle Data en place.
**A ce titre, il/elle doit**:
? Comprendre les enjeux et les problématiques métier, avoir une vision cohérente des activités de l?entreprise
? Analyser, cadrer, synthétiser, prioriser les besoins des demandeurs (équipe Data A7M), pour être en cohérence avec l?architecture fonctionnelle de la solution cible de l?A7M
? Analyser les traitements de données des données reçues via interface et formaliser les développements à réaliser
? Bien connaître le Data Catalog, avoir une vision transverse des sujets adressés à l?équipe Data pour une évenuelle réutilisation des travaux réalisés
? Définir et mettre en place les règles de gestion de nettoyage et de structuration des bases de données
? Définir et mettre en place les algorithmes et traitements des données pour obtenir les indicateurs répondant aux besoins du métier
? Réaliser des outils d?analyse / Rapports BI
? Concevoir et dimensionner les bases de données et les traitements nécessaires ainsi que les normes et standards d?utilisation de ces bases qui vont accueillir les données nécessaires pour le programme de l?Asset Management
? Capter les données nécessaires et d?une façon optimale (API) dans la mesure du possible pour le périmètre de l?asset mamangement
? Définir et gérer les standards techniques
? Echanger avec les équipes métier de l?Asset Management en sachant vulgariser ses
travaux
? Contribuer à la mise en place et à l?optimisation de la plateforme Data
? Participer à l?étude d?impact pour le programme de l?Asset Management sur
l?architecture existante ou prévisionnelle et préconiser des choix techniques en vue d?assurer la cohérence de cette évolution
Diffusable
? Promouvoir l?architecture de la plateforme Data auprès du reste de l?équipe
? Expliquer le sens des informations exploitables en termes pertinents pour les métiers
? Transmettre le processus de recherche et les suppositions qui ont mené à la
conclusion
**LIVRABLES ET RESPONSABILITES**:
? Garant du bon déroulement du développement des traitements des données
? Garant du bon déroulement des mises en production des livrables de l?Asset
Management
? Garant des vues du portail décisionnel de l?asset management sous PowerBI
? Développements Python
? Documentation des codes développés
? Documentation des données utilisées et produites
? Modélisations statistiques et Machine Learning
? Rapports / Outils BI
? Respect des choix opérés par le tech lead
? Très bonne connaissance des problématiques data
? Expérience en environnement DataBricks et cloud AZURE
? Solide connaissance des solutions et techniques de captation de données (Stream, API, batch,...)
? Solide maitrise de PowerBI et UX des rapports Data
? Maîtrise de SQL et des bases de données
? Maîtrise du langage Python et Pyspark
? Maîtrise de Git
? Bonnes maîtrise machine learning
? Connaissances des techniques statistiques
? Connaissance de l?outil JIRA/confluence

  • Databricks Engineer Expert — Big Data

    il y a 2 semaines

    Saint-Ouen-l'Aumône, France Onepoint Temps plein

    Une entreprise innovante en data recherche un Consultant Databricks Engineer - Expert à Saint-Ouen-l'Aumône. Vous serez responsable de développer des solutions Big Data et d'optimiser des pipelines de données en utilisant Apache Spark et Databricks. Le candidat idéal a plus de 3 ans d'expérience et maîtrise les technologies Cloud et la gouvernance des...

  • Data Engineer Databricks Confirmé

    il y a 2 semaines

    Saint-Priest, France TeamWork Corporate Temps plein

    Description du poste Nous recherchons un Data Engineer confirmé souhaitant évoluer vers un rôle de Tech Lead, avec une expertise forte sur Databricks. Vous interviendrez sur des plateformes data modernes de type Lakehouse, chez des clients grands comptes et internationaux, dans des contextes de build, de scale ou de modernisation. En tant que référent...

  • Databricks Tech Lead – Lakehouse Architect

    il y a 2 semaines

    Saint-Priest, France TeamWork Corporate Temps plein

    Une entreprise de technologie recherche un Data Engineer confirmé pour évoluer vers un rôle de Tech Lead. Vous serez responsable de l'expertise technique sur Databricks, en créant des architectures Lakehouse sécurisées et en mentorant les équipes. Le candidat idéal a une expérience significative dans le data engineering et des compétences avancées...

  • Consultant Databricks Engineer

    il y a 2 semaines

    Saint-Ouen-l'Aumône, France Onepoint Temps plein

    Au-delà de la RSE, nous avons développé notre propre approche, RESET, qui englobe l'ensemble de nos engagements en matière de responsabilité économique, sociale, environnementale et technologique, tant au sein de notre collectif que chez nos clients. Onepoint, est une entreprise inclusive, handi accueillante, avec une politique de diversité affirmée...

  • Data Engineer Scala/Spark.

    il y a 1 jour

    Saint-Denis, Île-de-France Codezys Temps plein

    Client : Entreprise de transport Poste : Architecte technique Senior DSM Expérience : Plus de 8 ans TJM d?achat max : 515? Localisation : Banlieue parisienne Deadline réponse : 09/12 Démarrage : 01/01/2025 Durée : Mission très longue DESCRIPTION DE LA MISSIONObjectifsLa prestation, objet du présent cahier des charges, est une prestation à...

  • Tech Lead Data Eng

    il y a 2 semaines

    Saint-Ouen-l'Aumône, France Onepoint Temps plein

    Une entreprise tech en pleine croissance cherche un(e) Tech Lead Data Engineering pour concevoir et industrialiser des pipelines de données en utilisant Databricks. Le candidat idéal possède 5 ans d'expérience en data engineering, dont 3 ans avec Databricks, et doit être capable de promouvoir les meilleures pratiques au sein des équipes. Le poste est...

  • Tech Lead Data Engineering

    il y a 2 semaines

    Saint-Ouen-l'Aumône, France Onepoint Temps plein

    Description de poste Au-delà de la RSE, nous avons développé notre propre approche, RESET, qui englobe l'ensemble de nos engagements en matière de responsabilité économique, sociale, environnementale et technologique, tant au sein de notre collectif que chez nos clients. Onepoint, est une entreprise inclusive, handi accueillante, avec une politique de...

  • Data Engineer PYSPARK H/F

    il y a 1 semaine

    Saint-Ouen, Île-de-France Inetum Temps plein

    Description de l'entreprise Inetum est un leader européen des services numériques. Pour les entreprises, les acteurs publics et la société dans son ensemble, les consultants et spécialistes du groupe visent chaque jour l'impact digital : des solutions qui contribuent à la performance, à l'innovation et au bien commun.Présent dans 19 pays au plus...

  • Data Engineer Senior

    il y a 2 semaines

    Saint-Denis, Île-de-France Collective Temps plein

    Budget: 500La missionDate de début souhaitée : 13/01/2026 - pour 1 an RENOUVELABLEBasé à Paris, avec déplacement ponctuels à NantesContexte de la prestationLa mission s'inscrit dans unerégie reconductible (Assistance Technique).Le consultant intégrera uneFactory Data & IA, au sein d'une organisation structurée et outillée, travaillant sur des...

  • Data Engineer

    il y a 2 semaines

    Saint-Denis, Île-de-France Free-Work Temps plein

    Nous recherchons unData Engineer | DevOps AWS (H/F)pour contribuer à laconstruction, àl'évolutionet à lafiabilitéd'unData Lake stratégique, au cœur des projets liés à l'analyse de l'expérience utilisateur.Vous interviendrez sur l'ensemble de lachaîne de traitement des données(ingestion, transformation, restitution) au sein d'un...