Data Engineer Azure Retail

Il y a 3 mois


ÎledeFrance, France LINCOLN Temps plein

CDI : Tech Lead / Senior Data Engineer Azrue Retail - H/F


At Lincoln, we are a Pure Player Data company, reinventing data analysis for over 30 years. As experts in Modern BI, Big Data, and Data Science , we transform your data into powerful solutions for major accounts in sectors such as banking, retail, telecommunications, industrial, healthcare, and more. Our team is dedicated to delivering high-impact data solutions, empowering our clients to make data-driven decisions that drive their success. Join us and contribute to shaping the future of data analytics with our dynamic and innovative team.



Purpose of the Job

The Tech Lead / Senior Data Engineer will lead and contribute to the design, development, maintenance, and evolution of AI and Data Products. This highly technical role aligns with delivering business value as you will be working within an AI and Data Product team. From day one, you will participate in the design, development, and evolution of data pipelines, aiming at serving data to data consumers within the product team.



What You’ll Do


As a Tech Lead / Senior Data Engineer, your key responsibilities will include:


Lead Design and Development

  • Spearhead the design, implementation, and optimization of batch and real-time data ingestion pipelines using tools like Databricks (with PySpark) and DBT.
  • Ensure that raw data is cleansed, transformed, and enriched to be analytics-ready while optimizing data processing for speed and cost-efficiency.


Architect & Manage Data Systems

  • Design and implement robust database schemas, tables, and views.
  • Optimize storage formats such as Parquet or Delta Lake, enforce data quality checks, and document data lineage.
  • Implement partitioning, bucketing, and indexing strategies to ensure efficient data retrieval.


Collaborate with Data Experts

  • Work closely with data scientists to provide data in the right formats for machine learning and advanced analytics.
  • Collaborate with platform engineers to follow best practices and escalate common needs.
  • Support data analysts with SQL queries, views, and report generation, and assist in deploying machine learning models to production.


Ensure Security & Compliance

  • Implement role-based access controls, data encryption (both at-rest and in-transit), and adhere to industry and organizational data standards.
  • Regularly audit data access and usage to ensure compliance with privacy regulations and best practices.


Manage Infrastructure & Configuration

  • Set up and maintain Azure cloud infrastructure, including configuring Azure Data Lake Storage, Blob Storage, and deploying Databricks clusters.
  • Implement and manage data pipelines using Azure Data Factory and troubleshoot infrastructure-related issues as they arise.


Document & Train

  • Onboard new team members by providing access and initial training on tools.
  • Create comprehensive documentation and knowledge bases for data pipelines, best practices, and tooling.


Drive Continuous Improvement

  • Stay updated with the latest advancements in data engineering technologies.
  • Propose and implement workflow and system optimizations, and proactively identify areas for improvement and automation.
  • Keep the team informed on new features or changes in Azure, Databricks, or related technologies.


Hard Skills

  • Software Engineering & SQL: Python, SQL, software engineering practices, Python ecosystem, and SQL optimization.
  • Data Architecture: Design, integration, and cloud platform expertise, particularly with Azure and Databricks.
  • Data Processing with Big Data Frameworks: Mastery of PySpark and understanding of Delta Lake.
  • Data Storage & Data Management: Database management, data formats, and storage optimization.
  • Data Integration Tools: Proficiency with Azure Data Factory and DBT for data transformation.
  • Performance Optimization: Query tuning and pipeline optimization.
  • Security & Compliance: Data security, access control, and compliance with regulations.
  • DevOps & Automation: CI/CD, infrastructure as code, and basic knowledge of containerization.
  • Monitoring & Troubleshooting: Familiarity with logging, monitoring tools, and debugging skills.


Benefits

  • Collaborative and Innovative Environment: Work in a team that values creativity and teamwork.
  • Certified Training and Personalized Support: Access to professional development and mentoring to enhance your skills.
  • Remote Work and Flexible Hours: Balance your work and personal life with our flexible working arrangements.
  • Competitive Compensation and Attractive Benefits: Enjoy a rewarding salary package with comprehensive benefits.
  • Mobility Opportunities: Possibility of relocation to Lille, Lyon, or Aix-en-Provence.


Recruitment Process

  • Two Interviews: A streamlined process with a Human Resources interview followed by a technical interview.


If you're passionate about data challenges and eager to join a dynamic and innovative team, apply now and help redefine the future of data analytics at Lincoln


  • Consultant.e expert.e

    il y a 3 semaines


    Île-de-France, France Valoway Temps plein

    Qui sommes-nous? Valoway, pure player Data, IA & Cloud, nous intervenons sur des projets innovants, à travers l'élaboration et la mise en œuvre stratégique de transformations numériques.Animés par le succès clients, nous construisons un modèle qui puise son inspiration dans la richesse du parcours unique de chacun, en développant nos pôles...

  • Data Engineer Databricks

    Il y a 4 mois


    Île-de-France, France LINCOLN Temps plein

    Lincoln Pure Player Data : Réinventant l'analyse depuis 30 ans. Experts en Modern BI, Big Data et Science des données . Nous transformons vos données en solutions pour les grands comptes, des secteurs bancaire, retail, télécoms, industriel, santé, et plus encore .Description du poste : Rejoignez notre équipe en tant que Consultant Data Engineer...

  • Senior Data Engineer

    il y a 3 semaines


    Île-de-France, France L-Acoustics Group Temps plein

    Join our passionate and dedicated teams who are shaping the future of sound!En tant que Senior Data Engineer, vous ferez partie de notre équipe IT & Digital, intervenant sur des projets stratégiques à l'échelle internationale (Europe, Amériques, Asie-Pacifique). Vous travaillerez en étroite collaboration avec nos trois centres R&D en France, au...

  • Data Engineer H/F

    il y a 3 semaines


    Île-de-France, France JEMS Temps plein

    A propos de JEMSNous sommes le seul industriel de la donnée en Europe. Notre métier est de créer, manager et exploiter le patrimoine data de nos clients.Nous avons la conviction que chaque entreprise peut adopter une démarche innovante de gestion de la donnée et créer des cas d'usage disruptifs en réduisant l'impact écologique et en diminuant...

  • Data Engineer H/F

    il y a 1 jour


    Île-de-France, France JEMS Temps plein

    A propos de JEMSNous sommes le seul industriel de la donnée en Europe. Notre métier est de créer, manager et exploiter le patrimoine data de nos clients.Nous avons la conviction que chaque entreprise peut adopter une démarche innovante de gestion de la donnée et créer des cas d'usage disruptifs en réduisant l'impact écologique et en diminuant...

  • Data Engineer Senior

    il y a 1 jour


    Île-de-France, France Havas Group Temps plein

    HybridAgency :Havas MarketJob Description Summary : Dans le cadre de son développement, Havas Market recherche un Data Engineer en CDI.Job Description :Dans un contexte de développement accru des enjeux e-commerce pour les entreprises, exacerbé par la montée en puissance du e-retail, de bouleversement permanent avec une frugalité de la donnée et une...

  • IT Retail Data Officer

    il y a 3 semaines


    Île-de-France, France Hermès Temps plein

    Job DescriptionÉléments de contexte :Au sein de la Division Hermès Systèmes d'Information (HSI) Groupe, l'équipe HSI Commercial recherche un IT Retail Data Officer H/F qui sera rattaché au pôle Stratégie IT et Organisation.La Direction HSI Commercial Groupe comporte 4 pôles étroitement connectés, intervenant de la réflexion stratégique...

  • Assistant PERFORMANCE RETAIL

    il y a 3 semaines


    Île-de-France, France Hermès Temps plein

    Job DescriptionAssistant PERFORMANCE RETAIL & DATA Mission générale : Vous travaillerez au sein de la direction commerciale de la filiale Hermès distribution France en étant directement rattaché au pôle Retail Performance et Data. Vous participerez au développement de l'activité des magasins du réseau sur des problématiques stratégiques et...

  • Consultant.e expert.e

    il y a 12 heures


    Pays de la Loire, France Valoway Temps plein

    Qui sommes-nous? Valoway, pure player Data, IA & Cloud, nous intervenons sur des projets innovants, à travers l'élaboration et la mise en œuvre stratégique de transformations numériques.Animés par le succès clients, nous construisons un modèle qui puise son inspiration dans la richesse du parcours unique de chacun, en développant nos pôles...

  • Data Engineer Cloud

    il y a 3 semaines


    Île-de-France, France ISALYS DIGITAL LAB Temps plein

    ISALYS DIGITAL LAB est la filiale du Groupe ISALYS dédiée à la transformation et la performance digitale. Nous prônons la conduite de projet en mode Agile avec un esprit start-up et l’incubation de nouvelles idées en interne. Nous travaillons de façon structurée avec une démarche ISA : Innovation, Solutions, Agilité. Nous intervenons...

  • Tech Lead Data Engineer H/F

    il y a 3 semaines


    Île-de-France, France JEMS Temps plein

    A propos de JEMSNous sommes le seul industriel de la donnée en Europe. Notre métier est de créer, manager et exploiter le patrimoine data de nos clients.Nous avons la conviction que chaque entreprise peut adopter une démarche innovante de gestion de la donnée et créer des cas d'usage disruptifs en réduisant l'impact écologique et en diminuant...


  • Île-de-France, France JEMS Temps plein

    A propos de JEMSNous sommes le seul industriel de la donnée en Europe. Notre métier est de créer, manager et exploiter le patrimoine data de nos clients.Nous avons la conviction que chaque entreprise peut adopter une démarche innovante de gestion de la donnée et créer des cas d'usage disruptifs en réduisant l'impact écologique et en diminuant...

  • Lead data engineer

    il y a 3 semaines


    Île-de-France, France Direct Assurance Temps plein

    L'équipe " Big Data " a pour mission principale de contribuer à la dynamique continue d'innovation et de perfectionnement de l'entreprise en résolvant des problématiques business concrètes par la mise en place d'une plateforme Data dans le Cloud, ainsi que la conception et la réalisation de solutions techniques de data science en...


  • Île-de-France, France TF1 Temps plein

    A proposLa Direction des Technologies opère et met en œuvre les systèmes techniques (IT et Broadcast) soutenant l'activité du Groupe TF1. Elle assure notamment le maintien en condition opérationnelle des assets techniques, pilote la stratégie technologique et mène les grands projets techniques pour l'ensemble des directions du Groupe. Elle est...

  • Data Engineer

    il y a 3 semaines


    Île-de-France, France Vertex Agility Temps plein

    We're Hiring: Data Engineer & Production Support Analyst Join our team as a Data Engineer, who will work closely with Data Architects & Technical Leads to deliver the Privileged Technical Account (PTA) Inventory to production. This hands-on role supports build, test, and deployment, with a focus on security and IAM solutions. After launch, you'll...

  • Data Engineer GCP

    Il y a 4 mois


    Île-de-France, France LINCOLN Temps plein

    Lincoln Pure Player Data : Réinventant l'analyse depuis 30 ans. Experts en Modern BI, Big Data et Science des données . Nous transformons vos données en solutions pour les grands comptes, des secteurs bancaire, retail, télécoms, industriel, santé, et plus encore .Description du poste : Rejoignez notre équipe en tant que Consultant Data Engineer...

  • Architecte Cloud Azure

    il y a 3 semaines


    Île-de-France, France HIGHTEAM Temps plein

    Nous recherchons un Architecte Cloud Azure pour concevoir et implémenter des solutions cloud robustes et évolutives. Vous jouerez un rôle clé dans la transformation numérique de l'entreprise en définissant des architectures cloud optimisées et en guidant les équipes techniques.ResponsabilitésConcevoir des architectures cloud sur la plateforme...


  • Île-de-France, France Enable Temps plein

    At Enable, we believe rebates are the best way for companies within the supply chain to create, maintain and grow their trading relationships. Rebates allow trading partners to make the best decisions for their businesses, meaning everyone wins: manufacturers, distributors, retailers and, most importantly, end consumers. At Enable, we're creating a...

  • Senior Data Engineer M/F

    il y a 3 semaines


    Île-de-France, France Kayrros Temps plein

    Passionate about Tech, AI and Climate action? Join Kayrros, as a SENIOR DATA ENGINEER M/F (CDI)Kayrros is a global climate technology company and the world leader in environmental intelligence.Founded in 2016, it uses artificial intelligence and machine learning to analyze massive amounts of satellite imagery and other inputs at scale and generate...

  • Internship Data AI/ML Engineer

    il y a 3 semaines


    Île-de-France, France Tata Consultancy Services Temps plein

    Localisation : 255 Quai de Stalingrad, 92130 Issy-les-MoulineauxDuration : 6 months Tata Consultancy Services (TCS) is an IT services, consulting and business solutions organization that has been partnering with many of the world’s largest businesses in their transformation journeys for over 55 years. As part of the Tata group, India's largest...