Data Engineer Azure Retail
il y a 5 jours
CDI : Tech Lead / Senior Data Engineer Azrue Retail - H/F
At Lincoln, we are a Pure Player Data company, reinventing data analysis for over 30 years. As experts in Modern BI, Big Data, and Data Science , we transform your data into powerful solutions for major accounts in sectors such as banking, retail, telecommunications, industrial, healthcare, and more. Our team is dedicated to delivering high-impact data solutions, empowering our clients to make data-driven decisions that drive their success. Join us and contribute to shaping the future of data analytics with our dynamic and innovative team.
Purpose of the Job
The Tech Lead / Senior Data Engineer will lead and contribute to the design, development, maintenance, and evolution of AI and Data Products. This highly technical role aligns with delivering business value as you will be working within an AI and Data Product team. From day one, you will participate in the design, development, and evolution of data pipelines, aiming at serving data to data consumers within the product team.
What You'll Do
As a Tech Lead / Senior Data Engineer, your key responsibilities will include:
Lead Design and Development
- Spearhead the design, implementation, and optimization of batch and real-time data ingestion pipelines using tools like Databricks (with PySpark) and DBT.
- Ensure that raw data is cleansed, transformed, and enriched to be analytics-ready while optimizing data processing for speed and cost-efficiency.
Architect & Manage Data Systems
- Design and implement robust database schemas, tables, and views.
- Optimize storage formats such as Parquet or Delta Lake, enforce data quality checks, and document data lineage.
- Implement partitioning, bucketing, and indexing strategies to ensure efficient data retrieval.
Collaborate with Data Experts
- Work closely with data scientists to provide data in the right formats for machine learning and advanced analytics.
- Collaborate with platform engineers to follow best practices and escalate common needs.
- Support data analysts with SQL queries, views, and report generation, and assist in deploying machine learning models to production.
Ensure Security & Compliance
- Implement role-based access controls, data encryption (both at-rest and in-transit), and adhere to industry and organizational data standards.
- Regularly audit data access and usage to ensure compliance with privacy regulations and best practices.
Manage Infrastructure & Configuration
- Set up and maintain Azure cloud infrastructure, including configuring Azure Data Lake Storage, Blob Storage, and deploying Databricks clusters.
- Implement and manage data pipelines using Azure Data Factory and troubleshoot infrastructure-related issues as they arise.
Document & Train
- Onboard new team members by providing access and initial training on tools.
- Create comprehensive documentation and knowledge bases for data pipelines, best practices, and tooling.
Drive Continuous Improvement
- Stay updated with the latest advancements in data engineering technologies.
- Propose and implement workflow and system optimizations, and proactively identify areas for improvement and automation.
- Keep the team informed on new features or changes in Azure, Databricks, or related technologies.
Hard Skills
- Software Engineering & SQL: Python, SQL, software engineering practices, Python ecosystem, and SQL optimization.
- Data Architecture: Design, integration, and cloud platform expertise, particularly with Azure and Databricks.
- Data Processing with Big Data Frameworks: Mastery of PySpark and understanding of Delta Lake.
- Data Storage & Data Management: Database management, data formats, and storage optimization.
- Data Integration Tools: Proficiency with Azure Data Factory and DBT for data transformation.
- Performance Optimization: Query tuning and pipeline optimization.
- Security & Compliance: Data security, access control, and compliance with regulations.
- DevOps & Automation: CI/CD, infrastructure as code, and basic knowledge of containerization.
- Monitoring & Troubleshooting: Familiarity with logging, monitoring tools, and debugging skills.
Benefits
- Collaborative and Innovative Environment: Work in a team that values creativity and teamwork.
- Certified Training and Personalized Support: Access to professional development and mentoring to enhance your skills.
- Remote Work and Flexible Hours: Balance your work and personal life with our flexible working arrangements.
- Competitive Compensation and Attractive Benefits: Enjoy a rewarding salary package with comprehensive benefits.
- Mobility Opportunities: Possibility of relocation to Lille, Lyon, or Aix-en-Provence.
Recruitment Process
- Two Interviews: A streamlined process with a Human Resources interview followed by a technical interview.
If you're passionate about data challenges and eager to join a dynamic and innovative team, apply now and help redefine the future of data analytics at Lincoln
-
Data Engineer Azure Retail
il y a 3 semaines
Paris, Île-de-France LINCOLN Temps pleinCDI : Tech Lead / Senior Data Engineer Azrue Retail - H/F
-
Data Engineer Azure
il y a 1 semaine
Paris, Île-de-France Cherry Pick Temps pleinCherry Pick est à la recherche d'un Data Engineer Azure pour l'un de mes clients dans le secteur de l'énergie. Missions : Au sein de notre équipe Data Platform, vous interviendrez avec d'autres Data Engineers etDevOps dans les activités de création et d'nteraction avec des solutions de Data Lake (Gen 2),de maintien et d'évolution du processus de...
-
Lead Azure Data Engineer
il y a 3 semaines
Paris, Île-de-France SQLI Temps pleinRejoignez SQLI et faites partie de l'équipe Data, au sein d'une société à taille humaine, mais avec de grandes ambitions. Votre futur écosystème : Au sein du pôle Data de SQLI , pour rejoindre une équipe dynamique de 40 passionnés. Des projets digitaux pour des clients grands comptes : notamment dans les secteurs des services financiers, de...
-
Lead Data Engineer
il y a 3 semaines
Paris, Île-de-France Data Engineer - Lead - Data Platforms Temps pleinTitre du poste: Data ArchitectDans le contexte de l'enseigne E.Leclerc, SIPLEC est chargé du développement, de l'achat et de la commercialisation de services et de produits porteurs des valeurs et engagements du Mouvement E.Leclerc dans les domaines de l'énergie et de l'industrie manufacturière.Le PosteRattaché(e) au Responsable Data Engineering, vous...
-
Cloud Data Engineer Azure
il y a 1 semaine
Paris, Île-de-France Cherry Pick Temps pleinEn quelques motsCherry Pick est à la recherche d'un "Data Azure Engineer" pour un client dans le secteur de l'énergie.DescriptionContexte Au sein de notre équipe Data Platform, vous interviendrez avec d'autres Data Engineers etDevOps dans les activités de création et d'interaction avec des solutions de Data Lake (Gen 2),de maintien et d'évolution du...
-
Big Data Engineer Lead
il y a 3 semaines
Paris, Île-de-France Data Engineer - Lead - Data Platforms Temps pleinTitre du poste: Data ArchitectDans le contexte de l'enseigne E.Leclerc, SIPLEC est chargé du développement, de l'achat et de la commercialisation de services et de produits porteurs des valeurs et engagements du Mouvement E.Leclerc dans les domaines de l'énergie et de l'industrie manufacturière.Le PosteRattaché(e) au Responsable Data Engineering, vous...
-
Lead Azure Data Engineer
il y a 3 semaines
Paris, Île-de-France SQLI Temps pleinRejoignez SQLI et faites partie de l'équipe Data, au sein d'une société à taille humaine, mais avec de grandes ambitions. Nous sommes plus de 2200 talents sur 13 pays et 3 continents. Votre futur écosystème : Au sein du pôle Data de SQLI , pour rejoindre une équipe dynamique de +40 passionnés. Des projets digitaux pour des clients grands...
-
Cloud Data Engineer Azure Freelance
il y a 6 jours
Paris, Île-de-France Cherry Pick Temps pleinEn quelques mots Cherry Pick est à la recherche d'un "Data Azure Engineer" pour un client dans le secteur de l'énergie. Description Contexte Au sein de notre équipe Data Platform, vous interviendrez avec d'autres Data Engineers et DevOps dans les activités de création et d'interaction avec des solutions de Data Lake (Gen 2), de maintien et...
-
Data Engineer Cloud Azure F/H
il y a 3 semaines
Paris, Île-de-France SOFTEAM Temps pleinVous évoluez dans le domaine de la Data et souhaitez intégrer un leader de la transformation numérique spécialisé dans les secteurs de la Banque, du Luxe, de l'Assurance, de la Finance, de l'Energie et la possibilité d'évoluer au sein du Groupe Docaposte Softeam est labellisé "HappyIndex AtWork " 2022 pour la 5ème année consécutive Nos...
-
Data Engineer Cloud Azure F/H
il y a 3 semaines
Paris, Île-de-France SOFTEAM Temps pleinVous évoluez dans le domaine de la Data et souhaitez intégrer un leader de la transformation numérique spécialisé dans les secteurs de la Banque, du Luxe, de l'Assurance, de la Finance, de l'Energie et la possibilité d'évoluer au sein du Groupe Docaposte Softeam est labellisé "HappyIndex AtWork " 2022 pour la 5ème année consécutive Nos...
-
Data Engineer Cloud Azure F/H
il y a 1 semaine
Paris, Île-de-France SOFTEAM Temps pleinVous évoluez dans le domaine de la Data et souhaitez intégrer un leader de la transformation numérique spécialisé dans les secteurs de la Banque, du Luxe, de l'Assurance, de la Finance, de l'Energie et la possibilité d'évoluer au sein du Groupe Docaposte Softeam est labellisé "HappyIndex AtWork " 2022 pour la 5ème année consécutive Nos...
-
DATA Engineer Azure Databricks F/H
il y a 3 semaines
Paris, Île-de-France SOFTEAM Temps pleinVous évoluez dans le domaine de la Data et souhaitez intégrer un leader de la transformation numérique spécialisé dans les secteurs de la Banque, du LGuxe, de l'Assurance, de la Finance, de l'Energie et la possibilité d'évoluer au sein du Groupe Docaposte Softeam est labellisé "HappyIndex AtWork " 2022 pour la 5ème année consécutive Nos...
-
DATA Engineer Azure Databricks F/H
il y a 4 semaines
Paris, Île-de-France SOFTEAM Temps pleinVous évoluez dans le domaine de la Data et souhaitez intégrer un leader de la transformation numérique spécialisé dans les secteurs de la Banque, du LGuxe, de l'Assurance, de la Finance, de l'Energie et la possibilité d'évoluer au sein du Groupe Docaposte Softeam est labellisé "HappyIndex AtWork " 2022 pour la 5ème année consécutive Nos...
-
DATA Engineer Azure Databricks F/H
il y a 2 semaines
Paris, Île-de-France SOFTEAM Temps pleinVous évoluez dans le domaine de la Data et souhaitez intégrer un leader de la transformation numérique spécialisé dans les secteurs de la Banque, du LGuxe, de l'Assurance, de la Finance, de l'Energie et la possibilité d'évoluer au sein du Groupe Docaposte Softeam est labellisé "HappyIndex AtWork " 2022 pour la 5ème année consécutive Nos...
-
Azure Data Engineer
il y a 6 jours
Paris, Île-de-France MDW Temps pleinAbout us : MDW (My Data Works) is a consultancy and service provider specializing in business transformation for companies, utilizing cloud solutions to integrate data, AI, and business applications. The company is globally recognized as a Microsoft technology partner and has received 5 "Microsoft Partner Of The Year" awards. MDW is trusted by well-known...
-
Data Engineer
il y a 7 jours
Paris, Île-de-France LINCOLN Temps pleinCDI : Tech Lead / Senior Data Engineer Azrue Retail - H/F&##128640; At Lincoln , we are a Pure Player Data company, reinventing data analysis for over 30 years. As experts in Modern BI, Big Data, and Data Science &##128161;, we transform your data into powerful solutions for major accounts in sectors such as banking, retail, telecommunications,...
-
Cloud Data Engineer Azure + MS Fabric Engineer
il y a 1 semaine
Paris, Île-de-France Cherry Pick Temps pleinEn quelques motsCherry Pick est à la recherche d'un "Data Azure + MS Fabric Engineer" pour un client dans le secteur de l'énergie.DescriptionCONTEXTEVous rejoindrez une équipe au sein des services informatiques pour gérer la construction et le support de la plateforme Data & Analytics. Vous participerez à la maintenance et à l'évolution de cette...
-
Azure Data Architect
il y a 1 semaine
Paris, Île-de-France Focus Cloud Group Temps pleinData Cloud Architect, freelance, contrat de 24 mois, IDF Attractive opportunité pour un(e) Azure Data Architect chevronné(e) de rejoindre notre client final basé à La Défense sur un projet sensible à destination de millions de professionnels et de particuliers. Vous rejoindrez une équipe hautement performant pour participer à un...
-
Big Data Engineer
il y a 7 jours
Paris, Île-de-France LINCOLN Temps pleinLincoln Pure Player Data &##128161;: Réinventant l'analyse depuis 30 ans . Experts en Modern BI, Big Data et Science des données &##128202;. Nous transformons vos données en solutions pour les grands comptes, des secteurs bancaire, retail, télécoms, industriel, santé, et plus encore &##128188;. Rejoignez notre équipe en tant que Consultant Data...
-
Big Data Engineer
il y a 3 jours
Paris, Île-de-France LINCOLN Temps pleinLincoln Pure Player Data &##128161;: Réinventant l'analyse depuis 30 ans . Experts en Modern BI, Big Data et Science des données &##128202;. Nous transformons vos données en solutions pour les grands comptes, des secteurs bancaire, retail, télécoms, industriel, santé, et plus encore &##128188;. Rejoignez notre équipe en tant que Consultant Data...