Data Engineer/Architect Apache Iceberg Freelance
il y a 3 semaines
En quelques motsCherry Pick est à la recherche d'un Data Engineer/Architect(H/F), pour le compte de l'un de ses clients qui opère dans le domaine de la fabrication et la commercialisation des drones.Description Contexte de la missionDans un contexte de forte croissance des usages data autour de données issues de capteurs drones, la mission vise à concevoir et structurer une plateforme data internalisée, capable d’absorber des volumes importants de données hétérogènes (temps réel et batch), tout en répondant à des enjeux de sensibilité des données clients et de maintenance prédictive.️ Missions principales et rôleConcevoir et mettre en place un Data Lake basé sur une architecture médaillon (Bronze / Silver / Gold)Gérer l’ingestion et le stockage de données capteurs drones et de données tabulairesMettre en œuvre une architecture data basée sur Apache IcebergGarantir la disponibilité rapide des données après les vols d’essaiParticiper à la conception d’une brique data autonome, isolable pour les cas de données sensibles clientsContribuer à l’internalisation de la plateforme dataTraiter des pics de charge importants (jusqu’à 10 Go de données arrivant simultanément)Collaborer avec les équipes plateforme et data science sur les cas d’usage de maintenance prédictive ObjectifsCentraliser et fiabiliser les données drones dans un Data Lake scalable et robustePermettre une exploitation rapide des données post-volSécuriser et isoler certaines données selon les contraintes clientsPréparer les données pour des usages avancés (analytique, maintenance prédictive) Compétences requisesSolide expérience en Data Engineering / Data ArchitectureMaîtrise des architectures Data Lake et de la méthode MédaillonExpertise sur Apache IcebergExpérience sur Google Cloud Platform (GCP)Gestion de données volumineuses et ingestion massiveConnaissances en architectures data sécuriséesRust est un plus apprécié ProfilData Engineer / Data Architect confirméCapacité à travailler sur des sujets structurants et plateformesAutonomie, esprit d’analyse et force de propositionHabilitable (nationalité française requise + casier judiciaire vierge)Français courant
-
Data Engineer/Architect Apache Iceberg
il y a 2 heures
Marseille, Provence-Alpes-Côte d'Azur, France Collective Temps pleinBudget: En quelques motsCherry Pick est à la recherche d'unData Engineer/Architect(H/F), pour le compte de l'un de ses clients qui opère dans le domaine de la fabrication et la commercialisation des drones.Description Contexte de la missionDans un contexte de forte croissance des usages data autour dedonnées issues de capteurs drones, la mission vise à...
-
Data Engineer H/F
il y a 2 semaines
Greater Nice Metropolitan Area, France Matawan Services Temps pleinNous recherchons, pour nos clients basés près de Nice, deux profil Data Engineer, en charge de la conception, du développement et de l'exploitation des pipelines de données. Vos missions : Développer et maintenir des pipelines ETL/ELTAssurer l'intégration des données provenant de différentes sources Contribuer à l'exploitation / optimisation des...
-
Data Platform Engineer Aws Freelance
il y a 2 heures
Greater Paris Metropolitan Region, France Cherry Pick Temps pleinEn quelques motsCherry Pick est à la recherche d'un "Data Platform Enablement Engineer" pour un client dans le secteur BancaireDescription Le Contexte : La Tech au service de la RechercheVotre mission est au cœur de notre réacteur technologique. Vous ne construisez pas seulement des outils ; vousdonnez le pouvoirà notre communauté de plus de 50 Data...
-
Data Architect GCP
il y a 2 heures
Marseille, Provence-Alpes-Côte d'Azur, France Free-Work Temps pleinL'objectif principal est laconception et la mise en œuvre d'un Data Lake moderne sur GCP, basé sur unearchitecture Médaillon(Bronze / Silver / Gold) et s'appuyant surApache Iceberg, avec la capacité dedétacher une brique autonomepour certains clients manipulant des données sensibles.Missions principalesArchitecture & Data PlatformConcevoir et mettre en...
-
Data Engineer
il y a 2 heures
Greater Paris Metropolitan Region, France Kolab Temps pleinVotre rôle dans l'équipe :Concevoir, développer et maintenir des pipelines de données robustes et scalables sur AWS.Implémenter des traitements batch et streaming à forte volumétrie à l'aide de Apache Spark .Participer à la conception des architectures data (ingestion, transformation, exposition) en lien avec les équipes métiers et...
-
Data Engineer H/F
il y a 3 semaines
Greater Nice Metropolitan Area, France MATAWAN SERVICES Temps pleinNous recherchons, pour l'un de nos clients basés près de Nice, un Data Engineer en charge de concevoir, développer et industrialiser un socle technique.Vos missions :Développement de composantsMise en place de couches pour faciliter l'exploitation des donnéesParticiper aux choix technologiquesConcevoir, développer et maintenir des pipelines de...
-
DATA Engineer Databricks H/F
il y a 2 heures
Marseille, Provence-Alpes-Côte d'Azur, France Devoteam Data Driven Temps pleinAncrée au coeur de la cité phocéenne, Devoteam rassemble plus de 60 experts qui accompagnent nos clients dans leur transformation digitale. Spécialisés dans le cloud (AWS, Microsoft Azure, Google Cloud), l'IA, la cybersécurité, la data et l'automatisation des processus métiers, nous sommes leur partenaire de choix pour relever les défis de...
-
Data Engineer AWS Freelance
il y a 3 semaines
Greater Paris Metropolitan Region, France Cherry Pick Temps pleinEn quelques motsCherry Pick est à la recherche d'un "Data Engineer AWS" pour un client dans le secteur des Médias Description Le Contexte : Un Programme DATA AmbitieuxVous rejoignez la Direction DATA d'un grand groupe média d'envergure internationale. Dans le cadre d'un vaste programme de transformation, le groupe déploie des outils et processus...
-
Data engineer F/H
il y a 2 heures
Greater Lille Metropolitan Area, France Synchrone Fr Temps pleinConsultant(e) Data engineer cloud – F/H Lieu :Lille – Hybride Type :CDI/ Mission longue durée Secteur :ESN – Clients grands comptes Vos missionsConcevoir et implémenter des pipelines ETL robustes et performantsGérer et optimiser des bases de données relationnelles et non relationnellesDévelopper et maintenir des plateformes de données cloud ...
-
Data Engineer
il y a 2 heures
Greater Lille Metropolitan Area, France Winside Technology Temps pleinWinside, en bref ?Winside Technology est un pure player Tech, basé à Paris, Lyon, Lille, Bordeaux, Nantes et au Maroc.Créée en 2020, l'entreprise compte plus de250 consultants, accompagne plus de50 clients grands compteset a réalisé30M€ de chiffre d'affaires en 2024.Notre ADN repose surl'expertise, la qualité, la proximité et l'esprit d'équipe....