Data Platform Engineer
Enregistrez cette offre et organisez votre recherche
Créez un compte gratuit pour enregistrer des offres d'emploi, créer des alertes et revenir à cette liste depuis votre tableau de bord.
En continuant, vous acceptez nos Conditions d’utilisation & Politique de confidentialité.
Dans le cadre du développement d'une société innovante spécialisée dans les solutions SaaS dans l'industrie, nous recherchons un Data Platform Engineer / Analytics Architect capable de piloter la modernisation complète d'une plateforme analytics stratégique.
Basée à Toulouse, cette entreprise développe des solutions permettant de digitaliser les opérations industrielles, automatiser les tests complexes et exploiter les données de production afin d'améliorer la qualité, les coûts et les délais de développement de systèmes critiques.
Vous prendrez la responsabilité de la refonte d'une plateforme de données exploitant plusieurs années d'historique industriel.
Vos missions:
Migration vers ClickHouse
- Concevoir le nouveau modèle de données.
- Définir les stratégies de partitionnement et de rétention.
- Sélectionner les moteurs adaptés (MergeTree, ReplicatedMergeTree, etc.).
- Mettre en œuvre les Materialized Views.
- Organiser la migration depuis InfluxDB sans interruption de service.
- Garantir la performance et la scalabilité de la plateforme.
Refonte de l'architecture Data
- Auditer l'ETL existant.
- Identifier les composants à conserver, simplifier ou remplacer.
- Mettre en place une architecture pérenne et maintenable.
- Optimiser les flux d'ingestion et de transformation.
Gouvernance et qualité des données
- Cartographier les différentes sources de données.
- Définir les règles de qualité et de conservation.
- Produire la documentation technique associée.
- Mettre en place les bonnes pratiques de gestion des données.
Grafana & Observabilité
- Migrer les tableaux de bord existants.
- Créer de nouveaux dashboards adaptés aux besoins métiers.
- Optimiser les requêtes et la visualisation des données.
- Déployer l'alerting et le provisioning as code.
Accompagnement des équipes
- Formaliser les choix d'architecture.
- Rédiger la documentation technique.
- Assurer le transfert de compétences auprès des équipes internes.
Les compétences techniques
- Data
- ClickHouse
- SQL avancé
- Modélisation de données temporelles
- Kafka
- Vector
- Telegraf
- ETL / ELT
- Visualisation
- Grafana
- Infrastructure
- Kubernetes
- Infrastructure as Code
- Cloud
- dbt
- InfluxDB
- Prometheus
Votre profil :
- Expérience significative de ClickHouse en environnement de production.
- Maîtrise du SQL avancé et de la modélisation de données time-series.
- Expérience dans la conception de pipelines d'ingestion de données.
- Bonne maîtrise de Grafana.
- Connaissance pratique des environnements Kubernetes et Infrastructure as Code.
- Capacité à travailler de manière autonome sur des sujets d'architecture.
- Migration réalisée depuis InfluxDB, Prometheus ou une autre base time-series.
- Maîtrise de dbt.
- Forte autonomie.
- Esprit d'analyse et capacité de décision.
- Approche pragmatique de l'architecture.
- Excellent niveau de communication technique.
- Capacité à collaborer avec des équipes Infrastructure, DevOps et Produit.
Conditions & avantages
- Conditions de télétravail : 2 jà 3 ours de télétravail par semaine
- Conditions financières : 500€/jour - 650€/jour (selon expérience)
-
Cloud Data Platform Engineer
Il y a 5 jours
Toulouse, Occitanie, France Devoteam | AWS Partner Temps plein 45 000 € - 65 000 € ContratUne société spécialisée en transformation digitale est à la recherche d'un professionnel pour renforcer ses équipes sur des projets liés aux données et aux plateformes cloud. Les missions incluent la collaboration avec des clients pour concevoir des solutions innovantes et la gestion de pipelines de données. Si vous maîtrisez des technologies...
-
Senior Big Data Platform Engineer
Il y a 3 jours
Toulouse, Occitanie, France Capgemini Temps plein 55 000 € - 75 000 € ContratCapgemini Toulouse recherche un administrateur Big Data pour assurer la gestion et la maintenance des plateformes massives en production, optimiser les performances et veiller à la qualité et à la conformité des données.Vous collaborez avec les équipes de développement, mettez en place des outils de supervision et d’alerting, et analysez les besoins...
-
Data & Skywise Platform Engineer — Toulouse
Il y a 3 jours
Toulouse, Occitanie, France Groupe ALTEN Temps plein 55 000 € - 75 000 € ContratALTEN recherche un Ingénieur Logiciel spécialisé sur la plateforme Skywise (base de données Airbus) pour renforcer le pôle Data & Software Engineering. Le poste est basé à Toulouse et implique le développement de solutions logicielles, la modélisation et l’intégration des briques dans Skywise.Diplômé d’une école d’ingénieurs ou Master en...
-
Data Platform Engineer — AWS, Lakehouse
Il y a 5 jours
Toulouse, Occitanie, France Davidson consulting Temps plein 45 000 € - 60 000 € ContratUne société de conseil en data recherche un Data Engineer pour moderniser sa plateforme Cloud AWS dans un grand groupe bancaire. Vous serez responsable de définir l'architecture Data Lake, de développer des pipelines de données et de mettre en place des solutions data management. Une forte expérience en AWS, PySpark et Java est nécessaire, ainsi...
-
Platform Engineer F/H
Il y a 4 jours
Toulouse, Occitanie, France Inside Group Temps pleinInside est une société de conseil et de services numériques qui simplifie et accélère la transformation des entreprises, de la stratégie à la mise en œuvre, avec un objectif clair : produire des résultats concrets et durables. Nous accompagnons nos clients sur l’ensemble de leur chaîne de valeur : Cloud & Infrastructures, Digital,...
-
Cloud Data Engineer: Azure Pipelines
Il y a 3 jours
Toulouse, Occitanie, France Talan Group Temps plein 45 000 € - 60 000 € ContratUne entreprise internationale de conseil cherche un Data Engineer pour concevoir et maintenir des pipelines de données. Vous travaillerez au sein de l’équipe Data & IA à Toulouse, avec une attention particulière à la qualité et la sécurité des données. Une connaissance approfondie de Python, SQL et Azure Data Factory est requise, ainsi que la...
-
Senior Data Engineer
Il y a 4 jours
Toulouse, Occitanie, France SKOTT GROUP Temps plein 75 000 € - 110 000 € ContratSKOTT GROUP recherche un Senior Data Engineer Azure pour contribuer à une Data Platform moderne à Toulouse. Vous concevrez et développerez des pipelines de données, tout en assurant leur fiabilité et leur maintenance en conditions opérationnelles dans un cadre Agile.Le candidat idéal maîtrise SQL, pipelines Data et Azure Synapse Analytics/Azure Data...
-
Data Engineer expérimenté.e
Il y a 4 jours
Toulouse, Occitanie, France Sfeir Temps pleinÀ propos de SFEIRLe Groupe SFEIR s’impose comme un acteur majeur dans la construction de systèmes d’information modernes, grâce à un quadruple savoir-faire : Engineering, Consulting, Training et Tooling. Avec plus de 950 développeuses et développeurs, nous sommes fiers de concevoir et de déployer des solutions innovantes dans des domaines...
-
Data Engineer Python
Il y a 4 jours
Toulouse, Occitanie, France Tata Consultancy Services France Temps pleinTata Consultancy Services (TCS) est une société de services informatiques et de conseil qui s’associe depuis 55 ans à de nombreuses entreprises parmi les plus importantes au monde dans leurs parcours de transformation. En tant que membre du groupe Tata, le plus grand groupe multinational de l’Inde, TCS compte plus de 614 000 consultants parmi les...
-
Data Engineer AWS – Data Platform
Il y a 5 jours
Toulouse, Occitanie, France Davidson consulting Temps plein 45 000 € - 60 000 € ContratRejoindre Davidson, ce n’est pas seulement intégrer un groupe de 3000 consultants dans 6 pays et 2 continents, c’est intégrer LA société qui a été élue par ses salariés Great Place To Work France et Europe pendant 4 ans mais aussi une des plus grandes B Corp de France, nommée Best of the World dans la catégorie “collaborateurs” en 2022 !...