Dataops Engineer
il y a 1 semaine
Le poste requiert des connaissances techniques et un large éventail de technologies telles que divers outils de gestion des données pour rationaliser le traitement des données, les tests, la préparation, le déploiement et la surveillance. Le rôle principal est d’améliorer la vitesse et la qualité du processus de développement des données en appliquant les principes DevOps au flux de travail des données. À cette fin, diverses parties du pipeline de données doivent être automatisées pour fournir des résultats rapidement et efficacement. Méthodologie agile et meilleures pratiques DevOps.
Principales responsabilités du poste:
- Utiliser l’automatisation pour rationaliser le traitement des données. Réduire le temps de développement et augmenter la fiabilité des données
- Promouvoir la réutilisation. Éviter de réinventer la roue.
- Concevoir des actifs d’ingénierie des données et développer des cadres pour les soutenir.
- Modéliser les pipelines et les processus de capture et de transformation des données.
- S’assurer qu’ils sont réutilisables/configurables pour inclure nativement le suivi et la supervision.
- Normaliser et réutiliser les pépites, les pipelines et l’infrastructure horizontale couramment utilisés.
- Préparer, empaqueter et déployer les solutions dans l’environnement cible en promouvant la culture DevOps
- développer des tests de régression et des tests fonctionnels - automatiser les tests de développement et de déploiement.
- En règle générale, il veille à ce que toute opération effectuée manuellement trois fois soit automatisée.
- Permettre l’expérimentation et l’innovation rapides pour fournir plus rapidement de nouvelles informations aux clients
- recherche constamment des moyens de réduire le gaspillage et d’améliorer le flux de données en adoptant de nouvelles solutions et de nouveaux outils qui adhèrent aux meilleures pratiques DataOps.
- Gérer la production de pipelines de données et fournir l’accès aux produits de données.
Compétences techniques:
- Expérience dans l’identification et la mise en œuvre d’outils d’automatisation et de DevOps : Azure DevOps, Terraform, Airflow, Ansible, Maven, Git, Jenkins etc.
- Expérience dans les technologies de script comme Java script, python, PowerShell.
- Expérience dans des environnements de production : Documentation / Spécification, Tests unitaires, Déploiement, Optimisation du code, Versionnement du code.
- Expérience des plateformes de données (Synapse, Databricks, Snowflake, Azure SQL, MS SQL etc.) et maîtrise du langage SQL.
- Expérience des outils de tests unitaires et des cadres d’intégration
- Expérience de la technologie Cloud, en particulier d’Azure
- Compréhension de l’architecture des micro-services avec une expérience dans la conception et la mise en œuvre de services RESTful.
- Maîtrise des déploiements basés sur des conteneurs : Docker, Kubernetes, etc.
- La connaissance de la solution Kafka est un plus
- La connaissance de GCP et/ou AWS Cloud est un plus.
- Familiarité avec les environnements de type Linux/Unix.
-
Staff DataOps Engineer
il y a 1 semaine
Paris, Île-de-France La French Tech Taiwan Temps pleinOffres d'emploiLes SecteursIndustrieNumériqueSantéTransition écologiqueAgricultureRejoindre la Mission French TechDécouvrir les métiers de la TechStaff DataOps Engineer (x/f/m)ParisFull-TimeApply NowAboutDepuis 2013, Doctolib poursuit un seul objectif : construire le système de santé dont nous rêvons tous, aux côtés des soignants et des patients....
-
Senior DataOps Engineer
il y a 5 jours
Paris, Île-de-France Doctolib Temps pleinSenior DataOps Engineer at Doctolib We are looking for a Senior DataOps Engineer to join the data team. As a Senior DataOps Engineer , your mission will be to design, implement, and manage our data infrastructure, ensuring seamless data flow across the organization and enabling data-driven decision-making. You will be...
-
DataOps & DevOps Engineer - Confirmé·e
il y a 2 semaines
Paris, France JAKALA Temps pleinAu sein de notre practice Data & AI et en tant que Data Ops Engineer, tu joues un rôle clé dans la fiabilité, l'automatisation et la performance des pipelines de données.Tu fais le lien entre les équipes Data Engineering, DevOps et les métiers pour assurer un accès fluide, sécurisé et optimisé aux données.Tes missions incluent :Déploiement et...
-
DataOps & DevOps Engineer - Confirmé·e
il y a 6 jours
Paris, France JAKALA Temps pleinAu sein de notre Data Lab et en tant que Data Ops Engineer, tu joues un rôle clé dans la fiabilité, l’automatisation et la performance des pipelines de données.Tu fais le lien entre les équipes Data Engineering, DevOps et les métiers pour assurer un accès fluide, sécurisé et optimisé aux données.Déploiement et maintien des pipelines de données...
-
Ingénieur/e DataOps GCP
il y a 1 heure
Paris, Île-de-France PANDA SERVICES Temps pleinPanda Services est une Entreprise de Services du Numérique spécialisée en Ingénierie Informatique, recherchant pour l'un de ses clients sur Paris(93)un(e)Ingénieur/e DataOps GCPLe département DATA recherche unDataOps Engineer Seniorpour assurer la continuité opérationnelle des plateformes décisionnelles SAP et piloter la migration...
-
Senior Data Engineer
il y a 6 jours
Paris, France Swile Temps pleinJoin to apply for the Senior Data Engineer / Dataops role at Swile. At Swile, we believe that good products can help reduce friction in daily professional life and boost employee satisfaction. We provide innovative solutions in Fintech, Travel, HR, and Employee Benefits to more than 5.5 million users in 85,000 companies in France and Brazil. As a Senior Data...
-
Staff DataOps Engineer
il y a 6 jours
Paris, France Doctolib Temps pleinOverviewWhat You'll DoThe Data Foundation team is at the heart of Doctolib's data-driven transformation, enabling healthcare innovation through robust, scalable data infrastructure. As a Staff DataOps Engineer, you are the technical leader who shapes our data platform strategy and architecture. You will drive the design and implementation of enterprise-scale...
-
Azure Dataops H/F
il y a 2 semaines
Paris, France Talan Temps pleinVous êtes passionné(e) par l'industrialisation des solutions data et l'automatisation ? Rejoignez notre pôle Tech4Data en tant que DataOps Engineer et participez à la transformation data de nos clients ! Responsabilités Vous interviendrez sur l'automatisation des processus de développement et de déploiement de nos plateformes Data selon les besoins de...
-
Data Engineer
il y a 2 semaines
Paris, France Harnham Temps plein**DATA ENGINEER GCP** Paris - FRANCE Open Full Remote 55K - 75K Cette belle start-up dans le monde du risque recherche un Data Engineer pour une création de poste afin d'épauler l'équipe en place. Son objectif ? Aider ses clients en leur facilitant l'accès à des données liées à leurs domaines d'activités afin d'anticiper des risques potentiels...
-
DataOps & DevOps Engineer - Confirmé·e
il y a 5 jours
B Avenue de la République, Paris, France Jakala Temps pleinAu sein de notre practice Data & AI et en tant que Data Ops Engineer, tu joues un rôle clé dans la fiabilité, l'automatisation et la performance des pipelines de données.Tu fais le lien entre les équipes Data Engineering, DevOps et les métiers pour assurer un accès fluide, sécurisé et optimisé aux données.Tes missions incluent :Déploiement et...