Ingénieur / Ingénieure en développement big data (H/F)
Il y a 3 jours
Vitrolles, Provence-Alpes-Côte d'Azur, France
Randstad professional
Temps plein
Gratuit avec email ou Google
Enregistrez cette offre et organisez votre recherche
Créez un compte gratuit pour enregistrer des offres d'emploi, créer des alertes et revenir à cette liste depuis votre tableau de bord.
Gratuit avec email ou Google
En continuant, vous acceptez nos Conditions d’utilisation & Politique de confidentialité.
Nous recherchons pour le compte de notre client éditeur de solutions, un ingénieur data intégration en contrat, basé à Vitrolles.
Au sein de l'équipe Data/IT, vous jouerez un rôle central dans la circulation, la transformation et la fiabilisation de nos données. Nous évoluons dans un environnement technique riche combinant des outils d'intégration robustes (Talend, Camel) et des solutions modernes d'orchestration et d'indexation (Airflow, Elasticsearch). Vous interviendrez sur l'ensemble du cycle de vie de la donnée, de son extraction à son exposition. Vos tâches:
- Conception et Développement des flux (ETL & ESB) : Concevoir et développer des jobs d'intégration de données complexes avec Talend. Mettre en place des routes d'intégration et de médiation avec Apache Camel déployées sur Karaf. Développer des scripts de traitement de données et d'automatisation en Python.
- Orchestration et Stockage : Orchestrer et planifier les pipelines de données via Apache Airflow. Gérer l'indexation des données et optimiser les recherches dans Elasticsearch. Assurer la modélisation et le requêtage performant sur nos bases SQL.
- Monitoring et Maintenance (Run): Assurer le maintien en condition opérationnelle (MCO) des flux. Configurer et suivre les alertes de supervision via Nagios. Diagnostiquer et corriger les incidents de production.
Experience:
3 An(s)
Au sein de l'équipe Data/IT, vous jouerez un rôle central dans la circulation, la transformation et la fiabilisation de nos données. Nous évoluons dans un environnement technique riche combinant des outils d'intégration robustes (Talend, Camel) et des solutions modernes d'orchestration et d'indexation (Airflow, Elasticsearch). Vous interviendrez sur l'ensemble du cycle de vie de la donnée, de son extraction à son exposition. Vos tâches:
- Conception et Développement des flux (ETL & ESB) : Concevoir et développer des jobs d'intégration de données complexes avec Talend. Mettre en place des routes d'intégration et de médiation avec Apache Camel déployées sur Karaf. Développer des scripts de traitement de données et d'automatisation en Python.
- Orchestration et Stockage : Orchestrer et planifier les pipelines de données via Apache Airflow. Gérer l'indexation des données et optimiser les recherches dans Elasticsearch. Assurer la modélisation et le requêtage performant sur nos bases SQL.
- Monitoring et Maintenance (Run): Assurer le maintien en condition opérationnelle (MCO) des flux. Configurer et suivre les alertes de supervision via Nagios. Diagnostiquer et corriger les incidents de production.
Experience:
3 An(s)