Data Engineer Expert Elastic Stack
il y a 4 jours
Depuis 2012, nous mettons notre expertise au service des secteurs de l'IT et l'Ingénierie pour accompagner nos clients dans des projets ambitieux et innovants.
Notre force ?
Un management de proximité qui valorise vos aspirations, des opportunités de carrière concrètes et un engagement sincère pour le bien-être et l'épanouissement de nos collaborateurs.
Rejoignez-nous sur des projets à fort impact au sein d'une entreprise où chaque talent compte
Avanista recrute
Toujours en recherche de nouveaux talents, nous souhaiterions intégrer un
Data Engineer Expert Elastic Stack
au sein de nos équipes pour l'un de nos clients.
Le contexte ?
La transformation des SI de nos Clients vers des architectures modulaires, type micro-services, l'essor de nos infrastructures et l'évolution des technologies associées, ou encore l'automatisation accrue sur nos socles et applications, génèrent une quantité massive de Logs, devenues très hétérogènes, dispersées et silotées de par l'organisation de la société et de ses Clients (équipes applicatives et socles multiples et dispersées).
Au sein de la société, dans un contexte multi domaines/Clients (banque de détail, assurances, banque de marchés, asset management, etc.), vous êtes rattaché à l'équipe « Data4Ops », au sein du Domaine d'Expertise « Automatisation et Observabilité » Cette équipe a la charge de structurer les données dites « opérationnelles » à savoir les données utiles à l'ensemble des métiers et équipes opérationnelles, en adéquation avec la stratégie Data de l'entreprise (basée sur les principes/concepts Data Mesh) et en relation avec le PM (Product Manager) Observabilité
Vos missions ?
- Maîtriser l'ensemble des techniques et technologies composant la chaine de collecte à la mise à disposition des Logs
- Accompagner les besoins et projets sur la collecte, transformation, stockage et mise à disposition des données, provenant de sources diverses en adéquation avec la Stratégie Data
- Concevoir et mettre à disposition les outils et processus (CI/CD) permettant d'automatiser les pipelines d'ingestion de données prenant en compte les besoins de fréquences (batch, temps réel, …)
- Développer et déployer des mécanismes de contrôle qualité ainsi que des routines de vérification pour garantir l'intégrité et la fiabilité des données
Pour réaliser la mission, vous serez à même de :
- Participer à la conception des solutions techniques et fonctionnelles
- Gérer les données de l'entreprise (flux : collecte, traitement, stockage et leur cycle de vie)
- Rédiger les documents fonctionnels et techniques, d'exploitation, en veillant au respect des normes existantes
- Mettre en œuvre en mode DevOps (CI/CD)
- Assurer le support technique et fonctionnel, notamment analyse et résolution des incidents ou problèmes
- Être en relation avec les équipes opérationnelles de l'entreprise pour prise en compte des flux de données
- Développer les cas d'usage de Dashboard / ML / IA dans la solution, remontés par les utilisateurs
*C'est votre truc ?*
De formation supérieur en informatique vous bénéficiez d'au moins 5 ans d'expériences sur un poste similaire.
Compétences Techniques
- Kafka
- Scripting Python/SQL/Java
- Suite Elastic (ElasticSearch/Kibana)
- Apache Flink / LogStash
- Agent de collecte (Elastic ou autre Open-Source)
- Connaissances en infrastructure : réseau / système
- Connaissance indispensable en SGBD et langage de requêtage
- Connaissance forte en streaming
- Architecture d'Entreprise, plus particulièrement en base de données, flux de données
- Conception et mise en place de solution de stockage et ingestion de données
- Méthodologie Agile / DevOps, maitrise des outils associés
- Gouvernance de la donnée
- Maitrise de divers langages de programmation (Java/Python)
- Anglais
Qualités humaines
- Curieux et force de propositions
- Esprit d'analyse, rigueur, sens de la méthode
- Capacités relationnelles et travail en équipe
- Disponibilité et réactivité
- Sens du service et respect des engagements
- Communication (écrite et orale) claire et concise
Localisation
: Guyancourt (78)
Télétravail
: 2j de télétravail/semaine
Démarrage / Durée
: ASAP, mission longue durée
Statut :
CDI / Freelance
Si votre profil répond aux critères ci-dessus,
Lilia
se chargera de vous contacter par téléphone, suivi d'un entretien avec elle et l'opérationnel en charge du besoin. Si votre profil est validé, nous enverrons votre CV au client pour un ultime entretien avant votre démarrage ;)
Vous avez du talent ? Nous avons les défis.
N'hésitez plus et postulez
-
Data Engineer Expert Elastic Stack
il y a 4 jours
Guyancourt, Île-de-France AVANISTA Temps pleinEnvie de relever des défis à la hauteur de votre talent ?ContexteDepuis 2012, nous mettons notre expertise au service des secteurs de l'IT et l'Ingénierie pour accompagner nos clients dans des projets ambitieux et innovants.Notre force ? Un management de proximité qui valorise vos aspirations, des opportunités de carrière concrètes et un engagement...
-
Développeur full-stack Open Source H/F
il y a 2 semaines
Guyancourt, Île-de-France Crédit Agricole Temps pleinDescription du posteAu sein de l'équipe Développement interne, composée d'une vingtaine de personnes, vous serez acteur dans la construction des nouveaux projets stratégiques, et relèverez de nombreux challenges au sein d'une équipe experte dans les technologies open source et dans l'écosystème Java.En tant que Développeur full-stack Open Source,...
-
Développeur full-stack Open Source H/F
il y a 2 semaines
Guyancourt, Île-de-France Credit Agricole Payment Services Temps pleindu posteAu sein de l'équipe Développement interne, composée d'une vingtaine de personnes, vous serez acteur dans la construction des nouveaux projets stratégiques, et relèverez de nombreux challenges au sein d'une équipe experte dans les technologies open source et dans l'écosystème Java.En tant que Développeur full-stack Open Source, vous aurez...
-
Expert Big Data
il y a 2 semaines
Guyancourt, Île-de-France CONCRETIO SERVICES Temps pleinVOS RESPONSABILITES PRINCIPALES :Build ? Modernisation & migrations DataParticiper au design et à la construction de nouvelles plateformes Data (on-prem Cloudera / Spark / Kafka & cloud AWS/GCP).Configurer, optimiser et sécuriser les environnements Big Data (Spark tuning, Kafka connecteurs?).Travailler avec les architectes et les CloudOps sur les...
-
Big Data Specialist
il y a 2 semaines
Guyancourt, Île-de-France OneSource Consulting Temps pleinRole:Big Data / Cloud Data Engineering Expertise, Senior in GuyancourtMandatory SkillsEnglish (CONFIRMED)Mastery of programming languages (Scala, Java, Python, etc.) (EXPERT)AWS EMR, MSK, GCP DataProc, BigQuery, Cloud Storage, Cloud Dataflow, etc. (EXPERT)Cloud Public AWS et GCP et Terraform (EXPERT)Cloudera, Kafka, Spark, Flink, Nifi, AirFlow,...
-
Data Product Owner H/F
il y a 2 semaines
Guyancourt, Île-de-France Bouygues Travaux Publics Temps pleinSpécialisé dans le génie civil et les ouvrages d'art, Bouygues Travaux Publics est l'un des leaders mondiaux dans les domaines de l'aménagement du territoire et de la construction d'infrastructures durables. Nous sommes engagés en faveur de la diversité et ouverts à tous les talents.Rattachement :En appui direct du Chief Data Officer, Direction...
-
Data Product Owner H/F
il y a 2 semaines
Guyancourt, Île-de-France Groupe Bouygues Temps pleinInformations générales Entité de rattachement Avec collaborateurs intervenant dans 60 pays, Bouygues Construction conçoit, réalise, et réhabilite les infrastructures et les bâtiments essentiels pour une société durable. Partout dans le monde, les équipes accompagnent le développement des infrastructures de productions d'énergies et de...
-
Automation Engineer
il y a 3 jours
Guyancourt, Île-de-France Merck Group Temps pleinWork Your Magic with usReady to explore, break barriers, and discover more? We know you've got big plans – so do we Our colleagues across the globe love innovating with science and technology to enrich people's lives with our solutions in Healthcare, Life Science, and Electronics. Together, we dream big and are passionate about caring for our rich mix of...
-
Expert Rémunération
il y a 2 semaines
Guyancourt, Île-de-France CONCRETIO SERVICES Temps pleinVOS PRINCIPALES RESPONSABILITES :1. Gestion & pilotage du projet Pay TransparencyParticiper au cadrage : objectifs, périmètre, livrables, gouvernance.Définir et organiser la roadmap Pay Transparency.Suivre les jalons projet, risques, dépendances et plans d?action.Coordonner RH, Data, SIRH, Juridique et équipes métier.Analyse & benchmark sur la...
-
Expert Sauvegarde DELL
il y a 7 jours
Guyancourt, Île-de-France HIGHTEAM Temps pleinNous recherchons un Expert Sauvegarde DELL expérimenté pour renforcer une équipe infrastructure au sein d?un grand groupe du secteur technologique.Votre rôle consistera à concevoir, faire évoluer et optimiser les solutions de sauvegarde basées sur les technologies DELL.Vous interviendrez sur des projets BUILD à forte valeur ajoutée, tout en...