Data Engineer Python, Spark Et Aws

Il y a 2 mois


Paris e, France Datapy Temps plein

**Description du poste**:
Responsabilités:

- Concevoir, développer et mettre en œuvre des pipelines de données robustes et évolutifs.
- Collaborer avec les équipes de développement et d'analyse pour comprendre les besoins et les exigences en matière de données.
- Effectuer l'ingestion, la transformation et la manipulation de données à grande échelle.
- Optimiser les performances des pipelines de données et résoudre les problèmes liés à la qualité et à la fiabilité des données.
- Mettre en place des mécanismes de surveillance et de détection des anomalies pour garantir l'intégrité des données.

Exigences:

- Au moins 3 ans d'expérience en tant que Data Engineer ou dans un rôle similaire.
- Maîtrise avancée de Python, y compris les compétences en langage pySpark, ainsi que de solides compétences en SQL.
- Expérience pratique d'au moins un an avec les technologies AWS telles que Glue, Athena, Glue Catalogue, S3, RDS et Lambda.
- Connaissance approfondie de Gitlab et Jenkins pour la gestion du code source et des déploiements.
- Une expérience préalable avec Airflow et Axway pour l'acquisition des données serait un plus apprécié.

Si vous souhaitez travailler dans un environnement de travail stimulant avec de belles opportunités de croissance professionnelle, n'hésitez pas à nous envoyez votre CV

Type d'emploi : Temps plein, CDI

Salaire : 45 000,00€ à 80 000,00€ par an

Avantages:

- Prise en charge du transport quotidien
- RTT
- Travail à domicile

Programmation:

- Période de travail de 8 Heures

Expérience:

- AWS: 3 ans (Exigé)

Lieu du poste : Hybrid remote (75009 Paris 9e)


  • Data Engineer Spark/python

    il y a 2 semaines


    Paris, France Apside Temps plein

    **OPPORTUNITE A POURVOIR : Data Engineer Spark/Python !** **Découvrez la Vie Apsidienne** et vous aussi, devenez Apsidien On aurait pu demander à Chat GPT de vous démontrer en quoi **Apside est l’ESN qu’il vous faut,** mais on préfère que vous le découvriez vous-mêmes **Découvrez votre future mission** **Contexte** - Le client a lancé un...

  • Data Engineer Spark

    il y a 4 jours


    Paris, France UCASE CONSULTING Temps plein

    Dans le cadre d?un renfort équipe le client serait à la recherche de profil Data Engineer / Mission: - Maintenir le code existant - Concevoir et développer de nouvelles fonctions au travers de sprint - Interagir avec le PO pour partager une vision claire et détaillée des besoins - Contribuer à la vision globale produit moyen terme et long terme - Run...

  • Data Engineer AWS

    Il y a 2 mois


    Paris La Défense Cedex, France 4 Impact Temps plein

    Nous recherchons pour l?un de nos clients un Data Engineer AWS.Contexte de la mission :Au sein de l'équipe chargée de développer des outils internes d?une entité, constituée de 10 personnes : Développeurs back/frond end et Ingénieurs Data, le Data Engineer AWS est en charge de mener à bien un besoin clé du Groupe autour du sujet Zéro...

  • Data Engineer AWS

    il y a 2 semaines


    Paris La Défense Cedex, France 4 Impact Temps plein

    Nous recherchons pour l?un de nos clients un Data Engineer AWS.Contexte de la mission :Au sein de l'équipe chargée de développer des outils internes d?une entité, constituée de 10 personnes : Développeurs back/frond end et Ingénieurs Data, le Data Engineer AWS est en charge de mener à bien un besoin clé du Groupe autour du sujet Zéro...

  • Data Engineer Spark

    il y a 1 semaine


    Paris, France Bek Advisory Temps plein

    Contexte Notre client recherche un Data engineer Spark / Scala. Vous serez intégré(e) dans l’équipe Data Science et Engineering. A chaque projet, l’équipe Data Science et Engineering intervient dans les décisions d’architecture et le cadrage fonctionnel, la conception technique, puis implémente les traitements : transformations (volumes...


  • Paris 8e, France Octopus IT Temps plein

    **La société** Créée il y a 7 ans, cette entreprise de conseil en hyper croissance, se compose d'environ 90 personnes. Elle est devenue experte en Data et IA (NLP, Deep Learning, Machine Learning) et accompagne leurs clients sur l’ensemble de leurs projets data à travers la valorisation de leurs données. Leur valeur ajoutée ? Leur spécialisation...


  • Paris, France Pulsover Temps plein

    À propos de Pulsover :    Pulsover est un cabinet de conseil spécialisé dans la data, le cloud et le delivery . La mission de nos consultants Pulsover est d'accompagner des entreprises de toutes tailles dans leur transformation digitale grâce à la combinaison de leur expertise technique et de leur capacité à gérer des projets internationaux...

  • Cdi - data engineer - python

    il y a 2 semaines


    Paris, France CBTW Temps plein

    Type du contrat : CDI Chez CBTW, entreprise mondiale de conseil en technologie, la collaboration est la pierre angulaire de l’innovation et du succès, et le fondement de tout ce que nous mettons en œuvre. Êtes-vous prêt(e) à déployer vos talents techniques au cœur d'une aventure palpitante dans l'univers de la tech ? Chez CBTW, nous sommes en...

  • Cdi - data engineer - python

    il y a 2 semaines


    Paris, France CBTW Temps plein

    Type du contrat : CDI Chez CBTW, entreprise mondiale de conseil en technologie, la collaboration est la pierre angulaire de l’innovation et du succès, et le fondement de tout ce que nous mettons en œuvre. Êtes-vous prêt(e) à déployer vos talents techniques au cœur d'une aventure palpitante dans l'univers de la tech ? Chez CBTW, nous sommes en...

  • Senior Data Engineer

    il y a 2 semaines


    Paris, France Pulsover Temps plein

    À propos de Pulsover :  Pulsover est un cabinet de conseil spécialisé dans la data, le cloud et le delivery. La mission de nos consultants Pulsover est d'accompagner des entreprises de toutes tailles dans leur transformation digitale grâce à la combinaison de leur expertise technique et de leur capacité à gérer des projets internationaux et à...

  • Senior Data Engineer

    il y a 1 mois


    Paris, France Pulsover Temps plein

    À propos de Pulsover : Pulsover est un cabinet de conseil spécialisé dans la data, le cloud et le delivery. La mission de nos consultants Pulsover est d'accompagner des entreprises de toutes tailles dans leur transformation digitale grâce à la combinaison de leur expertise technique et de leur capacité à gérer des projets internationaux et...

  • Senior Data Engineer

    il y a 1 mois


    Paris, France Pulsover Temps plein

    À propos de Pulsover :  Pulsover est un cabinet de conseil spécialisé dans la data, le cloud et le delivery. La mission de nos consultants Pulsover est d'accompagner des entreprises de toutes tailles dans leur transformation digitale grâce à la combinaison de leur expertise technique et de leur capacité à gérer des projets internationaux et à...

  • Senior Data Engineer

    il y a 1 mois


    Paris, Ile-de-France Pulsover Temps plein

    À propos de Pulsover : Pulsover est un cabinet de conseil spécialisé dans la data, le cloud et le delivery. La mission de nos consultants Pulsover est d'accompagner des entreprises de toutes tailles dans leur transformation digitale grâce à la combinaison de leur expertise technique et de leur capacité à gérer des projets internationaux et...

  • Senior Data Engineer

    il y a 2 semaines


    Paris, France Pulsover Temps plein

    À propos de Pulsover :    Pulsover est un cabinet de conseil spécialisé dans la data, le cloud et le delivery . La mission de nos consultants Pulsover est d'accompagner des entreprises de toutes tailles dans leur transformation digitale grâce à la combinaison de leur expertise technique et de leur capacité à gérer des projets...

  • Data Engineer

    il y a 1 jour


    Paris, France Data Recrutement Temps plein

    Offre publiée le 20-03-2024.- Paris - Fonction Data engineer hadoop spark - Taille entreprise de 21 à 50 - Télétravail partiel - Technologies Azure - Technologies Etl - Technologies Spark - Expérience 3 à 5 ans - Statut CDI - Min 60k€ - Max 70k€ - Why: - **Entreprise rentable**: - **Challenger sur son marché**: - **Entreprise à...

  • Data Engineer

    Il y a 2 mois


    Paris, France Data Recrutement Temps plein

    Offre publiée le 03-02-2023.- Paris - Toulouse - Fonction Data engineer hadoop spark - Taille entreprise de 21 à 50 - Télétravail à 100% - Technologies Aws - Technologies Gcp - Technologies Sql - Expérience 1 à 2 ans - Expérience 3 à 5 ans - Statut CDI - Min 50k€ - Max 60k€ - Why: - **Croissance à deux chiffres**: - **Entreprise rentable**: -...

  • Data Engineer Spark

    il y a 3 jours


    Paris, France UCASE CONSULTING Temps plein

    Je recherche pour l?un de mes clients dans le domaine Banque/Assurance un Data Engineer. Contexte: En tant que Data Engineer vous participerez à la continuité du déploiement de notre architecture BigData: Missions: - Maintenir le code existant - Concevoir et développer de nouvelles fonctions - Mettre en place des pipelines de données. - Metttre en...

  • Data Engineer Python

    il y a 1 semaine


    Paris 8e, France Octopus IT Temps plein

    **La société** Créée il y a 8 ans, cette entreprise de conseil en hyper croissance, se compose d'environ 120 personnes. Elle est devenue experte en Data et IA (NLP, Deep Learning, Machine Learning) et accompagne leurs clients sur l’ensemble de leurs projets data à travers la valorisation de leurs données. Leur valeur ajoutée ? Leur spécialisation...


  • Paris, France Upward Data Temps plein

    À propos de l’offre d’emploi Upward Data, cabinet de recrutement spécialisé dans la Data Science et le Big Data, recherche pour l’un de ses clients un(e) Senior Data Scientist en CDI. Poste : Senior Data Scientist. Rattachement : Data Science Manager. L’entreprise : Notre client est éditeur de solutions SaaS. Notre client développe...


  • Paris, France Upward Data Temps plein

    À propos de l’offre d’emploi Upward Data, cabinet de recrutement spécialisé dans la Data Science et le Big Data, recherche pour l’un de ses clients un(e) Senior Data Scientist en CDI. Poste : Senior Data Scientist. Rattachement : Data Science Manager. L’entreprise : Notre client est éditeur de solutions SaaS. Notre client développe...