Data Engineer

il y a 4 heures

Lyon e, France Superpictor Temps plein

**Qui sommes-nous ?**

Superpictor est une startup innovante qui révolutionne le secteur des objets et têxtiles personnalisés grâce à des outils SaaS intelligents. Nous automatisons la gestion des **données produits** et facilitons leur **intégration à grande échelle** pour nos clients B2B.

Notre **stack data** repose sur **Pimcore (basé sur Symfony)** pour centraliser toutes les données produits, ainsi que **Google Cloud (App Engine, Cloud Functions)** pour nos APIs et traitements scalables.

Nous intégrons des flux provenant de divers distributeurs via **des connecteurs PHP**, et gérons différents formats d’API **:REST, GraphQL, CSV, XML, JSON**.

Dans le cadre de notre croissance, nous cherchons un(e) **Data Engineer** pour **optimiser, structurer et scaler** nos flux de données.

**Tes missions**

Tu rejoindras l’équipe Tech sous la direction du CTO, avec pour mission de **fiabiliser, automatiser et améliorer l’intégration des données produits**.
- **Phase 1 : Consolidation et optimisation (court terme)**
- **Améliorer et fiabiliser nos pipelines d’intégration** basés sur **Symfony/Pimcore** pour récupérer et traiter les données produits.
- **Optimiser les performances des connecteurs PHP** qui interagissent avec les APIs des distributeurs (**REST, GraphQL, CSV, XML, JSON**).
- **Assurer la gestion des données froides et chaudes** (produits, images, prix, stock).
- **Automatiser les flux** Pimcore → API→ Superpictor SaaS → **Sites e-commerce** pour éviter les traitements manuels et garantir une synchronisation fiable.
- **Mettre en place du monitoring et des logs avancés** pour garantir la qualité des données et détecter les anomalies.
- **Phase 2 : Scalabilité et automatisation avancée (moyen/long terme)**
- Concevoir et implémenter **des solutions d’automatisation et d’orchestration avancées** (Airflow, dbt, Dataflow, etc.).
- Explorer des **architectures Data Warehouse (BigQuery, Snowflake )** pour améliorer la structuration et l’exploitation des données produits.
- Optimiser la gestion des **flux de données chaudes** (prix et stock) pour les rendre plus **temps réel**.
- **Structurer une architecture data scalable et modulaire** pour anticiper l’augmentation des volumes et des intégrations partenaires.
**- Stack technique et outils utilisés**
- **Langages & Frameworks** **:PHP (Symfony/Pimcore), Python**.
- **Intégration API** **:REST, GraphQL, CSV, XML, JSON**.
- **Base de données** **:MariaDB, MySQL**.
- **Cloud & Infra** **:Google Cloud (BigQuery, Cloud Storage, App Engine, Cloud Functions)**.
- **Orchestration (à explorer)** **:Airflow, dbt**.
**- Profil recherché**
- **Tu maîtrises PHP/Symfony et Pimcore** (ou un autre **PIM/MDM** similaire).
- **Tu as de bonnes bases en PHP, Python et SQL** pour l’automatisation et le traitement des données.
- **Tu es à l’aise avec les APIs REST et les formats de données CSV/XML/JSON**.
- **Tu comprends les enjeux de scalabilité et d’intégration de données en temps réel et en batch**.
- **Un plus** : Expérience avec **Airflow, dbt, Google Cloud, Kafka ou un Data Warehouse**.

Type d'emploi : Temps plein, CDI
Statut : Cadre

Rémunération : à partir de 32 000,00€ par an

Horaires:

- Du lundi au vendredi

Lieu du poste : En présentiel

  • Data Engineer Alternance

    il y a 6 jours

    Lyon, France Data ScienceTech Institute Temps plein

    Data ScienceTech Institute (DSTI) a été créé avec une ambition principale : former des experts du big data et de l'Intelligence Artificielle pour répondre aux besoins de l'industrie 4.0. Depuis 2015, DSTI forme des Data Analyst, Data Engineer et Data Scientist opérationnels, en offrant les programmes les plus internsifs du marché et les plus reconnus...

  • Data Engineer

    il y a 2 semaines

    Lyon 2e, France TALENTS RH Temps plein

    **Votre mission**: Notre partenaire est une fonderie Data, Cloud et Cyber, reconnue par son expertise sur les métiers de la chaine de valeur des projets data. Elle accompagne ses clients dans leurs projets de valorisation de données et leur transformation data-driven. Notre partenaire est spécialisé sur les métiers suivants: - La Data : Data Science,...

  • Data Engineer F/H migration Databricks

    il y a 5 jours

    Lyon, France Devoteam Data Driven Temps plein

    Consultant Data Engineer Databricks - Confirmé - H/F Agence multi spécialiste composée de 350 collaborateurs répartis en communautés d’experts, Devoteam Lyon accompagne les DSI dans leur transformation digitale, avec un focus sur les nouvelles technologies comme le cloud (AWS, Microsoft, Google), l'intelligence artificielle, la cybersécurité, la...

  • Databricks Data Engineer

    il y a 5 jours

    Lyon, France Devoteam Data Driven Temps plein

    Une entreprise spécialisée en technologies à Lyon recherche un Consultant Data Engineer pour intégrer une équipe d'ingénieurs. Le candidat idéal devra avoir une solide expérience en migration de données et en automatisation de déploiements. La maîtrise de Python, SQL et Databricks est essentielle, tout comme une certification Databricks comme...

  • Azure Data Engineer

    il y a 1 semaine

    Lyon 2e, France Cellenza Temps plein

    Cellenza est un cabinet de conseil spécialisé dans l’accompagnement de ses clients sur des projets stratégiques de transformation numérique et d’innovation. Nous sommes une communauté de 120 passionnés avec des expertises en Stratégie IT, Plateformes Cloud et Data dans Azure, IA & ML, Développement & Devops, Conteneurisation et...

  • Azure Data Engineer

    il y a 2 semaines

    Lyon 2e, France Cellenza Temps plein

    Cellenza est un cabinet de conseil spécialisé dans l’accompagnement de ses clients sur des projets stratégiques de transformation numérique et d’innovation. Nous sommes une communauté de 120 passionnés avec des expertises en Stratégie IT, Plateformes Cloud et Data dans Azure, IA & ML, Développement & Devops, Conteneurisation et...

  • Azure Data Engineer

    il y a 4 jours

    Lyon 2e, France Cellenza Temps plein

    Cellenza est un cabinet de conseil spécialisé dans l’accompagnement de ses clients sur des projets stratégiques de transformation numérique et d’innovation. Nous sommes une communauté de 120 passionnés avec des expertises en Stratégie IT, Plateformes Cloud et Data dans Azure, IA & ML, Développement & Devops, Conteneurisation et...

  • Azure Data Engineer

    il y a 2 heures

    Lyon 2e, France Cellenza Temps plein

    Cellenza est un cabinet de conseil spécialisé dans l’accompagnement de ses clients sur des projets stratégiques de transformation numérique et d’innovation. Nous sommes une communauté de 120 passionnés avec des expertises en Stratégie IT, Plateformes Cloud et Data dans Azure, IA & ML, Développement & Devops, Conteneurisation et...

  • Data Engineer

    il y a 1 semaine

    Lyon 2e, France TimTek Temps plein

    **TimTek est une startup à mi-chemin entre l'incubateur et l'ESN, dont les objectifs sont multiples.** Tout d'abord, nous développons une activité de prestation intellectuelle dans le domaine IT autour de 3 sujets: - **Développement**: Java, PHP, C#, Javascript et tous leurs frameworks. - **Infrastructure**: Cloud, Devops, Architecture, Administration...

  • Data Engineer

    il y a 2 semaines

    Lyon 2e, France TimTek Temps plein

    **TimTek est une startup à mi-chemin entre l'incubateur et l'ESN, dont les objectifs sont multiples.** Tout d'abord, nous développons une activité de prestation intellectuelle dans le domaine IT autour de 4 sujets: - **Développement**: Java, PHP, C#, Javascript et tous leurs frameworks. - **Infrastructure**: Cloud, Devops, Architecture, Administration...