Data Engineer

CBC Consult recrute pour le compte de son client basé à Aix-en-Provence (13), un / une Data engineer expérimenté pour une mission Freelance ou en portage salarial.

La mission peut se dérouler à Paris ou à Aix-En-Provence (2J / semaine sur site client Paris ou Aix + 3 jours en remote).

Des compétences SQL Server 2019 sont obligatoires, des compétences SSRS, SSIS sont appréciées.
- Être capable de designer des solutions de reporting en complète autonomie de la récolte du besoin jusqu’à la livraison. Avec phase de bugfix derrière
- Être capable de reprendre les projets de reporting existant (un Datawarehouse classique avec ces ETL et un CUBE, un Datawarehouse sur Azure via AzureDataFactory, certains projets spécifiques de reporting spécifiques)
- Être le réfèrent SQL pour supporter l’activité de l’équipe de développement, si besoin (tuning SQL)
- Expérience mínimale de 5 ans et au moins 2 ans d’expérience sur un poste similaire

Le Data Engineer développe, construit et maintien des infrastructures de données d’un point de vue système et sécurité. Il s’assure de la collecte, du stockage et de l’exploitation des flux de données répondant aux enjeux de l’entreprise. Il est garant de l’accès qualitatif des sources de données qui viennent alimenter le Data Lake afin d’en faciliter l’exploitation par les équipes de Data Science. Il définit également la structure des métadonnées.

Infrastructures de données:
Cartographie et documente les sources de données.

Conçoit les solutions permettant le traitement de volumes importants de flux de données et ceci en toute sécurité.

Structure les bases de données (sémantique, format, etc.).

Contribue à la gestion des référentiels de données.

Intégration des données:
Assure la supervision et l’intégration des données de diverses nature qui proviennent de sources multiples. Vérifie la qualité des données qui entrent dans le Data Lake et s’assure de leur sécurité.

Nettoie la donnée (élimination des doublons ) et la valide pour une utilisation aval.

Projets:
Participe aux phases de conception et de développement des projets et services data

Accompagne les Data Scientist/Analyst dans la mise en place des algorithmes de data science (passage à l’échelle, suivi des bonnes pratiques)

Automatise le déploiement des projets réalisés

Profil:
De formation supérieure Bac+5

Savoir s’approprier le besoin du demandeur et interagir avec lui, pour bien comprendre son métier et sa problématique. Sans oublier de tenir compte des attentes des utilisateurs et des développeurs.

Maîtriser des langages structurés (Javascript, Scala, Python )

Maîtriser divers systèmes d’exploitation : Windows, Linux

Connaissances en solutions de bases de données (SQL Server, PostgreSQL, NoSQL )

Forte expertise dans le stockage de données et les outils ETL

Maîtriser des technologies du Big Data permettant le traitement et la manipulation de données (Hadoop, Spark, Kafka )

Maîtriser les logiciels de bureautique (traitement de texte, tableur, présentation )

Savoir consolider les données, produire des KPI et construire des tableaux de bord à l’aide d’outils tels que Excel, Power BI, Tableau Software, ou encore QlikView.

Être à l’aise dans des environnements cloud : Azure, OVH

Etre à l’aise avec les outils d’intégration et de déploiement continue : AzureDevOps, création de CI/CD, docker, Ansible, kubernetes, Terraform, etc

Avoir un niveau de connaissance basique sur le Machine Learning, Data science, et l’Intelligence Artificielle afin de pouvoir travailler en collaboration avec les Data Scientists.

Anglais : anglais courant, professionnel et technique

Demarrage asap

durée 6 mois minimum

Pas de sous-traitance que Freelance

3 jours de télétravail par semaine