Data Engineer Expérimenté H/F

Description de l'offre d'emploi Rejoignez Valeuriad, ESN Agile, engagée, 100% Nantaise et organisée sur un mode de management participatif. 🌟 Oui, mais quelle serait votre valeur ajoutée ? Pour intervenir en tant que Data Engineer. Voici Des Exemples De Missions Que Nous Proposons Étude, conception et réalisation de traitements Big Data Échange avec les architectes, les PO et PP0, les développeurs et la gouvernance de données Exploration des données et des usages des utilisateurs avec Impala Import de données (SFTP, Kafka, RabbitMQ) Alimentation du cluster Hadoop via des composants développés en Java avec le Framework Spark sur IntelliJ Utilisation d’Apache Ambari pour gérer et surveiller un cluster Hadoop, visualisation des jobs en cours via YarnApplication et des flux Oozie Collecte des données depuis Teradata via l’outil Sqoop dans une base de données Hive Transformation des données avec Spark (HDFS, Hive, Kafka, Hbase, Phoenix) Utilisation de Apache Kudu afin d'optimiser les requêtes utilisateurs sur les données chaudes Exposition de données sur Dataiku pour la création de modèles de DataScience Réalisation en Java – Flink pour gérer les traitements complexes et volumineux Gestion de configuration sous Git avec GitLab Intégration continue avec Jenkins et Sonar Lecture de fichiers parquet depuis un répertoire S3 sous AWS Requêtage de bases de données depuis l'outil Athena d'AWS Transformation des données et calcul d'indicateurs sous Hive Utilisation de Oozie pour l’ordonnancement de flux Utilisation de Kibana pour visualiser et mesurer la volumétrie de traitements quotidiens et en streaming Environnement : Big Data Apache (Hadoop, Spark, Ambari, Hive) Technologies utilisées : Hadoop, Apache Ambari, RabbitMQ, Java, Scala, YarnApplication, Teradata, Sqoop, Kudu, Hue, Hive, Impala, Dataiku, Flink, Kafka, Spark, Kibana, Oozie, Git, GitLab CI, Jenkins, AWS Vous ferez partie de notre Communauté Data Valeuriad Une communauté de + de 30 passionnés : Data ingé / Data scientists / Data Analysts / MlOPS… Les possibilités de vous investir au-delà de votre future mission : réaliser des suivis techniques et/ou des entretiens techniques et/ou aider lors des réponses à appel d'offres. Des Apéro tech : des mini conf en format apéro. Le Printemps de la tech : notre propre DevFest interne. Un principe de veille collective et partagée sur Slack. Et maintenant, “Laissez-vous guider”. Valeuriad c’est quoi ? Une entreprise de 180 Valeurieux où vous connaîtrez (presque) tout le monde. 3 offres de service : DevOps / Data-IA / Conseil Agile Nos valeurs communes incarnées et partagées par tous : l’Engagement, le Collaboratif, le Partage, l’Authenticité. Notre Organisation Une expertise métiers : en moyenne, nos co-équipiers ont 8 années d’expérience et évoluent en environnement complexe Un environnement de travail confortable : Notre “Nid” > Un espace éco rénové, doté de bureaux ergonomiques, d’une salle de détente et un accès en libre service aux boissons et petites gourmandises quotidiennes. Une organisation d’entreprise collaborative où vous aurez la possibilité de participer à des sujets internes : demi-journée d’innovation ; bourse aux rôles ; intégrer un de nos comités (RSE, technique ou mécénat). Une entreprise engagée avec une politique RSE forte en interne et auprès de notre écosystème. Un suivi de carrière personnalisé et sur mesure grâce à un triptyque de référent RH/Commerce/Technique et des points d’échange réguliers. L’objectif : co-construire votre évolution de carrière en phase avec vos besoins et attentes. Des événements variés toute l’année pour célébrer, collaborer et partager : Séminaire annuel, repas de Noël, Apéros tech ou fonc’ et autres afterworks. Ingénieur de données/Ingénieure de données Nantes, Pays de la Loire, France #J-18808-Ljbffr