Data Engineer
il y a 6 jours
Data Engineer & Architect Full remote avec quelques déplacements à Lyon asap
Maîtrise des langages de programmation
? Une solide compréhension des technologies de base de données (par exemple, SQL, NoSQL), des entrepôt de données et d?Azure
? Expérience en architecture de données la conception de modèles de données, la définition de solutions de stockage et les schémas d'accès aux données.
? Familiarité avec le Machine learning, les concepts de traitement du langage naturel (NLP) et la Génération Augmentée de Récupération (RAG) est un plus.
? Vous avez d'excellentes compétences en matière de communication et de collaboration, et êtes capable de travailler efficacement dans un environnement d'équipe et dans le cadre de projets agiles.
**Les principales responsabilités sont les suivantes**:
? Vous êtes en charge de la conception et de la construction de pipelines de données évolutifs permettant de récupérer, d'agréger et de prétraiter efficacement les données provenant de différentes sources, tout en garantissant une fiabilité et des performances élevées.
? Vous êtes en charge de la conception des modèles de données, des solutions de stockage et des schémas d'accès.
? Vous avez la possibilité de collaborer avec les parties prenantes pour comprendre les besoins et pour définir et faire évoluer la stratégie d'architecture des données, y compris la modélisation des données, le stockage et les schémas d'accès.
? Vous travaillez avec une équipe agile interfonctionnelle pour intégrer des données provenant de divers systèmes et sources, effectuer des processus d'extraction, de transformation et de chargement (ETL) et maintenir l'intégrité des données tout au long du pipeline, en itérant sur les solutions et en communiquant sur les progrès réalisés.
Maîtrise des langages de programmation
? Une solide compréhension des technologies de base de données (par exemple, SQL, NoSQL), des entrepôt de données et d?Azure
? Expérience en architecture de données la conception de modèles de données, la définition de solutions de stockage et les schémas d'accès aux données.
? Familiarité avec le Machine learning, les concepts de traitement du langage naturel (NLP) et la Génération Augmentée de Récupération (RAG) est un plus.
? Vous avez d'excellentes compétences en matière de communication et de collaboration, et êtes capable de travailler efficacement dans un environnement d'équipe et dans le cadre de projets agiles.
-
Data Engineer Alternance
il y a 1 jour
Lyon, France Data ScienceTech Institute Temps pleinData ScienceTech Institute (DSTI) a été créé avec une ambition principale : former des experts du big data et de l'Intelligence Artificielle pour répondre aux besoins de l'industrie 4.0. Depuis 2015, DSTI forme des Data Analyst, Data Engineer et Data Scientist opérationnels, en offrant les programmes les plus internsifs du marché et les plus reconnus...
-
Senior Data Engineer Spark
il y a 2 semaines
Lyon, Auvergne-Rhône-Alpes, France Devoteam Data Driven Temps pleinAgence multi spécialiste composée de 350 collaborateurs répartis en communautés d'experts, Devoteam Lyon accompagne les DSI dans leur transformation digitale, avec un focus sur les nouvelles technologies comme le cloud (AWS, Microsoft Google), l'intelligence artificielle, la cybersécurité, la data, et l'automatisation des processus métiers.Data Driven...
-
Data Engineer F/H migration Databricks
il y a 15 heures
Lyon, France Devoteam Data Driven Temps pleinConsultant Data Engineer Databricks - Confirmé - H/F Agence multi spécialiste composée de 350 collaborateurs répartis en communautés d’experts, Devoteam Lyon accompagne les DSI dans leur transformation digitale, avec un focus sur les nouvelles technologies comme le cloud (AWS, Microsoft, Google), l'intelligence artificielle, la cybersécurité, la...
-
Data Engineer: Databricks Migration
il y a 2 semaines
Lyon, France Devoteam Data Driven Temps pleinUne société de services en ingénierie recherche un Data Engineer à Lyon pour intégrer une équipe et participer à la migration des données de Cloudera vers Databricks. Le candidat idéal possède un Bac +5, 2 ans d’expérience minimum et maîtrise Python et SQL. Des formations et certifications sont proposées pour accompagner votre développement....
-
Databricks Data Engineer
il y a 15 heures
Lyon, France Devoteam Data Driven Temps pleinUne entreprise spécialisée en technologies à Lyon recherche un Consultant Data Engineer pour intégrer une équipe d'ingénieurs. Le candidat idéal devra avoir une solide expérience en migration de données et en automatisation de déploiements. La maîtrise de Python, SQL et Databricks est essentielle, tout comme une certification Databricks comme...
-
Data Engineer: Databricks Migration
il y a 2 semaines
Lyon, France Devoteam Data Driven Temps pleinUne entreprise de transformation digitale recherche un Data Engineer pour intégrer une équipe d'experts. Le poste implique la migration des données de Cloudera Hadoop vers Databricks et l'automatisation des déploiements via CI/CD. Le candidat idéal possède au moins 2 ans d'expérience, maîtrise Python (pyspark) et SQL, et a un niveau d'anglais minimum...
-
Data Engineer
il y a 5 jours
Lyon, Auvergne-Rhône-Alpes, France Ideal Match Temps pleinPrésentation de la société Nous recherchons un Data Engineer (F/H) pour intervenir sur un projet d'envergure et contribuer à la gestion et l'optimisation des flux de données.Description Vos missionsConcevoir et optimiser les pipelines de traitement des données avec Spark et Scala.Travailler sur des volumes de données massifs et assurer leur qualité...
-
Data Engineer
il y a 1 semaine
Lyon, Auvergne-Rhône-Alpes, France Free-Work Temps pleinCITECH recrute Dans le cadre du renforcement de son pôle dédié à l'architecture, la valorisation et l'exploitation de la donnée, une grande entreprise nationale du secteur de l'énergie recherche unData Engineer / Data Analyst (H/F).L'objectif : contribuer à la fiabilité, la qualité et l'analyse des données nécessaires à la gestion des réseaux,...
-
Data Engineer F/H migration Databricks
il y a 2 semaines
Lyon, France Devoteam Data Driven Temps pleinAgence multi spécialiste composée de 350 collaborateurs répartis en communautés d’experts, Devoteam Lyon accompagne les DSI dans leur transformation digitale, avec un focus sur les nouvelles technologies comme le cloud (AWS, Microsoft, Google), l'intelligence artificielle, la cybersécurité, la data, et l'automatisation des processus métiers. Data...
-
Data Engineer F/H migration Databricks
il y a 4 jours
Lyon, Auvergne-Rhône-Alpes, France Devoteam Data Driven Temps pleinAgence multi spécialiste composée de 350 collaborateurs répartis en communautés d'experts, Devoteam Lyon accompagne les DSI dans leur transformation digitale, avec un focus sur les nouvelles technologies comme le cloud (AWS, Microsoft, Google), l'intelligence artificielle, la cybersécurité, la data, et l'automatisation des processus métiers.Data...