Senior Python Developer

Bonjour Êtes-vous las de la polarisation des réseaux sociaux? Rêvez-vous d'un Internet vous permettant d'accéder à toutes les sources de ce que vous lisez ?

Exorde a pour but de changer la façon dont tout le monde comprend l'information en créant un protocole et une organisation digitale qui analyse les flux d'information du Web en continu et en toute transparence.

Nous développons une approche unique pour tirer parti d'une communauté décentralisée afin de distribuer des modules de collecte de données pour indexer et cartographier les flux d'infos du Web en temps réel. Intégrer facilement les contributeurs au réseau Exorde est une priorité

Nous recherchons activement un/une ingénieur/développeu(se)/(r) Python avec une expérience significative en développement logiciel pour nous aider à mûrir et développer notre module de collecte de données. Vous serez encouragé/ée à prendre l'initiative et à développer vos propres stratégies lors du développement de vos scrapers Vous deviendrez le/la propriétaire de cette partie du projet Exorde et vous serez en relation directe avec l'équipe de Data Science & l'équipe Produit.

**L'équipe**:
Exorde a été fondé par 3 ingénieurs basés à Lyon et Bordeaux (France). Nous sommes maintenant une équipe forte de 5 ingénieurs. Nous travaillons avec des technologies de pointe telles que le BigData, NLP (BERT, GPT, extraction de mots clés, extraction de sujets, formatage de phrases), Web Scraping, Blockchain nouvelle génération (SKALE + Ethereum) ainsi que des réseaux de stockage décentralisés émergents comme IPFS + Filecoin.

**Vous serez à la croisée des technologies Blockchain, de Data Collection/Scraping & de stockage sur IPFS/Filecoin. Vous serez responsable du point d'entrée de tout notre système: la source des données.**

**Voici ce que vous ferez**:

- Développement d'un exécutable basé sur Python, d'abord sur Windows puis sur Linux/MacOS.
- Mise à jour & amélioration de notre logiciel actuel pour recueillir des données à partir de plusieurs médias sociaux, sources de nouvelles et futures sources non structurées.
- Penser et concevoir les scrapers pour qu'ils soient lancés de manière ouverte et distribuée (scraping aléatoire, etc.). Automatisation, résilience pour nos scrapers.
- Recherche et évaluation de la pertinence des nouvelles sources de données.
- Construire des outils permettant de réduire le coût d'intégration sur de nouveaux sites web et définir des stratégies de contrôle de la validité des données extraites.
- Améliorer et élargir la stratégie du scraper pour éviter le bannissement et l'exclusion. Élaborer et tester des stratégies pour optimiser les appels faits à un site Web. Déboguer et maintenir les scrapers.
- Aider à penser et construire des parties du SDK Exorde v1, orienté vers les contributeurs du réseau Exorde.
- Développer potentiellement de futurs logiciels secondaires et orienter leur architecture
- Alimentez nos bases de données et systèmes ETLs pour notre traitement avancé (sentiment, etc).

**Prérequis**:

- Diplôme d'ingénieur / Master en informatique / Equivalent
- Au moins 4-5 ans d'expérience dans le secteur.
- Une vraie expérience dans le développement de logiciels (sous Windows idealement)
- Une première expérience dans l'exploration du Web, l'acquisition de données, ou similaire.
- Maîtrise de Python (3.8+), de Pandas et des librairies de traitement de données de base.
- Maîtrise des bonnes pratiques de développement logiciel & de génération d'executable (fuite de mémoire, tests, gestion totale des erreurs try/catch, notamment au niveau réseau)
- Expérience dans l'écriture de code asynchrone / multithreadé, programmation event-based potentiellement

**Idéalement, vous avez**:

- Une bonne maîtrise de l'UI/UX pour rendre l'interface de notre logiciel plus ergonomique
- Connaissance des meilleures pratiques d'ingénierie logicielle (code propre, revue de code, développement piloté par les tests,...) et des systèmes de contrôle de version.
- Expérience avec FastAPI. Bonnes pratiques de versioning (github, etc.) & de documentation.
- Familiarité avec la notion de réseaux de stockage décentralisés ou de plateformes de smart contracts.
- Une certaine expérience avec d'autres langages de programmation (par exemple C++).
- Une volonté de surmonter les obstacles auxquels vous êtes confrontés en matière de données. Vous serez dans le perfectionnement de votre précieux module international de collecte de donnée

**Compétences générales**:

- **Vous voulez travailler dans un environnement de startup rapide, énergique et à forte croissance. Vous êtes axé sur les résultats & la qualité. Vous aimez passer du temps aujourd'hui à perfectionner un système, pour être tranquille demain.**:

- **Vous aimez les beaux logiciels et pas seulement ceux qui résolvent un problème.**:

- **Vous aimez apprendre de vo