Data Engineer / Developpeur Python-Spark (La Défense)

Key Consulting recrute !

À propos

Key Consulting rassemble des ingénieurs IT passionnés, technophiles, curieux, ouverts, pédagogues et bienveillants; des personnes prêtes à s'impliquer et progresser dans la Société, son évolution et l'avancée des projets.

Nous entendons notre raison d’être "Faire que le code soit utile" comme étant ce à quoi nous voulons collectivement contribuer lier notre Passion IT et la Planète pour répondre par la technologie aux enjeux environnementaux et sociétaux.

Descriptif du poste

Rejoignez une équipe de 2 développeurs, un Business Analyst et un Team Lead pour collaborer pour un client leader de l'énergie.

Le but de cette application est de récupérer des données de différents fournisseurs d’énergie (électricité et gaz) en Europe. L’équipe réalise ensuite de l’ingestion de données pour la mettre à disposition d’une autre application web.

Missions :

  • Récupération et ingestion des données via PySpark (calculs distribués)
  • Traitement des fichiers pour en faire des time series dans Databricks (scaler la solution)
  • Participer à la montée en compétence de l’équipe sur Databricks (formation par l'éditeur)
  • Participer à la migration de la base de données de PostgreSQL vers AWS S3

Environnement technique principal:

  • Python
  • Spark
  • AWS
  • Databricks
  • Docker
  • Kubernetes
  • Agile

Profil recherché

Key Consulting recherche un profil...

  • 4 ans d’expérience en développement Python et/ou Spark
  • Appétence et attrait pour résoudre des problèmes complexes
  • Les connaissances Databricks et AWS sont un plus au même titre que Docker et Kubernetes

Nous adapterons la rémunération selon l'expertise apportée

Informations complémentaires

  • Type de contrat : CDI
  • Date de début : 22 avril 2024
  • Lieu : Suresnes
  • Niveau d'études : Bac +5 / Master
  • Expérience : > 5 ans
  • Télétravail partiel possible
  • Salaire : entre 50000€ et 60000€ / an