PySpark Developer

Quelle est votre mission?

Vous vous chargez en premier lieu du développement et de la gestion d'une plateforme de données moderne holistique créée dans le cloud de Microsoft Azure

Par ailleurs, en tant qu'IT Custodian, vous êtes un membre-clé de l’équipe de la «Data Platform», vous assurez la conception, l’implémentation et l’optimisation pointue du pipeline de traitement de données massives qu'elle contient.

En collaborant avec le Business, le département IT a enregistré des résultats records dont ils peuvent légitimement être fiers

• 470 millions de transactions avec un PIC de près de 8000 transactions à la minute;
• une disponibilité à 100 % des systèmes centraux de tirage/jeu ;
• une disponibilité à 99,98 % des canaux ;

Le département IT est le cœur battant de la Loterie Nationale puisqu'il collabore étroitement avec l'ensemble de l'organisation pour proposer 7 jours sur 7 à nos joueurs la meilleure expérience de jeu possible dans un environnement sécurisé, et pour préserver en permanence notre réputation sans faille. Nos millions de joueurs, nos nombreux gagnants et les innombrables « bonnes causes » que nous soutenons chaque jour pour un montant de plus de 520 000 € misent sur cela.

Au sein de l'équipe Data Platform, vous êtes responsable des aspects suivants

• Vous travaillez principalement sur le traitement et la transformation des données en utilisant PySpark pour les opérations ETL depuis diverses sources de données à la Loterie Nationale.
• Vous élaborez la nouvelle conception moderne de la dataplatform (medallion design) et vous travaillez en étroite collaboration avec le chargé en solution design.
• Vous veillez à optimiser les jobs Spark pour améliorer les performances et à gérer l’allocation des ressources. 
• Vous réaliserez des analyses de données, des modélisations et vous collaborez avec les Data Scientists pour déployer à grande échelle des modèles et algorithmes de machine learning. 

Pourquoi vous pouvez faire la différence

Parce que vous êtes titulaire d'un Bachelier ou d'un Master en sciences de données dans un domaine en rapport avec le big data et que vous avez au moins 5 ans d'expérience avec les pipelines de données, les technologies cloud et avec des solides compétences en Python.

Parce que vous connaissez les technologies ou concepts suivants

• Apache Spark, Python, notebooks
• DevOps azure CI/CD pipeline
• Microsoft SQL ou DBT 
• Azure Data Platform Stack, notamment :

1. Synapse Analytics
2. Lakehouse
3. Fabrics
4. Semantic model
5. PBI

• Expérience avec cloud computing, data engineering, big data processing, performance tuning
• Architecture Azure Data Platform

Parce que vous êtes motivé et initiatif à prendre l'ownership dans une équipe. Vous savez travailler de manière autonome mais avez dans le même temps l'esprit d'équipe.

3 raisons pour lesquelles ce poste est pour vous

+ Vous êtes un expert en Python, vous avez de l’expérience avec la technologie Azure & Fabric et l’optimisation et performance des pipelines de données

+ Vous connaissez la méthodologie DevOps car vous serez amené(e) à l'appliquer dans vos tâches quotidiennes.

+ Vous êtes analytique de nature et aimez résoudre des problèmes difficiles. 

Nous vous offrons

• De l'attention pour vous 

Nous trouvons important que vous puissiez donner le meilleur de vous-même mais aussi que chacun puisse donner à l'autre le meilleur de lui-même. Votre évolution à la Loterie Nationale est entre vos mains. 

• Un bon équilibre entre vie professionnelle et vie privée 

À la Loterie Nationale, vous bénéficiez de compléments intéressants à vos conditions de travail, tels que 32 jours de congé, un horaire de travail flottant dans un régime de 37,5 heures par semaine et la possibilité de travailler de chez vous. 

• Aspects financiers et plus

Travailler à la Loterie Nationale constitue un fameux défi qui s’accompagne bien sûr de contreparties. Outre un salaire conforme au marché avec voiture de société, vous recevez également un bonus annuel, un pécule de vacances, une prime de fin d’année, des indemnités pour vos déplacements domicile-lieu de travail, des assurances complémentaires, et plus encore.