Stage - Gouvernance des plateformes de messagerie

OUTSCALE Platform fournit les fondations communes (sécurité, supervision, automatisation) à l'ensemble des services Cloud du groupe.
Vous rejoindrez l'équipe Messaging Services, en charge des infrastructures d'échange de données et de streaming d'événements basées notamment sur Apache Kafka.
Dans le cadre de ce stage, vous participerez à la mise en place et à l'industrialisation de solutions de gouvernance pour les plateformes Kafka. L'objectif sera notamment d'étudier, concevoir et développer des mécanismes permettant de mieux contrôler les usages de Kafka, d'appliquer des règles de gouvernance.
Le projet s'appuiera sur les mécanismes natifs de Kafka et ceux de conduktor, notamment les interceptors, afin d'explorer différentes approches de gouvernance au niveau des producteurs et consommateurs.

Vos Missions

Dans le cadre de ce stage, vous serez amené(e) à :
•    Étudier les besoins de gouvernance d'une plateforme Apache Kafka : contrôle des usages, conformité aux conventions, traçabilité et maîtrise des flux.
•    Analyser les fonctionnalités de gouvernance proposées par Conduktor et étudier leur intégration avec notre environnement Kafka.
•    Concevoir et développer des outils et mécanismes de gouvernance Kafka, notamment autour des APIs et des mécanismes d'extension proposés par Kafka.
•    Explorer et mettre en œuvre les Kafka Interceptors afin d'appliquer des règles ou de collecter des informations au niveau des producteurs et consommateurs.
•    Développer des composants en Java permettant d'automatiser certaines règles de gouvernance.
•    Mettre en place des POC puis des solutions industrialisables, en évaluant leur impact sur les performances, la fiabilité et l'expérience développeur.
•    Mettre en place des tests automatisés et des mécanismes de validation des règles de gouvernance.
•    Documenter les solutions développées et proposer des recommandations pour leur intégration dans la plateforme Messaging Services.
•    Collaborer avec les équipes Messaging, Platform, Ops et Cyber-sécurité, ainsi qu'avec les équipes de Conduktor.