Sujet de stage : Conception d'un module intelligent de supervision et de fiabilisation des pipelines Data/IA Cloudera pour les use cases Credit Immo et Finance
DESCRIPTION DU PROJET :
Dans le cadre de ce stage, vous serez amene(e) a :
- Analyser les metriques et logs issus de NiFi. Airflow et Cloudera Manager
- Developper un collecteur automatise des indicateurs de performance et d'etat des pipelines
- Concevoir un mecanisme de detection d'anomalies (statistique et/ou machine learning)
COMPETENCES REQUISES :
- Competences en IT
- Statistique, machine learning
RESULTATS ATTENDUS ET LIVRABLES :
1. Cahier des charges fonctionnel et technique
2. Code source du collecteur, moteur d'analyse et interface de supervision
3. Modele de detection d'anomalies entraine et documente
4. Dashboard operationnel (NiFi / Airflow / CM)
5. Rapport PFE complet (analyse, conception, resultats, perspectives)
6. Guide d'exploitation et plan d'integration
Profil
- Etudiant(e) en derniere annee de formation Bac+5
- Competences en IT
- Connaissances en statistique, machine learning
- Sens de l'analyse
Beware of fraud agents! do not pay money to get a job
MNCJobsGulf.com will not be responsible for any payment made to a third-party. All Terms of Use are applicable.