De 09-2021à 07-2024- Mission SOCIETE-GENERALE- DMS-DATA Business Analyst dans l’équipe QURE.
Dans un contexte international et d’agilité à l’échelle, définition des épics et des user stories pour l’interface de paramétrage QURE-UI et pour le moteur d’exécution des contrôles de qualité des données QURE-ENGINE en environnement Bigdata
Mise en place de nouveaux types de contrôles dédiés (déduplication des données, fuzzy matching) et de nouvelles fonctionnalités (templating, héritage et industrialisation pour la génération de contrôles similaires)
Recette et validation des incréments (programmes, docs)
Présentation du Framework QURE et embarquement fonctionnel des nouveaux clients (autres entités SG)
Prise en compte, suivi et résolution des anomalies.
Technologies utilisées
Spark shell, Spark Sql, Scala
Microsoft Azure, abfs, Airflow, Kafka
Hadoop, hdfs, oozie, Hue
Yarn , Monitoring
Postgres