Position
Description:
Nous recherchons un(e) spécialiste de données afin de concevoir, développer et opérer des pipelines de données robustes, sécurisés et performants, permettant l'ingestion, la transformation et la mise à disposition des données à grande échelle.
Your future duties and responsibilities:
Fonctions et responsabilités
. Concevoir, développer et maintenir des pipelines ETL/ELT couvrant les couches Bronze, Silver (Argent), Gold (Or) dans une architecture data moderne.
. Assurer l'ingestion de données (batch et streaming), leur transformation et leur exposition dans des environnements analytiques.
. Garantir la qualité des données via des contrôles automatisés, la traçabilité, l'auditabilité et la rejouabilité des traitements.
. Industrialiser les pipelines via des pratiques Data Ops : orchestration, CI/CD, monitoring et observabilité.
. Optimiser les performances (volumétrie, temps de traitement, coûts cloud).
. Assurer la disponibilité, la fiabilité et la sécurité des flux de données en production.
. Participer au support et à la résolution d'incidents liés aux pipelines et aux plateformes de données.
. Documenter les solutions techniques, les pipelines et les modèles de données.
Required qualifications to be successful in this role:
Environnement technologique
. Langages & frameworks :
Python (PySpark, Pandas) SQL avancé (optimisation, modélisation, requêtes analytiques)
. Traitement de données & orchestration :
Apache Spark Apache Airflow (ou équivalent) Pipelines ETL/ELT
. Plateformes cloud & data :
Microsoft Azure (Data Factory, Synapse Analytics, Data Lake) Snowflake Microsoft Fabric (atout)
. Gestion des données :
Modélisation de données (3NF, dimensionnelle, Data Vault) Gestion des SCD (Slowly Changing Dimensions) Formats de fichiers (Parquet, Delta Lake, Avro)
. Dev Ops & Data Ops : CI/CD (Azure Dev Ops, Git Hub Actions) Versioning Git Automatisation des tests de données
. Observabilité & monitoring :
Logs techniques, métriques, alerting Outils de monitoring (ex : Azure Monitor, Datadog ou équivalent)
Ce que vous livrez
. Pipelines de données fiables, sécurisés et performants;
. Jeux de données prêts à l'usage, nettoyés, standardisés et historisés;
. Documentation technique complète et maintenue à jour;
. Solutions industrialisées intégrant tests, monitoring et automatisation;
Profil recherché
. Expérience en ingénierie de données et intégration de données à grande échelle;
. Maîtrise des concepts ETL/ELT et des architectures data modernes;
. Expertise en SQL et bonnes bases en Python;
. Expérience sur des plateformes cloud (Azure, Snowflake ou équivalent);
. Connaissance des pratiques Data Ops et CI/CD;
. Bonne compréhension des enjeux de qualité, sécurité et gouvernance des données.
Qualités personnelles
. Rigueur et souci de la qualité technique;
. Capacité à travailler en autonomie et en collaboration;
. Esprit d'analyse et résolution de problèmes complexes;
. Orientation production (fiabilité, stabilité, monitoring proactif);
. Volonté d'amélioration continue et de partage des connaissances.
#LI-AC16
Skills:
To Search, View & Apply for jobs on this site that accept applications from your location or country, tap here to make a Search: