Spécialiste en Ingénierie de données | Data Engineering Specialist

** Emplacement /*
* *
* Location:

*** Concevoir, développer et déployer des applications de données à haut volume pour ingérer, transformer et stocker des données
* Concevoir et assurer le cycle de vie complet (conception, test, déploiement, maintenance) de pipelines d’intégration robustes
* Architecturer et développer des pipelines complexes en utilisant
** Apache Spark / PySpark / Python / SQL
*** Mettre en œuvre des architectures
** batch et streaming
** dans un environnement
** Databricks et AWS
*** Traduire les exigences d’affaires et analytiques en solutions techniques évolutives
* Concevoir et déployer des scripts ETL/ELT connectant plusieurs sources de données et solutions infonuagiques
* Appliquer les meilleures pratiques en ingénierie logicielle (tests automatisés, revues de code, documentation, standards d’équipe)
* Contribuer activement à l’évolution des standards organisationnels en matière de données
* Baccalauréat ou maîtrise en informatique, en génie informatique ou dans un domaine connexe
* ** 3+ années d’expérience en ingénierie des données
*** Expertise avancée en développement de solutions complexes avec
** PySpark dans Databricks
*** Solide expérience avec les services infonuagiques
** AWS
* ** Expérience pratique avec des architectures
** batch et streaming
*** Bonne compréhension des concepts de données et d’analytique : modélisation dimensionnelle, ELT, outils de reporting, gouvernance des données, entreposage de données, données structurées et non structurées
* Excellente compréhension des méthodologies
** Agile
* * et expérience au sein d’équipes interfonctionnelles
* Design, develop, and deploy high-volume data applications to ingest, transform, and store data
* Own, design and manage the end-to-end lifecycle (design, testing, deployment, maintenance) of robust data integration pipelines
* Architect and develop complex pipelines using
** Apache Spark / PySpark / Python / SQL
*** Implement
** batch and streaming
** architectures in a
** Databricks and AWS
** environ ment* Translate business and analytics requirements into scalable technical solutions
* Design and deploy ETL/ELT scripts connecting various data sources and cloud solutions
* Apply software engineering best practices (automated testing, code reviews, documentation, team standards)
* Actively contribute to the evolution of organizational data standards
* Bachelor’s or Master’s degree in Computer Science, Computer Engineering, or a related field
* ** 3+ years of experience in data engineering
*** Advanced expertise in developing complex solutions with
** PySpark on Databricks
*** Strong experience with
** AWS
* * cloud services
* Hands-on experience with
** batch and streaming
** architectures* Solid understanding of data and analytics concepts: dimensional modeling, ELT, reporting tools, data governance, data warehousing, structured and unstructured data
* Excellent understanding of
** Agile
* * methodologies and experience working in cross-functional teams
#J-18808-Ljbffr