07 Nov
|
BDO Canada
|
Halifax Regional Municipality
07 Nov
BDO Canada
Halifax Regional Municipality
Nous veillons chaque jour à faire de nos employés notre priorité
Chez BDO, les relations positives avec nos gens et nos clients sont fondamentales. Chaque jour, nos professionnels offrent à nos clients un service exceptionnel, ainsi que des conseils et des observations auxquels ils peuvent se fier. En contrepartie, nous offrons à nos employés un milieu de travail primé qui et qui fait de leur croissance personnelle et de leur perfectionnement professionnel une priorité.
Vos possibilités de carrière
BDO Digital est à la recherche d’une personne expérimentée possédant une solide expertise technique pour occuper le poste d’ingénieur(e) principal(e) de données, spécialisation Databricks, au sein de notre pratique Services-conseils en technologie. Ce rôle combine leadership technique et travail pratique en ingénierie de données, avec un accent sur la conception et la mise en œuvre de pipelines de données évolutifs, sécurisés et adaptés aux environnements de production à l’aide d’Azure et de Databricks. La personne retenue dirigera également des mandats clients et veillera à harmoniser les initiatives en matière de données avec les objectifs d’affaires afin de générer des résultats concrets.
Principales responsabilités
Ingénierie de données et développement de plateformes
- Concevoir, développer et optimiser des pipelines de données robustes à l’aide de Databricks, Delta Lake et Apache Spark.
- Développer des processus ETL évolutifs pour les données structurées et non structurées, tout en assurant la qualité et la fiabilité des données.
- Mettre en œuvre des solutions d’intégration de données provenant de sources infonuagiques et sur site, en tirant parti de Databricks et d’Azure Data Lake.
- Automatiser les flux de travail liés à l’ingestion,
à la transformation et à la validation des données.
- Surveiller les pipelines de données, résoudre les problèmes et améliorer leur performance et leur fiabilité.
- Assurer la conformité, la sécurité et l’excellence opérationnelle de l’ensemble des flux de travail liés aux données.
Leadership auprès des clients et de l’équipe
- Agir à titre de principal responsable technique dans le cadre de mandats clients axés sur l’ingénierie de données et la mise en œuvre de solutions analytiques.
- Traduire les exigences d’affaires en architectures de données évolutives et en plans opérationnels.
- Collaborer avec des équipes multidisciplinaires afin d’intégrer les solutions de données aux environnements de production.
- Encadrer les membres moins expérimentés de l’équipe et promouvoir l’adoption des pratiques exemplaires en matière d’ingénierie de données et d’analytique infonuagique.
Application des données
- Transformer les exigences d’affaires et les prototypes analytiques en solutions de données robustes et évolutives.
- Appliquer des techniques appropriées de modélisation et de transformation des données afin de soutenir les initiatives d’analytique et d’apprentissage automatique.
- Documenter les pipelines de données et contribuer au partage des connaissances à l’interne.
Qualifications
Exigences
- Formation :
Baccalauréat ou maîtrise en informatique, en ingénierie des données, en systèmes d’information ou dans une discipline étroitement connexe. Solides connaissances des structures de données, des algorithmes et des systèmes distribués.
- Expérience professionnelle : Au moins cinq années d’expérience pratique en ingénierie de données, dont au moins trois années d’expérience directe avec Databricks, Apache Spark et des plateformes de données infonuagiques. Expérience démontrée dans le déploiement et la maintenance de solutions de données à grande échelle dans des environnements de production.
- Connaissance approfondie de l’écosystème Microsoft Azure et expérience démontrée avec des services tels qu’Azure Data Lake, Azure Databricks, Azure Synapse et Azure DevOps.
- Très grande maîtrise de Databricks, notamment une expérience pratique avec Delta Lake, Apache Spark et l’orchestration de pipelines de données. Expérience dans l’optimisation de la performance et de la fiabilité en environnement de production.
- Compétences avancées en programmation Python et/ou Scala, ainsi qu’une expérience pratique avec des bibliothèques et des cadres de développement utilisés en ingénierie de données.
- Solide compréhension des pratiques CI/CD et expérience dans la conception et la maintenance de pipelines à l’aide d’outils comme GitHub Actions, Azure DevOps ou Jenkins. Connaissance des outils d’infrastructure en tant de code, comme Terraform ou les modèles ARM, afin d’automatiser le provisionnement et le déploiement des environnements.
- Excellentes aptitudes en communication écrite et orale et capacité à interagir efficacement avec divers intervenants, notamment des scientifi
📌 Ingénieur(e) principal(e) de données, spécialisation Databricks
🏢 BDO Canada
📍 Halifax Regional Municipality