About KPIKPI Digital helps clients reach their business objectives by identifying required capabilities and by providing the proper data and analytics strategy and foundation allowing handling of all data challenges including enterprise-wide AI scaling. We specialize in Data & Analytics from Strategy, Architecture, Governance, Modern D&A Platform, MDM and the entire D&A Value Chain (Data Ingestion, Data Pipelines, Lakehouse, AI Modeling, DO/OR, BI, Deployment and Monitoring.Data Engineer – Data & Analytics GroupAbout KPIKPI Digital helps clients reach their business objectives by identifying required capabilities and by providing the proper data and analytics strategy and foundation allowing handling of all data challenges including enterprise-wide AI scaling. We specialize in Data & Analytics from Strategy, Architecture, Governance, Up-to-date D&A Platform, MDM and the entire D&A Value Chain (Data Ingestion, Data Pipelines, Lakehouse, AI Modeling, DO/OR, BI, Deployment and Monitoring.Performance Management and Digital Experience are two additional practices that complement the D&A practice. In addition, to the Consulting Services, we offer Managed Services, Education and Training. Want to join a winning team?The RoleWe are looking for a Data Engineer that combines Data Engineering, platform architecture and management expertise. The Data Engineer will:Provide consulting services to our customers as the KPI Digital Lead Data EngineerDefine and maintain the KPI Digital Modern D&A Platform Architecture. This D&A Platform Architecture must:Support real-time Lake House Architecture on Azure, AWS and GCPData feeds from business applications and sensors, Io T, PLC, ScadaAny type of workload from API on Insights, BI, AI ML/DL, NLP, DO/OR, Execution of ML models in real-time, batches, micro-batches or on edgeData Ingestion in batch, micro-batches and streamingReal-time dashboardRespect highest security standardsScalable, elastic and performantMaintain AND Improve Accelerators to speed up the creation of Data Pipelines on major cloud providersParticipate and support the AI Pre-Sales activitiesBuild a Data Engineering team to meet the expected customers growthCreate Data Engineering content (articles, white papers and so on)Speak in conferences, webinars to promote KPI Digital brandThe Ideal Candidate IsGoal oriented and possesses strong decision-making and problem-solving skillsAble to build a team of diverse talents to meet the customers expectations. This implies being quite involved in the recruiting and the active management of all Data Engineers (coaching, guiding, evaluating, setting objectives, reviews and so on)Expected to work in close collaboration with the AI Team Lead, the Data Governance Lead and the VP of D&AA team lead, which means he/she not only assists his/her team, but the candidate is also responsible to bring his/her team to higher level of expertiseAble to devise training programs around the consulting mandates for his/her team to growCommunicates and explains the plan, templates, approaches to his/her team and other teams so that he/she does not end-up being a bottleneckCan communicate clearly in both languages (French and English) going technical when appropriate and is able to elevate the vocabulary for less technical folks such as clients, other team members, PM and so onExcellent written and verbal communication skills for coordinating across teams (French and English)Ability to discern fundamental and key aspects worth ‘fighting for’ versus the less ‘important’ ones. The ideal candidate is ‘street smart’Work with our customers’ stakeholders to identify opportunities for leveraging their existing D&A platform toward a modern real-time Lake HouseCoordinate with different functional teams to implement all D&A assets with proper monitoringKeep up to date with various modern D&A platform services and trendsSpecific SkillsHas implemented Lambda Architecture (may also have implemented KAPPA). And could create templates for a team of Data EngineersUnderstands and did implement how to move data from Event Hub (or similar) to a raw zone, then an integrated zone and then to a consumption zone with replication to a Serving Layer with database like Synapse, Snowflake,



Big Query or Redshift (micro batches and streaming even in the cold layer)Has been implementing the main 3 types of slowly changing dimensions in this technology or older onesHas Data Engineering using Data VaultHas used Delta LakeKnows how to stream data in the Data Lake using DatabricksIs very solid with Spark (to deal with Big Data situations) and can tune the environment using multiple nodes, is able to partition ‘DB’ and understand replicating the dimensions on multiple nodesCan optimize the use of Azure resources to optimize costs and usageHas some Azure administrator and cloud architecture experienceCan define the access rights management solutionIs an adept of CI-CD and can implement Azure Dev OpsCan define real-time and batch orchestrationHas used these software (and implemented best practices for their usage): Chef, Jenkins, Terraform, Confluence, GIT, SVN, Git Hub, Terraform, Bit Bucket, JiraHas the title implied, the candidate is a data engineer meaning he is a full fledge experienced developer very solid in both Python and SparkDatabricks is also a requirement, but if the candidate has all above requirements, the learning curve to absorb Databricks should be easy. Same comments for ADFHas used no SQL technologies and Azure Data Lake Store (gen 2)Understand asynchronous architecture using ‘queue mechanisms’ such as Event Hub/KakfaLearns and masters new technologies and techniques rapidly and continuously (with proper balance with consulting mandates)Able to understand rapidly the patterns and directions taken by the D&A Practice LeadAble to zero-in on ambiguous concepts and made them crystal clear rapidlyPragmatic (consider constraints) but not to the expense of faulty designs/conceptsHe/She must be comfortable working with a wide range of stakeholders and functional teamsExcellent written and verbal communication skills for coordinating across teamsA drive to learn and master new technologies and techniques.We’re looking for someone with 15 years of ETL/ELT and Data Pipelines experience and 7 years as a solution architectMinimum of 5 years in Senior Management roleExperience working with data architectureExperience with ADLS gen 2, S3, Spark, Databricks, Synapse Analytics, Snowflake, Power BI,Experience with AWS stack: Kinesis Data/Stream/Firehose, S3, Lake Formation, Red Shift, Tableau, …What will make you successful here?A desire to be accountable for owning problems from design to implementationA bias for action and pragmatic solutionsA low ego and humility; an ability to gain trust through effective communication and doing what you say you will doA talent for operating effectively at various levels of abstractionAn aptness to distill complex, technical topics articulately to a non-technical audienceAdaptability, flexibility, and an ability to navigate ambiguityBenefitsThe opportunity to join and grow an ever-expanding professional network of high-profile clients and reputable colleagues.Permanent, full-time job (40 hours a week)Flexible scheduleHybrid (work from home and/or office)Competitive salaryAttractive group insurance planRetirement savings planSmall company cultureFree use of gym within buildingCasual work environment: jeans-friendly!Ingénieur en chef des données – Groupe des données et des analysesÀ Propos Des IRCKPI Digital aide les clients à atteindre leurs objectifs d’affaires en identifiant les capacités requises et en fournissant la bonne stratégie de données et d’analyse et les bases permettant de gérer tous les défis liés aux données, y compris la mise à l’échelle de l’IA à l’échelle de l’entreprise. Nous nous spécialisons dans les données et les analyses de la stratégie, l’architecture, la gouvernance, la plateforme de D et A moderne, des GMD et de l’ensemble de la chaîne de valeur de D et A (ingestion de données, pipelines de données, Lakehouse, modélisation de l’IA, DO/OR, BI,



déploiement et surveillance.La gestion du rendement et l’expérience numérique sont deux pratiques supplémentaires qui complètent la pratique de DA. En plus des services de conseil, nous offrons des services gérés, de l’éducation et la formation. Vous voulez vous joindre à une équipe gagnante?Le RôleNous sommes à la recherche d’un ingénieur principal des données qui combine l’ingénierie des données, l’architecture des plateformes et l’expertise en gestion. L’ingénieur principal des données :Fournir des services de conseil à nos clients en tant qu’ingénieur responsable des données numériques KPIDéfinir Et Tenir à Jour L’architecture De Plateforme D&A Numérique Moderne KPI. Cette Architecture De Plateforme D&A DoitPrise en charge de l’architecture Lake House en temps réel sur Azure, AWS et GCPFlux de données provenant d’applications et de capteurs commerciaux, Io T, PLC, ScadaTout type de charge de travail à partir de l’API sur Insights, BI, AI ML/DL, NLP, DO/OR,Exécution de modèles ML en temps réel, lots, micro-lots ou sur le bordIngestion de données en lots, micro-lots et streamingTableau de bord en temps réelRespecter les normes de sécurité les plus élevéesÉvolutif, élastique et performantMaintenir ET améliorer les accélérateurs pour accélérer la création de pipelines de données sur les principaux fournisseurs de services infonuagiquesParticiper et soutenir les activités de prévente sur l’intelligence artificielleConstituer une équipe d’ingénierie des données pour répondre à la croissance attendue des clientsCréer du contenu sur l’ingénierie des données (articles, livres blancs, etc.)Prendre la parole lors de conférences et de webinaires visant à promouvoir la marque numérique KPILe Candidat Idéal EstOrientation objectifs et solides compétences en matière de prise de décision et de résolution de problèmesCapacité à constituer une équipe de talents diversifiés pour répondre aux attentes des clients. Cela suppose d’être très impliqué dans le recrutement et la gestion active de tous les ingénieurs en données (encadrement, orientation, évaluation, établissement d’objectifs, examens, etc.)Travailler en étroite collaboration avec le responsable de l’équipe IA, le responsable de la gouvernance des données et le vice-président, D&AUn chef d’équipe, ce qui signifie qu’il/elle assiste non seulement son équipe, mais aussi le candidat/la candidate, et qu’il/elle doit amener son équipe à un niveau d’expertise plus élevéCapacité à concevoir des programmes de formation autour des mandats de conseil pour permettre à son équipe de se développerCommuniquer et expliquer le plan, les modèles et les approches à son équipe et aux autres équipes afin qu’il ne devienne pas un goulot d’étranglementCapacité à communiquer clairement dans les deux langues (français et anglais) et à devenir technique, le cas échéant, et capacité à améliorer le vocabulaire pour les personnes moins techniques, comme les clients, les autres membres de l’équipe, les gestionnaires de projet et ainsi de suiteExcellentes compétences de communication écrite et verbale pour la coordination entre les équipes (français et anglais)Capacité de discerner les aspects fondamentaux et clés pour lesquels il faut « se battre » par rapport aux aspects moins « important» ones. Le candidat idéal est « intelligent dans la rue ».Collaborer avec les parties prenantes de nos clients pour identifier les opportunités de mise à profit de leur plate-forme D&A existante vers un Lake House en temps réel moderneCollaborer avec les différentes équipes fonctionnelles afin de mettre en œuvre l’ensemble des actifs D&A avec un suivi appropriéSe tenir au courant des différents services et tendances des plateformes D&A modernesL’occasion de rejoindre et de développer un réseau professionnel en constante expansion de clients de premier plan et de collègues réputés.Emploi permanent à temps plein (40 heures par semaine)Horaire flexibleHybride (travail à domicile ou au bureau)Salaire concurrentielAssurance collective attrayantePlan d’épargne-retraiteCulture des petites entreprisesUtilisation gratuite du gymnase dans l’immeubleEnvironnement de travail décontracté : sans jeans!#J-18808-Ljbffr

📌 Senior Data Engineer – Ingénieur Des Données (Quebec City)
🏢 KPI Mining Solutions
📍 Quebec City