Ingénieur de données

Partenaire technologique des grandes entreprises depuis 1979, le Groupe SII est au cœur de l'économie de l'innovation avec collaborateurs, une présence internationale dans 20 pays, et un chiffre d'affaires supérieur à 1.621 milliards de dollars canadiens.

SII Canada offre à ses clients une expertise technique avancée dans les domaines du développement applicatif, Web et Mobile, de la Cybersécurité et du Cloud. Nous intervenons également en Ingénierie, particulièrement sur les systèmes embarqués dans divers secteurs industriels. Notre ambition : faire évoluer les systèmes d'information et contribuer à la création des produits et services de demain pour nos clients.

D'autre part, l'inclusion est au cœur de notre culture d'entreprise. SII Canada s'engage à offrir un environnement de travail équitable et respectueux, favorisant la diversité des profils et l'égalité des chances.

Description :
Responsabilités principales :
Nous recherchons un ingénieur plateforme de données hautement qualifié et motivé pour rejoindre notre équipe. Ce poste consiste à administrer et à améliorer notre plateforme de données d'entreprise, y compris les entrepôts de données (DWH) et les lacs de données, afin de garantir des performances et une évolutivité optimales. Le candidat idéal aura une grande expérience de Terraform et de solides connaissances dans diverses technologies de données.

Responsabilités :

• Administrer et améliorer la plateforme de données d'entreprise, y compris les entrepôts de données (DWH) et les lacs de données, en garantissant des performances et une évolutivité optimales.
• Concevoir, mettre en œuvre et maintenir une architecture de pipeline de données robuste et fiable pour répondre aux besoins de l'entreprise, en utilisant SQL et des technologies de mégadonnées telles que Hadoop, Spark et Kafka.
• Mettre en place et superviser une infrastructure permettant l'extraction, la transformation et le chargement (ETL) efficaces des données provenant de diverses sources, en veillant au respect des meilleures pratiques et des normes.
• Mettre en œuvre des pratiques DevOps pour l'intégration et le déploiement continus (CICD) des systèmes de données, afin d'améliorer l'agilité et l'efficacité.
• Intégrer et gérer les données provenant de multiples sources, y compris les données externes et IoT, en veillant à ce que les données constituent un atout précieux pour l'entreprise.
• Créer et maintenir des solutions de données backend pour les analystes et les scientifiques des données, facilitant ainsi l'analyse approfondie des données et la prise de décision.
• Identifier et mettre en œuvre des améliorations de processus, telles que l'automatisation des tâches manuelles et l'optimisation de la livraison des données, afin d'améliorer l'efficacité et l'évolutivité.
• Collaborer avec les parties prenantes, notamment les équipes produit, les experts en données et les architectes, afin de résoudre les problèmes techniques et de répondre aux besoins en matière d'infrastructure de données.
• Veiller au respect des normes d'architecture et de sécurité des données, en garantissant la protection et la confidentialité des données.
• Mettre en place des systèmes d'observabilité et de surveillance pour suivre la fiabilité du pipeline de données et fournir un soutien opérationnel rapide en cas d'incident.
• Travailler avec les équipes de direction, CX, conception et développement pour répondre aux besoins techniques liés aux données et proposer des idées innovantes pour les produits liés aux données et à l'IA.
• Inspirer et motiver ses collègues en partageant ses connaissances, en contribuant à un environnement de travail collaboratif et en promouvant un état d'esprit agile.
• Restez au fait des tendances et des avancées du secteur, en suggérant des idées innovantes et des améliorations pour les stratégies de données et les processus de livraison.

Qualifications :

• Licence en informatique, ingénierie ou dans un domaine connexe. Un master est un plus.
• Au moins 6 ans d'expérience dans le secteur, dans les domaines des données, du codage et des scripts (Python, Java, Scala, SQL, JavaScript, Bash), de la conception et des tests.
• Solides connaissances des principes fondamentaux de l'informatique en matière d'algorithmes et de structures de données.
• Solide expérience avec Terraform.
• Expérience dans le soutien et la collaboration avec des équipes interfonctionnelles dans un environnement dynamique.
• Expérience avec les outils de big data : Hadoop, Spark, Kafka.
• Expérience avec les bases de données relationnelles SQL et NoSQL, notamment SQL Server, PostgreSQL et CosmosDB.
• Expérience avec les outils automatisés de gestion des pipelines de données et des flux de travail : DevOps, ARM, Azure Data Factory, Airflow.
• Expérience avec les services cloud Microsoft : Azure, Databricks, Fabric, Purview.
• Expérience avec les systèmes de traitement de flux : Storm, Spark-Streaming.
• Connaissance de Kubernetes pour l'orchestration de conteneurs.
• Maîtrise de Power BI pour la visualisation des données et la création de rapports.
• Rejoignez le moteur qui transforme l'entreprise et ouvre de nouvelles perspectives de croissance grâce à des innovations numériques qui accompagnent nos clients vers le succès.

Description:
Key Responsibilities:
We are seeking a highly skilled and motivated Data Platform Engineer to join our team. This role involves administering and enhancing our enterprise data platform, including Data Warehouses (DWH) and Data Lakes, ensuring optimal performance and scalability. The ideal candidate will have extensive experience with Terraform and a strong background in various data technologies.

Responsibilities:

• Administer and enhance the enterprise data platform, including Data Warehouses (DWH) and Data Lakes, ensuring optimal performance and scalability.
• Design, implement, and maintain robust and reliable data pipeline architecture to meet business needs, utilizing SQL and big data technologies such as Hadoop, Spark, and Kafka.
• Establish and oversee infrastructure for efficient extraction, transformation, and loading (ETL) of data from diverse sources, ensuring adherence to best practices and standards.
• Implement DevOps practices for continuous integration and continuous deployment (CICD) of data systems, enhancing agility and efficiency.
• Integrate and manage data from multiple sources, including external and IoT data, ensuring data is a valuable enterprise asset.
• Create and maintain backend data solutions for analysts and data scientists, facilitating insightful data analysis and decision-making.
• Identify and implement process enhancements, such as automating manual tasks and optimizing data delivery, to improve efficiency and scalability.
• Partner with stakeholders, including product teams, data experts, and architects, to resolve technical issues and support data infrastructure needs.
• Ensure compliance with data architecture and security standards, maintaining data protection and privacy.
• Set up observability and monitoring systems to track data pipeline reliability and provide prompt operational support in case of incidents.
• Work with executive, CX, design, and development teams to support data-related technical needs and propose innovative ideas for data and AI products.
• Inspire and motivate colleagues by sharing knowledge, contributing to a collaborative work environment, and promoting an Agile mindset.
• Stay connected with industry trends and advancements, suggesting innovative ideas and improvements for data strategies and delivery processes.

Qualifications:

• Bachelor's degree in Computer Science, Engineering, or related field. A Master's is a plus.
• A minimum of 6 years industry experience working with data, coding, and scripting (Python, Java, Scala, SQL, JavaScript, Bash), design, and testing.
• Solid knowledge of CS fundamentals in algorithms and data structures.
• Strong experience with Terraform.
• Experience supporting and working with cross-functional teams in a dynamic environment.
• Experience with big data tools: Hadoop, Spark, Kafka.
• Experience with relational SQL and NoSQL databases, including SQL Server, PostgreSQL, and CosmosDB.
• Experience with automated data pipeline and workflow management tools: DevOps, ARM, Azure Data Factory, Airflow.
• Experience with Microsoft cloud services: Azure, Databricks, Fabric, Purview
• Experience with stream-processing systems: Storm, Spark-Streaming.
• Familiarity with Kubernetes for container orchestration.
• Proficiency in Power BI for data visualization and reporting.
• Join the engine that is changing the company, pointing towards the next horizon of growth through digital innovations to support our customers in their success.