Ingénieur de données/Ingénieure de données

4 weeks ago


Ontario, Canada FX Innovation Full time

Field Data Engineer - Legacy data sources to GCP migration-

Specific projects: Assist with data transfers from legacy sources to GCP using Dataflow/Airflow/Apache Beam either batch or streaming.

Localisation : Ontario

Hybrid role . Present in the office 3 days a week. Tuesday, Wednesday and Thursday. Remote Monday and Friday.

Tâches :

Responsible for developing and maintaining software applications in a cloud-based environment. They design, develop, test, and deploy cloud-based applications that meet the needs of customers and stakeholders. They also collaborate with other engineers and stakeholders to ensure that applications are scalable, secure, and reliable.

Skillset required :

Hands-on experience with data integration tools and technologies such as Google Dataflow, AirFlow, Apache Beam, or equivalent.

  • Deploy and manage Big Data solutions on GCP, both batch and real-time.
  • Use GCP's infrastructure-as-code tools, particularly Terraform, to provision and configure cloud resources.
  • Collaborate with the data engineering team to integrate data pipeline code into CI/CD processes (GITLAB).
  • Knowledge of networking components (VPC, subnets, firewall rules) for secure communication.
  • Strong programming skills in Python.

Locations - Toronto – Adelaide (co-located with the rest of the team)./

Anglophone

Looking for a contractor to assist with data transfers from legacy sources to GCP using Dataflow/Airflow/Apache Beam either batch or streaming.

Top 3 skills sets:

  • Hands-on experience with data integration tools and technologies such as Google Dataflow, AirFlow, Apache Beam, or equivalent.
  • Deploy and manage Big Data solutions on GCP, both batch and real-time. Use GCP's infrastructure-as-code tools, particularly Terraform, to provision and configure cloud resources.
  • Collaborate with the data engineering team to integrate data pipeline code into CI/CD processes (GITLAB). Knowledge of networking components (VPC, subnets, firewall rules) for secure communication. Strong programming skills in Python./

Interview process:

- 1st interview : Virtual.

- 2nd interview : in person if required.

Behavioral + technical questions for approx. 1h in total./



  • Ontario, Canada GreenFirst Forest Products Full time

    Position: Electrical/Instrumentation Engineer/Technologist We have a deep connection to Canada’s forest lands and sustainability. GreenFirst is looking for an Engineer/Technologist to provide electrical/instrumentation Engineering and Maintenance support, develop/improve preventative and predictive maintenance programs, troubleshoot operational problems,...


  • Ontario, Canada Collage HR Full time

    Data management designations (ex. Titre du poste : Gestionnaire principal(e), Données Service : Données Renseignements sur le poste Joignez-vous à l'équipe de l'AFMC, où les innovations en matière d'éducation médicale se conjuguent à un environnement de travail souple et stimulant! Enfin, l'innovation nous fait avancer. Nous sommes fiers...


  • Ontario, Canada CSEPR Full time

    - Vous êtes à la recherche d'une carrière enrichissante ?- Vous aimez vous amuser ?- Êtes-vous créatif, passionné et attentionné ? Si oui, c'est le poste que vous recherchez ! Les maisons de soins Résidence Pinecrest recherchent actuellement un(e) coordinateur(trice) RAI (temps plein) attentionné(e), passionné(e) et enthousiaste pour...


  • Ontario, Canada Mairie de Paris Full time

    La Police Municipale Parisienne est une police de proximité qui assure la sécurité et le bien-être des Parisiens au quotidien. Elle travaille 24h/24 et 7j/7 pour sécuriser et apaiser les quartiers et veiller au respect du partage de l’espace public. La Ville de Paris recrute 40 Chefs de service de Police Municipale (F/H). Vos missions : En tant que...


  • Ontario, Canada Assemblée de la francophonie de l’Ontario Full time

    Directrice / Directeur des services aux adultes et à la communauté S'agit-il d'un emploi pour étudiant et/ou jeune ? Vous voulez contribuer à la communauté francophone et francophile du comté de Simcoe ? En offrant des journées de congé supplémentaires, une gamme complète d’avantages sociaux (santé, dentaire, etc.), des occasions de grandir et...


  • Ontario, Canada NexGedia Enterprise Full time

    Titre : Expert Cyber-Sécurité Date début : 21 août 2023 Temp-to-Perm : Souhaitable Lieu : Télétravail: Hybride - Environ 1fois/semaine au bureau pour le moment mais pourrait aller jusqu'à 40% du temps à la demande de la direction Français courant - Anglais professionnel En tant qu’expert Cyber-Sécurité dans le domaine SASE/DLP, tu seras...


  • Ontario, Canada Assemblée de la francophonie de l’Ontario Full time

    Coordonnatrice / Coordonnateur du service de formation aux adultes La Clé Salaire: 23,08 $ à 28,57 $ l’heure S'agit-il d'un emploi pour étudiant et/ou jeune ? Non Date limite pour postuler: 2024-02-23 Description du poste: Vous voulez faire partie d’un organisme qui mise sur votre bien-être ? Vous voulez contribuer à la communauté...


  • Ontario, Canada Assemblée de la francophonie de l’Ontario Full time

    Coordonnatrice / Coordonnateur de la radio CFRH 88,1-106,7 La Clé Salaire: 23,08 $ à 28,57 $ l’heure (plus 20 % de commissions sur les ventes locales) S'agit-il d'un emploi pour étudiant et/ou jeune ? Non Date limite pour postuler: 2024-02-23 Description du poste: Vous voulez faire partie d’un organisme qui mise sur votre bien-être ?...


  • Ontario, Canada Bombardier Transportation GmbH Full time

    Utilisation des témoins Bombardier utilise des témoins pour optimiser votre expérience sur ce site et pour vous offrir des services et des communications adaptés à vos intérêts. Vous pouvez soit accepter tous les témoins (préférences, statistiques et marketing) en cliquant sur " Accepter tous les témoins ", soit rejeter tous les témoins en...


  • Ontario, Canada Assemblée de la francophonie de l’Ontario Full time

    Directrice / Directeur des services aux adultes et à la communauté La Clé Salaire: 60 000 $ à 70 000 $ S'agit-il d'un emploi pour étudiant et/ou jeune ? Non Date limite pour postuler: 2024-02-23 Description du poste: Vous voulez faire partie d’un organisme qui mise sur votre bien-être ? Vous voulez contribuer à la communauté...

  • Expert Cyber-Scurit

    4 weeks ago


    Ontario, Canada NexGedia Enterprise Full time

    Titre : Expert Cyber-Sécurité Date début : 21 août 2023 Durée : 12 mois Prolongation : Oui Temp-to-Perm : Souhaitable Lieu : Télétravail: Hybride - Environ 1fois/semaine au bureau pour le moment mais pourrait aller jusqu'à 40% du temps à la demande de la direction Bilinguisme : Oui. Français courant - Anglais professionnel Description ...


  • Ontario, Canada Sun Life Financial Full time

    You'll work with dynamic colleagues - experts in their fields - who are eager to share their knowledge with you. Your leaders will inspire and help you reach your potential and soar to new heights. Discover how you can make a difference in the lives of individuals, families and communities around the world. As a SQL Server DBA within Data Management...


  • Ontario, Canada Lululemon Athletica Full time

    En établissant des standards élevés en matière de tissus techniques et de design fonctionnel, nous créons des produits et des expériences qui aident les gens à bouger, à croître, à tisser des liens et à se sentir bien. Le gérant adjoint responsable de l’expérience-invité joue un rôle primordial dans l’équipe de gestion du magasin : il...


  • Ontario, Canada CSEPR Full time

    HSE) est un élément crucial de notre culture axée sur la sécurité ici chez Sega. Notre coordonnateur HSE sera chargé de comprendre et de réviser les politiques et protocoles de santé et de sécurité, de maintenir et d'améliorer continuellement nos opérations quotidiennes de santé et de sécurité, soumission de la documentation SST, de...


  • Ontario, Canada Red Label Vacations Full time

    Bilingual Human Resources Specialist - Etobicoke, Canada - Red Label Vacations Description **Position**: Bilingual HR Specialist **Status**:Permanent, Full-Time **Department**: Human Resources **Reports to**: HR Business Partner **Location**: Hybrid **The Opportunity** The Bilingual HR Specialist will play a vital role in overseeing the day-to-day Human...


  • Ontario, Canada Zurich Insurance Company Ltd. Full time

    L’occasion   Êtes-vous à la recherche d’un milieu de travail à dimension humaine, collaboratif et axé sur les valeurs avec des collègues et des dirigeants inspirants ? Avez-vous l’ambition et le désir d’être le meilleur et de vous épanouir chez l’assureur le plus influent au monde ? Ne cherchez pas plus loin. Si vous avez de...


  • Ontario, Canada University of Sudbury Université de Sudbury Full time

    Poste à combler : rédacteurs/rédactrices de coursDate d’entrée en fonction : 8 juin 2024Durée : contrat à durée déterminée (fin : 20 décembre 2024)Catégorie : non syndiquéLieu de travail : télétravail possible, selon les politiques en vigueurRémunération : 13 537 $ par coursÉchéance pour postuler : 19 mai 2024SommaireEn...


  • Ontario, Canada University of Sudbury Université de Sudbury Full time

    Poste à combler : rédacteurs/rédactrices de cours Date d’entrée en fonction : 8 juin 2024 Durée : contrat à durée déterminée (fin : 20 décembre 2024) Catégorie : non syndiqué Lieu de travail : télétravail possible, selon les politiques en vigueur Rémunération : 13 537 $ par cours Échéance pour postuler : 19 mai...


  • Toronto, Ontario, Ontario, Canada Canada Media Fund | Fonds des médias du Canada Full time

    (English version follows)Responsable de la recherche, Prospective et innovationVous vous passionnez pour les médias numériques et la télévision, ainsi que leur écosystème? Vous avez une curiosité innée, en particulier en ce qui concerne l'innovation et les tendances à venir? Vous adorez faire de la recherche et recueillir des données sur des...


  • Ontario, Canada Lululemon Athletica Full time

    lululemon est une entreprise innovante de vêtements performants pour le yoga, la course à pied, l’entraînement et d’autres activités sportives. En établissant des standards élevés en matière de tissus techniques et de design fonctionnel, nous créons des produits et des expériences qui aident les gens à bouger, à croître, à tisser des liens...