Consultant(e) en ingénierie de données - Microsoft Fabric

Contexte:

Dans ce mandat, vous serez appelé(e) à jouer le rôle de développeur en ingénierie des

données au sein de l'équipe Plateforme BI & Analytique. Vous travaillerez en étroite

collaboration avec nos experts analytiques, et aussi avec les architectes et experts

d'autres plateformes technologiques, afin de déployer des flux de données en respectant

les meilleurs pratiques d'analyse et de développement.

Vous jouerez un rôle actif dans la conception et la mise en place de pipelines de

transformation de données volumineuses, en particulier sur les environnements Azure

Databricks Microsoft Fabric, permettant de créer les flux de données efficaces requis par

divers modèles de données analytiques dans une grande variété de domaines au sein de

l'entreprise.

À quoi ressemblera vos journées en tant que consultant(e) en ingénierie de données:

Les responsabilités du mandat incluent :

∙Vous concevrez et développerez des pipelines de données évolutifs et efficaces

sur Databricks, en utilisant SQL, Spark, Python et Scala pour extraire et déplacer

des données à partir de multiples sources de données au sein de l'organisation

∙Concevoir, écrire et déployer des pipelines de données à haut volume pour

ingérer, transformer et stocker les données qui seront utilisées dans nos modèles

analytiques

∙Traduire des spécifications analytiques en script en utilisant des Notebooks dans

Azure Databricks et les interfaces avec Microsoft Fabric

∙Vous réaliserez les tests techniques et fonctionnels des flux de données

développés

∙Vous serez également en charge de réaliser la documentation technique des

développements

RequirementsSavoir-faire:

Voici les habiletés techniques que vous aurez à appliquer au quotidien dans notre cadre

professionnel:

∙Expérience réussie dans l’implémentation de pipelines de données entre

Databricks et Microsoft Fabric

∙Vous maîtrisez le développement via NoteBook pour la transformation de

données avec Microsoft Azure DataBricks

∙Vous avez une solide maîtrise des langages de programmation et des outils

couramment utilisés en ingénierie des données, tels que SQL, Python, Apache

Spark et Scala (atout)

∙Une solide expérience de travail de conception et d’optimisation de pipelines de

données sur de grands volumes de données

∙Vous maîtrisez les concepts ETL et les meilleures pratiques de développement,

ainsi qu’une expérience avec Apache NiFi

∙En contexte de livraison et de mise en production itérative, participer à

l’implantation des solutions retenues et priorisées

∙Respecter les règles fonctionnelles et techniques ainsi que les normes de

conception et de livraison de solutions analytiques par l'équipe Plateforme

∙Contribuer efficacement au maintien d'une documentation complète des

processus, des schémas de données et des flux de données

∙Connaissance des principes de la méthode Agile, Jira et Confluence

Savoir-être:

Voici les qualités personnelles et comportementales que vous aurez à démontrer au

quotidien dans notre cadre professionnel:

∙Grande capacité de proposer des solutions technologiques optimales dans le

contexte de grands volumes de données

∙Écoute et capacité de comprendre les enjeux techniques

∙Excellentes aptitudes pour la gestion du temps et l’organisation, et capacité à

gérer des priorités concurrentes pour respecter les échéanciers

∙Grand souci du détail et du travail/service de qualité

∙Faire preuve d'autonomie, d’initiative et d’innovation

∙Fortes aptitudes pour le travail d’équipe

∙Habiletés pour les relations interpersonnelles, la communication et la pédagogie 

Engineering science