Poste : Ingénieur Données Azure
Lieu : Durham, NC (Hybride – 3 jours sur site)
Type de contrat : Temps plein

Aperçu :
Nous recherchons un Ingénieur Données Azure expérimenté pour rejoindre notre équipe d’ingénierie des données basée à Minneapolis, MN. Ce poste hybride implique une collaboration étroite avec des équipes interfonctionnelles afin de développer des pipelines de données évolutifs et de mettre en œuvre des solutions de données fiables basées sur Azure. Le candidat idéal possède une expérience pratique avec Azure Data Factory, Databricks et Azure Data Lake, ainsi qu’une solide expertise dans la création et l’optimisation de pipelines de données en temps réel et par lots.

Responsabilités principales :

– Développer des pipelines de données à grande échelle, en temps réel et par lots, à l’aide des technologies Azure.
– Concevoir et mettre en œuvre des processus d’ingestion de données performants à partir de sources structurées et non structurées via Azure Databricks.
– Diriger la création de processus ETL, ainsi que les stratégies d’intégration et de migration des données.
– Construire des cadres évolutifs et réutilisables pour l’ingestion, le traitement et la transformation des données.
– Collaborer avec les architectes de données, analystes, ingénieurs et parties prenantes métier pour mettre en place des plateformes de données à l’échelle de l’entreprise.
– Garantir la fiabilité, la cohérence et la qualité des pipelines de données de bout en bout, de la source à la destination.
– Utiliser des technologies événementielles et de streaming pour le traitement des données en temps réel.
– Assurer le support des composants associés tels que l’intégration d’API et les fonctionnalités de recherche.
– Évaluer les outils et plateformes afin de s’assurer qu’ils répondent aux exigences de performance et aux besoins métier.

Qualifications requises :

– Maîtrise d’Azure Data Factory, Azure Databricks et Azure Data Lake Storage (ADLS)
– Expérience avec Azure SQL Database et Azure Data Warehouse
– Solide connaissance pratique dans :
– La création et l’optimisation de solutions de données sur le cloud Azure
– L’optimisation des performances dans Databricks
– SQL, T-SQL et/ou PL/SQL
– Familiarité avec :
– Les comptes de stockage Azure
– Azure Data Catalog et Azure Data Analytics
– Logic Apps et Function Apps
– Compréhension des méthodologies Agile et des outils tels que JIRA
– Expérience souhaitée dans la gestion de projets d’ingestion de données de bout en bout dans l’écosystème Azure

Connectez-vous avec nous sur LinkedIn.