Position: Azure Data Engineer
Standort: Durham, NC (Hybrid – 3 Tage vor Ort)
Beschäftigungsart: Vollzeit

Überblick:
Wir suchen einen erfahrenen Azure Data Engineer zur Verstärkung unseres Data-Engineering-Teams mit Sitz in Minneapolis, MN. Diese hybride Position erfordert die enge Zusammenarbeit mit funktionsübergreifenden Teams zur Entwicklung skalierbarer Datenpipelines und zur Implementierung zuverlässiger, Azure-basierter Datenlösungen. Der ideale Kandidat verfügt über praktische Erfahrung mit Azure Data Factory, Databricks und Azure Data Lake sowie über fundierte Kenntnisse im Aufbau und in der Optimierung von Echtzeit- und Batch-Datenpipelines.

Hauptaufgaben:

– Entwicklung großskaliger Batch- und Echtzeit-Datenpipelines unter Verwendung von Azure-Technologien
– Entwurf und Implementierung leistungsstarker Datenaufnahmeprozesse aus verschiedenen strukturierten und unstrukturierten Quellen mit Azure Databricks
– Leitung der Erstellung von ETL-Prozessen, Datenintegration und Migrationsstrategien
– Aufbau skalierbarer, wiederverwendbarer Frameworks für Datenaufnahme, -verarbeitung und -transformation
– Zusammenarbeit mit Datenarchitekten, Analysten, Ingenieuren und Geschäftsinteressenten zur Implementierung unternehmensweiter Datenplattformen
– Sicherstellung zuverlässiger, konsistenter und qualitativ hochwertiger End-to-End-Datenpipelines – von der Quelle bis zum Ziel
– Nutzung ereignisgesteuerter und Streaming-Technologien für die Echtzeit-Datenverarbeitung
– Unterstützung verwandter Komponenten wie API-Integrationen und Suchfunktionen
– Bewertung von Tools und Plattformen hinsichtlich ihrer Leistungsfähigkeit und geschäftlichen Eignung

Erforderliche Qualifikationen:

– Fundierte Kenntnisse in Azure Data Factory, Azure Databricks und Azure Data Lake Storage (ADLS)
– Erfahrung mit Azure SQL-Datenbank und Azure Data Warehouse
– Starke praktische Kenntnisse in:
– Aufbau und Optimierung von Azure-Cloud-Datenlösungen
– Performance-Tuning in Databricks
– SQL, T-SQL und/oder PL/SQL
– Vertrautheit mit:
– Azure Storage Accounts
– Azure Data Catalog und Azure Data Analytics
– Logic Apps und Function Apps
– Verständnis von agilen Methoden und Tools wie JIRA
– Bevorzugt: Erfahrung in der Durchführung von End-to-End-Datenaufnahmeprojekten innerhalb des Azure-Ökosystems

Vernetzen Sie sich mit uns auf LinkedIn.