Puesto: Ingeniero de Datos en Azure
Ubicación: Durham, NC (Híbrido – 3 días en oficina)
Tipo de Empleo: Tiempo Completo
Resumen:
Buscamos un Ingeniero de Datos en Azure con experiencia para unirse a nuestro equipo de ingeniería de datos con sede en Minneapolis, MN. Esta posición híbrida implica trabajar estrechamente con equipos multifuncionales para desarrollar canalizaciones de datos escalables e implementar soluciones de datos confiables basadas en Azure. El candidato ideal tendrá experiencia práctica con Azure Data Factory, Databricks y Azure Data Lake, así como una sólida trayectoria en la construcción y optimización de canalizaciones de datos en tiempo real y por lotes.
Responsabilidades Principales:
– Desarrollar canalizaciones de datos a gran escala, tanto por lotes como en tiempo real, utilizando tecnologías de Azure.
– Diseñar e implementar procesos de ingestión de datos de alto rendimiento desde diversas fuentes estructuradas y no estructuradas usando Azure Databricks.
– Liderar la creación de procesos ETL, integración de datos y estrategias de migración.
– Construir marcos escalables y reutilizables para la ingestión, procesamiento y transformación de datos.
– Colaborar con arquitectos de datos, analistas, ingenieros y partes interesadas del negocio para implementar plataformas de datos a nivel empresarial.
– Asegurar que las canalizaciones de datos de extremo a extremo —desde la fuente hasta el destino— sean confiables, consistentes y de alta calidad.
– Utilizar tecnologías basadas en eventos y procesamiento en flujo para datos en tiempo real.
– Apoyar componentes relacionados como integraciones de API y funcionalidades de búsqueda.
– Evaluar herramientas y plataformas para garantizar que cumplan con los requisitos de rendimiento y del negocio.
Requisitos:
– Dominio de Azure Data Factory, Azure Databricks y Azure Data Lake Storage (ADLS)
– Experiencia con Azure SQL Database y Azure Data Warehouse
– Sólidos conocimientos prácticos en:
– Construcción y optimización de soluciones de datos en la nube de Azure
– Optimización de rendimiento en Databricks
– SQL, T-SQL y/o PL/SQL
– Familiaridad con:
– Cuentas de almacenamiento de Azure
– Azure Data Catalog y Azure Data Analytics
– Logic Apps y Function Apps
– Comprensión de metodologías ágiles y herramientas como JIRA
– Se prefiere experiencia en la gestión de proyectos de ingestión de datos de extremo a extremo dentro del ecosistema de Azure
Conéctate con nosotros en LinkedIn.
To apply for this job, please visit www.jobg8.com