INGENIERO DATOS

Temporal
Axity


Formación • Profesional en Ingeniería de Sistemas o afines • 2 años de experiencia en proyectos de ingeniería de datos • Certificaciones en Analítica de datos (deseable) • Certificaciones en Databricks (deseable) • Manejo de lenguajes SQL y Python (requerido) • Conocimiento Azure (requerido) Experiencia en: ·Experiencia en integración y modelado de datos en tecnologías Azure (Datafactory, Databricks,y Datalake) ·Diseño y desarrollo de procesos de integración de datos con componentes en Azure, Databricks. ·Diseño y desarrollo de Bodegas de datos y Lagos de datos. ·Administración de herramientas de integración de datos Azure Data Factory, Databricks. ·Diseño y Modelado de Reportes en Power BI. ·Manejo de pruebas de despliegues en diferentes entornos (DevOps). ·Manejo de PySpark para la optimización y procesamiento eficiente de grandes Funciones: • Participar en la modelación de datos y optimización de cargas. ·Diseñar e implementar pipelines de datos escalables usando Azure Data Factory . ·Desarrollar notebooks y jobs en Azure Databricks para procesamiento de datos con Apache Spark . ·Integrar múltiples fuentes de datos estructuradas y no estructuradas. ·Documentar procesos y proponer mejoras continuas en los flujos de datos. • Desarrollo de proceso de integración de datos On-premise o Cloud. • Identificar y evaluar de procesos candidatos para automatización. • Diseñar, desarrollar y probar procesos de integración de datos. • Asegurar la calidad de la integración de datos • Diseño e implementación de Modelos de datos Conocimiento en Tecnologías Azure Data Factory (ADF). Azure Databricks. Azure Synapse Analytics (deseable) Azure Blob Storage / Data Lake Gen2. CI/CD con Azure DevOps. Python, SQL, PySpark. En este espacio describir las especificaciones para la búsqueda

trabajosonline.net © 2017–2021
Más información