Este rol es fundamental para garantizar el éxito en proyectos de integración de sistemas OT-DMZ-IT. La persona seleccionada asumirá la responsabilidad de diseñar, optimizar y escalar la extracción, flujo y canalización de datos provenientes de entornos industriales (OT/FMS). Su objetivo principal será conectar de manera segura y productivo la capa de planta con el Data Lake corporativo, aprovechando las capacidades del stack tecnológico basado en Azure y Databricks para asegurar la disponibilidad, calidad y gobernanza de la información en tiempo real y diferido.
?️ En el día a día
Pipelines de datos: diseñar, construir y optimizar flujos de ingesta y orquestación en la nube (ADF / Databricks) desde sistemas industriales hacia el Data Lake. Integración de nuevas fuentes: incorporar nuevos orígenes de datos al Lakehouse corporativo, evaluando restricciones de conectividad y ciberseguridad entre OT, DMZ e IT. Transformación de datos: construir lógica de limpieza y procesamiento masivo con PySpark, Spark SQL, Delta Lake y DLT. Calidad del dato: auditar,
monitorear y asegurar la consistencia del dato a lo largo de toda la solución. Gobernanza y seguridad: aplicar políticas de control de acceso (Unity Catalog) y gestionar credenciales (Azure Key Vault). Optimización: afinar consultas y consumo de recursos en clústeres y bases de datos relacionales/no relacionales. CI/CD: versionar código (Git/GitHub) e implementar despliegue continuo con Azure DevOps y DABs. Gestión de riesgos: identificar y mitigar riesgos que afecten la continuidad de la ingesta, documentando el traspaso a Continuidad Operacional.
? Lo que necesita saber hacer
Lenguajes y procesamiento de datos
Python y SQL a nivel avanzado
Procesamiento distribuido a gran escala con Apache Spark y PySpark
Databricks & Arquitectura Lakehouse
Patrón Medallón (Bronze / Silver / Gold)
Workflows, Delta Lake, Databricks Asset Bundles (DABs), Autoloader Unity Catalog (gobernanza de datos) y Delta Live Ta
📌 Ingeniero/a de Datos Ot Dmz IT (Santiago)
🏢 2Brains
📍 Santiago
Postulate a este anuncio
Muestra tus habilidades a la empresa, rellenar el formulario y deja un toque personal en la carta, ayudará el reclutador en la elección del candidato.