12 sep
|
Accenture
|
Santiago
12 sep
Accenture
Santiago
Databricks Senior Architect / Technical Lead
Buscamos un Databricks Senior Architect / Technical Lead para liderar técnica y arquitectónicamente un proyecto de Data & Analytics sobre Databricks. Será responsable de definir la arquitectura, liderar la construcción de pipelines, establecer buenas prácticas de ingeniería, gobierno y calidad de datos, y liderar técnicamente al equipo frente al cliente.
Responsabilidades
Arquitectura & Databricks
* Diseñar y gobernar arquitectura Lakehouse / Medallion (Bronze, Silver, Gold).
* Definir patrones de ingesta, transformación, batch/streaming y CDC.
* Diseñar y gobernar Unity Catalog: Catalogs, Schemas, permisos, roles, ownership, lineage y governance.
* Definir estándares de desarrollo, seguridad, performance, escalabilidad y optimización de costos.
* Definir estrategia Dev/QA/Prod y CI/CD.
Lakeflow & Data Engineering
* Diseñar, implementar y gobernar pipelines utilizando Databricks Lakeflow Pipelines / Lakeflow Declarative Pipelines.
* Definir patrones reutilizables para pipelines Bronze/Silver/Gold.
* Implementar procesamiento incremental, CDC, batch y streaming.
* Definir orquestación, dependencias, monitoreo, alertas, logging y error handling.
* Revisar diseños y código, asegurando estándares de calidad y performance.
* Experiencia con PySpark, SQL y Delta Lake.
Data Quality & Governance
* Definir estrategia de Data Quality para las diferentes capas.
* Implementar reglas, validaciones y controles dentro de los pipelines.
* Diseñar mecanismos de quarantine/rechazo y tratamiento de errores.
* Asegurar metadata, lineage, ownership, seguridad y gobierno de datos.
Integraciones
* Diseñar y liderar integración entre Databricks y Salesforce.
* Experiencia con Salesforce APIs, REST, SOAP y/o Bulk API.
* Diseñar cargas incrementales/CDC, manejo de errores y monitoreo.
* Experiencia con otras fuentes empresariales es deseable.
Liderazgo
* Liderar técnicamente un equipo de Data Engineers.
* Asignar y priorizar actividades
📌 Data Architect (Santiago)
🏢 Accenture
📍 Santiago