Senior Data Engineer

Responsabilidades Principales

• Actuar como el responsable técnico de los pipelines de ingesta en modalidad Batch y Streaming (CDC)

• Configurar servicios nativos de GCP, incluyendo Datastream, Dataflow, Data Fusion y Pub/Sub entre otros

• Experiencia en la implementación de soluciones de Master Data Management.

• Implementar y asegurar la conectividad y extracción de datos masivos desde bases de datos

• Realizar la orquestación de procesos de datos

• Ejecutar actividades de calidad de datos, Data Profiling y procesos automáticos de conciliación entre los orígenes y destinos

• Definir y garantizar el cumplimiento de los estándares de código y el versionamiento dentro del proyecto.

• Realizar pruebas unitarias e integrales de la solución

• Crear documentación técnica de la solución

• Trabajar de la mano del equipo de proyecto en el análisis y diseño de la solución.

• Participar activamente durante las fases de prueba y despliegue de la solución.

• Experiencia en proyectos de banca y finanzas

Requisitos y Conocimientos Técnicos

• Experiencia avanzada en el ecosistema de Google Cloud Platform (GCP).

• Dominio en herramientas de replicación e integración de datos como Cloud Datastream y Cloud Data Fusion.

• Experiencia en el procesamiento masivo de datos mediante Cloud Dataflow (Apache Beam) y Google Cloud Pub/Sub (eventos)

• Experiencia en la implementación de capas de gobierno de datos (linaje, gestión de metadatos) usando Dataplex (Knowledge Catalog).

• Experiencia en el uso de BigQuery y herramientas de orquestación de transformaciones SQL como Dataform.

• Experiencia en el uso de Cloud SQL para el consumo de datos.

• Conocimiento en bases de datos relacionales tradicionales y conectividad JDBC/ODBC, específicamente con Informix.

• Contar con certificaciones oficiales como Google Cloud Certified – Professional Data Engineer o Associate Cloud Engineer.

• Experiencia en la implementación en ambientes productivos usando Git y Terraform.

• Experiencia en proyectos de integración de datos, con preferencia en proyectos de Master Data Management (MDM)

Experiencia al menos 5 años trabajando con GCP en:

• Proyectos relacionados a Master Data Management, creación de Data Lakehouse y Data Warehouse y repositorios optimizados para analítica.

• Manejo de bases de datos relacionales

• Optimización de código para integración de datos

• Implementaciones en ambientes productivos de soluciones de datos

• Diseño de arquitectura de datos de extremo a extremo en GCP