Ingeniero de datos Sr-GCP
- Hiring from
- Mexico
- Work type
- Hybrid
- Posted
Show job descriptionHide job description
Responsabilidades Principales
Actuar como el responsable técnico de los pipelines de ingesta en modalidad Batch y Streaming (CDC)
Configurar servicios nativos de GCP, incluyendo Datastream, Dataflow, Data Fusion y Pub/Sub entre otros
Experiencia en la implementación de soluciones de Master Data Management.
Implementar y asegurar la conectividad y extracción de datos masivos desde bases de datos
Realizar la orquestación de procesos de datos
Ejecutar actividades de calidad de datos, Data Profiling y procesos automáticos de conciliación entre los orígenes y destinos
Definir y garantizar el cumplimiento de los estándares de código y el versionamiento dentro del proyecto.
Realizar pruebas unitarias e integrales de la solución
Crear documentación técnica de la solución
Trabajar de la mano del equipo de proyecto en el análisis y diseño de la solución.
Participar activamente durante las fases de prueba y despliegue de la solución.
Experiencia en proyectos de banca y finanzas
Requisitos y Conocimientos Técnicos
Experiencia avanzada en el ecosistema de Google Cloud Platform (GCP).
Dominio en herramientas de replicación e integración de datos como Cloud Datastream y Cloud Data Fusion.
Experiencia en el procesamiento masivo de datos mediante Cloud Dataflow (Apache Beam) y Google Cloud Pub/Sub (eventos)
Experiencia en la implementación de capas de gobierno de datos (linaje, gestión de metadatos) usando Dataplex (Knowledge Catalog).
Experiencia en el uso de BigQuery y herramientas de orquestación de transformaciones SQL como Dataform.
Experiencia en el uso de Cloud SQL para el consumo de datos.
Conocimiento en bases de datos relacionales tradicionales y conectividad JDBC/ODBC, específicamente con Informix.
Contar con certificaciones oficiales como Google Cloud Certified – Professional Data Engineer o Associate Cloud Engineer.
Experiencia en la implementación en ambientes productivos usando Git y Terraform.
Experiencia en proyectos de integración de datos, con preferencia en proyectos de Master Data Management (MDM)
Experiencia al menos 5 años trabajando con GCP en:
Proyectos relacionados a Master Data Management, creación de Data Lakehouse y Data Warehouse y repositorios optimizados para analítica.
Manejo de bases de datos relacionales
Optimización de código para integración de datos
Implementaciones en ambientes productivos de soluciones de datos
Diseño de arquitectura de datos de extremo a extremo en GCP