Data Engineer

Department: Tech

Location: Colombia

Employment Type: FullTime

Estamos innovando la logística y esto lo hemos logrado gracias a un equipo de personas visionarias, con ganas de crecer y cambiar el mundo. 

En Skydropx encontrarás un espacio para desarrollar tu carrera dentro de un ambiente laboral dinámico, ambicioso y multicultural.

Responsabilidades:

• Recolectar datos de diversas fuentes, incluyendo bases de datos, archivos CSV y APIs, utilizando herramientas ETL para realizar limpieza y preprocesamiento.

• Data transform: Quitar duplicados, normalizar formatos (fechas, teléfonos, mayúsculas), validar, llenar o descartar nulos, mapear campos y enriquecer los datos para analisis eficiente.

• Diseñar y construir pipelines de datos eficientes utilizando herramientas como Matillion, SQLMesh garantizando la automatización en la recolección, transformación y carga (ETL) de datos.

• Integrar y consumir datos de APIs externas para enriquecer conjuntos de datos y mejorar la calidad de la información.

• Contribuir al diseño de arquitecturas eficientes para el manejo de grandes volúmenes de datos, utilizando tecnologías como BigQuery, Python, SQL.

Requisitos:

• Ingeniería, Actuaría, Matemáticas Aplicadas, Ingeniería Industrial o afín.

• Programación: Experiencia sólida en programación, con especial énfasis en Python. Desarrollo de código eficiente y resolución de problemas complejos. Conocimiento profundo de librerías clave como NumPy, Pandas, Polars y uso avanzado de SQL.

• Datos: Experiencia en la manipulación de datos a gran escala y optimización de consultas tanto en base de datos SQL como en BigQuery.

• Herramientas de ETL (Matillion, SQLMesh): Experiencia en el uso de herramientas como Matillion, SQLMEsh para la construcción y gestión de flujos ETL.

• Experiencia en Bases de Datos: Experiencia demostrable en el manejo de bases de datos, incluyendo la optimización de consultas SQL.

• Conocimiento sobre bases de datos relacionales y no relacionales.

• Conocimiento sobre Datawarehouse, datalake, datavault. BigQuery.

• Experiencia en observabilidad.

• Airflow, git.

• Capacidad para comunicarse con equipos interdisciplinarios.

• Capacidad para priorizar tareas según su impacto y urgencia en entornos dinámicos.

• Criterio para distinguir lo urgente de lo importante y actuar en consecuencia.

• Habilidad para gestionar múltiples prioridades y cumplir plazos ajustados.

Ofrecemos:

• Misión a nivel regional: lograr que los negocios de LATAM se despreocupen de su logística.

• Salario: Competitivo y negociable según experiencia, habilidades y resultados del proceso de contratación.

• Esquema: 100% remoto.

• Horario: Lunes a Viernes 8:00 a 18:00 CST (México).

  • Con flexibilidad de horario cuando haya nuevos releases.

• Crecimiento y desarrollo profesional.

¡Te invitamos a aceptar el reto! Para aplicar en la vacante, postúlate por este medio y estaremos encantados de lograr nuestros objetivos junto a ti.

Si tu perfil hace match con los requerimientos de la vacante, nuestro equipo de reclutamiento estará en contacto contigo.