Compass UOL logo

Databricks Data Engineer | Senior (Remote)

Compass UOL
7 days ago
Remote
Brazil
Automation
Description

.


Responsibilities
  • Sustentar, organizar e evoluir as estruturas de dados da plataforma de Segurança e Fraude;
  • Desenvolver integrações e pipelines de dados utilizando Python e PySpark em ambiente Databricks;
  • Atuar em parceria com áreas de negócio, traduzindo demandas em consultas SQL confiáveis para a plataforma promocional;
  • Manter e dar suporte a estruturas legadas (ODI e Teradata);
  • Garantir a qualidade, governança e segurança dos dados, com postura proativa na identificação e resolução de inconsistências.

Prerequisites
  • Experiência com SQL avançado para análise e disponibilização de dados;
  • Experiência sólida com Databricks (Delta Lake, notebooks, jobs e otimização de performance);
  • Domínio em Python e PySpark para construção de pipelines de dados;
  • Conhecimento em modelagem de dados (dimensional, relacional);
  • Vivência com práticas de MLOps (versionamento, deploy, monitoramento e governança de modelos);
  • Conhecimento em arquitetura de dados e boas práticas (qualidade, linhagem e observabilidade);
  • Experiência com ambientes legados (Teradata, ODI);
  • Diferencial: Experiência em projetos de prevenção/detecção de fraude.