Databricks Lakehouse Analytics Engineer | Sênior (Remote)

Mapear e inventariar os consumidores do DW legado (BI, relatórios, aplicações e integrações sistêmicas), classificando por domínio e criticidade;
Modelar os marts de consumo por domínio na camada gold, derivados da silver, seguindo o template medalhão e os contratos de dados;
Executar o reapontamento de dashboards, relatórios, aplicações e integrações sistêmicas para a gold, wave a wave, coordenado com o cutover por domínio;
Validar a paridade de consumo entre legado e gold e suportar a desativação dos pontos de consumo legados;
Contribuir com a priorização das waves junto ao Product Owner e ao Arquiteto de Dados.

Analytics Engineering: experiência sólida em camada de consumo — modelagem dimensional/marts, camada semântica e métricas certificadas;
Databricks: Spark SQL em produção, Delta Lake e arquitetura medalhão (bronze, silver, gold);
Reapontamento de BI (Power BI, Tableau ou similar): troca de fontes, refatoração de datasets e validação de paridade de números;
Integrações sistêmicas de dados: APIs, extrações batch e cargas entre sistemas, incluindo contratos de interface e planos de rollback;
SQL avançado: técnicas de reconciliação e comparação de bases em escala;
Modelagem dimensional (Kimball/star schema) e boas práticas de marts por domínio;
Data Contracts e Data Quality (expectations, DQ gates) aplicados à camada de consumo;

Requisitos Desejáveis

Experiência em migração de DW com coexistência legado/novo, cutover por ondas e reconciliação de bases em volume — diferencial importante;
Unity Catalog (lineage, descoberta e documentação de métricas e modelos de consumo);
Python e PySpark para automação de validações de paridade e rotinas de reapontamento;
Conhecimento de DataStage ou outras ferramentas ETL legadas (facilita a leitura do consumo atual);
Experiência no mercado financeiro ou de crédito;
Certificações Databricks (Data Analyst Associate, Data Engineer Associate).

See also