Job Description
Descrição:
Buscamos um(a) Engenheiro(a) de Dados Júnior para atuar de forma dedicada (168h/mês) no projeto de Conciliação Financeira do Familhão. O profissional irá trabalhar diretamente na plataforma Databricks, desenvolvendo pipelines distribuídos com Apache Spark e Python para suportar os processos de reconciliação financeira garantindo qualidade, rastreabilidade e performance no processamento de grandes volumes de dados.
Responsabilidades:
-
Desenvolver e manter pipelines de dados com PySpark no Databricks para os fluxos de conciliação financeira
-
Construir e otimizar notebooks e jobs Databricks para ingestão, transformação e validação de dados
-
Trabalhar com Delta Lake para garantir transações ACID, versionamento e qualidade dos dados
-
Escrever código Python limpo e reutilizável para automação de processos de dados financeiros
-
Colaborar com equipes de negócio e f...