A Solutis está em busca de uma pessoa para atuar como Engenheiro(a) de Dados Sênior | Databricks Se você tem experiência com processamento de grandes volumes de dados, construção de pipelines escaláveis e atuação em ambientes distribuídos, essa oportunidade pode ser para você.
Desenvolver pipelines de dados utilizando Databricks (Notebooks, Jobs e Workflows)
Construir conectores para ingestão de dados de múltiplas fontes
Implementar cargas históricas e sincronização incremental (CDC)
Atuar com streaming e mensageria em ambientes de alta volumetria
Garantir qualidade, reconciliação e confiabilidade dos dados
Desenvolver integrações via API REST
Experiência sólida com PySpark
Vivência prática com Databricks (DLT, Workflows e Jobs)
SQL avançado
Conhecimento em CDC (Debezium, GoldenGate ou similares)
Experiência com Kafka ou Azure Event Hub
Conhecimento em Hive Metastore e particionamento
Experiência com APIs REST
Certificação Databricks Certified Data Engineer Associate
Experiência com Teradata, DB2, Oracle, SQL Server ou SAS
Conhecimento em Great Expectations
Ter disponibilidade para ir ao escritório do cliente eventualmente em São Paulo/SP
Databricks | PySpark | SQL | Kafka | Azure Event Hub | Debezium | GoldenGate | API REST | Great Expectations
