Projeto de implementação de um data lake que será suporte a uma torre de controle para uma empresa no setor do Agro.
Engenheiro de Dados Sênior (+5 anos de experiencia)
Engenheiro de Dados Pleno (+3 anos de experiencia)
Descrição:
Buscamos um Engenheiro de Dados Sênior altamente qualificado, com forte capacidade técnica e habilidade para atuar como ponte entre as áreas de negócio e tecnologia. O profissional deve ser auto gerenciável, proativo e capaz de conduzir projetos de dados complexos de forma independente, garantindo a entrega de soluções robustas e escaláveis.
Responsabilidades:
- Projetar, desenvolver e manter pipelines de dados eficientes e escaláveis.
- Trabalhar em estreita colaboração com equipes de negócio para entender requisitos e traduzir em soluções técnicas.
- Garantir a qualidade, integridade e segurança dos dados.
- Otimizar processos de ingestão, transformação e armazenamento de dados.
- Aplicar técnicas de Inteligência Artificial (IA) no dia a dia do desenvolvimento dos pipelines para melhorar automação, qualidade e eficiência.
- Participar da definição da arquitetura de dados, alinhando com as melhores práticas e necessidades do negócio.
- Monitorar e solucionar problemas em ambientes de dados.
- Compartilhar conhecimento e orientar membros juniores da equipe.
Requisitos Técnicos:
- Experiência sólida com ferramentas e serviços de dados na plataforma Azure (ex: Azure Data Factory, Azure Databricks, Azure Synapse Analytics, Azure Data Lake).
- Conhecimento prático em outras nuvens como AWS (ex: AWS Glue, Redshift) e GCP (ex: BigQuery, Dataflow).
- Domínio em linguagens de programação para manipulação de dados, como Python, SQL e/ou Scala.
- Experiência com arquiteturas de dados modernas, incluindo data lakes, data warehouses e pipelines ETL/ELT.
- Familiaridade com ferramentas de orquestração e automação de workflows.
- Capacidade de trabalhar com grandes volumes de dados e garantir performance.
- Conhecimento em aplicação de IA para automação e otimização de processos de dados.
Competências Comportamentais:
- Excelente comunicação para interagir com stakeholders de negócio e equipes técnicas.
- Perfil auto gerenciável, com capacidade de priorizar tarefas e entregar resultados com autonomia.
- Proatividade na identificação de melhorias e soluções inovadoras.
- Habilidade para trabalhar em ambientes dinâmicos e colaborativo