Junte-se à Digiage e ajude a escalar a inteligência artificial com excelência operacional.
Estamos em busca de um(a) Engenheiro(a) de Plataforma de Dados Sênior para atuar na arquitetura, sustentação e evolução da plataforma de dados da companhia, com foco em automação de infraestrutura, governança, DataOps, MLOps e excelência operacional.
Buscamos profissionais com forte experiência em ambientes Azure e Databricks, capazes de construir soluções modernas, escaláveis e seguras, garantindo eficiência no ciclo de vida de dados e modelos de inteligência artificial.
O desafio será atuar diretamente na implementação de práticas avançadas de automação, governança e observabilidade, contribuindo para a modernização da plataforma de dados e aceleração das iniciativas de IA da empresa.
Responsabilidades:
-
Desenvolver e evoluir pipelines de automação e orquestração utilizando Azure DevOps e Databricks Asset Bundles/Declarative Automation Bundles (DABs);
- Estruturar fluxos de CI/CD para deploy automatizado de pipelines, workspaces e soluções analíticas;
- Implementar práticas de DataOps e MLOps, garantindo agilidade, rastreabilidade, reprodutibilidade e monitoramento dos processos;
- Criar e manter esteiras automatizadas para ciclo de vida de modelos de Machine Learning;
- Provisionar e gerenciar infraestrutura em Azure utilizando práticas de Infraestrutura como Código (IaC);
- Atuar na gestão de recursos como: Storage Accounts, Key Vaults, Networking e Workspaces Databricks
- Garantir segurança, governança e conformidade nas soluções de dados;
- Integrar ferramentas de DevSecOps e análise de segurança nas pipelines de deploy;
- Implementar controles de qualidade, versionamento e observabilidade das soluções;
- Criar templates, frameworks e automações reutilizáveis para escalabilidade da plataforma;
- Apoiar iniciativas de democratização e governança de Data Assets para áreas de negócio;
- Trabalhar em conjunto com times de Engenharia, Dados, Analytics, IA e Arquitetura;
- Explorar e implementar soluções com Agentes de IA e LLMs para automação de processos internos e suporte à plataforma;
- Contribuir com inovação contínua e evolução da arquitetura de dados corporativa.
Requisitos:
- Experiência mínima de 4 anos em Engenharia de Plataforma, Cloud, Dados ou áreas correlatas;
- Conhecimento profundo em: Azure DevOps, Databricks e Unity Catalog
- Databricks Asset Bundles (DABs)
- Experiência com automação de deploys e pipelines CI/CD;
- Vivência prática com conceitos e ferramentas de: DataOps, MLOp e MLflow
- Domínio do ecossistema Azure Analytics;
- Conhecimento sólido em Git e versionamento de código;
- Experiência com automação utilizando: Shell Script, PowerShell e Azure Pipelines
- Vivência com ambientes escaláveis, governança e observabilidade de dados;
- Conhecimento em segurança aplicada ao ciclo de desenvolvimento e deploy;
- Experiência com arquitetura e modernização de plataformas de dados.
Diferenciais:
-
Certificações Microsoft Azure, especialmente AZ-400;
- Certificações Databricks;
- Experiência com ferramentas de análise de segurança, como Veracode ou similares;
- Vivência com DevSecOps;
- Conhecimento em governança e catálogo de dados;
- Experiência com modernização de plataformas analíticas e Data Lakehouse;
- Desenvolvimento de soluções utilizando Agentes de IA e Large Language Models (LLMs);
- Conhecimento em automação inteligente e IA aplicada à engenharia de plataforma;
- Vivência em ambientes orientados a alta disponibilidade e escalabilidade.
