C
[Job-32118] Data Engineer, Brazil
CI&T · Remoto · DigAí
A combinarFreelance
Sobre a vaga
Nesta posição, você ajudará a criar e manter soluções de dados de alto desempenho em Azure, transformando dados em recursos confiáveis para equipes de BI, ciência de dados e engenharia de software. Na CI&T, você fará parte de uma equipe que trabalha com transformação tecnológica e soluções integradas de IA e tecnologia.
Responsabilidades
- Desenvolver e entregar pipelines de dados em Azure usando ADF, Synapse, Databricks/Spark e ADLS, além de plataformas locais quando necessário
- Monitorar, dar suporte e manter pipelines existentes, investigar incidentes complexos, corrigir falhas e propor melhorias de arquitetura e código
- Participar da validação de dados e garantir o atendimento a requisitos de negócio, desempenho, segurança, privacidade e GDPR/LGPD
- Integrar novas tecnologias de gestão de dados e engenharia de software às estruturas existentes
- Organizar, ingerir e transformar dados, disponibilizando-os em data lakes e data marts
- Colaborar com equipes de BI, ciência de dados e engenharia de software para documentar e entregar soluções consistentes
Requisitos obrigatórios
- Experiência sólida no ecossistema de dados em Azure, especialmente ADF, Synapse, Databricks/Spark e ADLS
- Experiência com pipelines ETL/ELT, incluindo desenho, desenvolvimento, testes, desempenho e confiabilidade
- Experiência com relatórios em Reporting Services e dashboards em Power BI
- Conhecimento da plataforma Microsoft SQL Server e domínio de SQL para construção de data marts e data warehouses
- Experiência robusta em modelagem dimensional
- Prática com princípios de engenharia de software, Git avançado, branches, pull requests e CI/CD para soluções de dados
- Experiência em contribuir para referências técnicas, definir padrões de dados e participar de revisões de código
- Capacidade de aprender e integrar novas estruturas e tecnologias cloud-native, além de compartilhar conhecimento com colegas mais juniores
Diferenciais
- Conhecimento de testes unitários, de integração e end-to-end
- Certificação em Azure ou AWS
- Conhecimento de processos e ferramentas de catálogo e linhagem de dados, como Azure Purview
- Experiência com Python ou Scala para scripts e automação de processos de dados
- Experiência com ferramentas de orquestração, como Airflow
O que esperamos
Esperamos que você contribua com soluções de dados confiáveis, bem documentadas e alinhadas às necessidades do negócio. Sua experiência em engenharia de dados e disposição para colaborar ajudarão a fortalecer as práticas técnicas da equipe e a compartilhar conhecimento.