VAGASLUME
R

Data Engineer - GCP

Randstad · Remoto · GeekHunter

PythonA combinarCLT

Sobre a vaga

Requisitos

  • 3+ anos de experiência na carreira
  • Python
  • Google BigQuery
  • Batch Processing
  • Medallion Architecture
  • ETL/ELT
  • Google Cloud Platform (GCP)
  • Apache Airflow
  • Data Pipelines
  • Streaming
  • SQL
  • CDC

Conhecimentos Desejáveis

  • GitLab CI/CD
  • Utilities/Energy Sector
  • Cloud Data Environments

Tarefas e Responsabilidades

Somos a Randstad, líder mundial em soluções de talentos. Estamos com uma oportunidade para atuar como Data Engineer - GCP em um de nossos clientes do setor de Utilities/Energia.

Buscamos um profissional sênior para integrar a equipe de AI & Data, atuando como referência técnica na construção e evolução de pipelines de dados robustos e escaláveis na Google Cloud Platform.

Responsabilidades

  • Projetar, desenvolver e manter pipelines de dados escaláveis e eficientes em GCP.
  • Garantir a qualidade, integridade e confiabilidade dos dados ao longo de todo o ciclo de processamento.
  • Implementar processos de ETL/ELT para movimentação e disponibilização de dados entre diferentes sistemas.
  • Atuar como referência técnica (Subject Matter Expert) em Engenharia de Dados.
  • Colaborar com equipes multidisciplinares, promovendo alinhamento técnico e compartilhamento de conhecimento.
  • Apoiar a tomada de decisões técnicas e contribuir para a resolução de problemas complexos.
  • Desenvolver e otimizar arquiteturas de dados escaláveis, incluindo modelos Medallion (Bronze, Silver e Gold).
  • Trabalhar em parceria com cientistas de dados, analistas e stakeholders de negócio.
  • Liderar iniciativas voltadas ao monitoramento, desempenho e confiabilidade dos pipelines.
  • Documentar processos, padrões e boas práticas de engenharia de dados.
  • Contribuir na avaliação e adoção de novas tecnologias, ferramentas e frameworks.

Conhecimentos obrigatórios

  • Python
  • SQL
  • Apache Airflow (Google Composer)
  • Desenvolvimento de pipelines de dados: Streaming, Batch Processing e CDC
  • Google BigQuery
  • Google Cloud Platform (GCP)
  • Arquitetura Medallion (Bronze, Silver e Gold)

Conhecimentos desejáveis

  • GitLab CI/CD
  • Experiência em ambientes de dados em nuvem
  • Vivência em projetos do setor de Utilities (Energia)

Diferenciais

  • Experiência prévia no setor de Energia e Utilities.
  • Conhecimento em arquiteturas modernas de dados e plataformas cloud.
  • Capacidade de atuar em ambientes colaborativos e multidisciplinares.
  • Perfil analítico, proativo e orientado à solução de problemas.

Requisitos principais

PythonGoogle BigQueryBatch ProcessingMedallion ArchitectureETL/ELTGoogle Cloud Platform (GCP)Apache AirflowData PipelinesStreamingSQLCDCGitLab CI/CDUtilities/Energy SectorCloud Data Environments