Engenheiro de dados PL - AWS e GCP PCD

BRQ Digital Solutions

Vaga encontrada via PCD Online

PUBLICIDADE
(Espaço reservado pra publicidade em breve.)

Descrição da vaga

Responsabilidades Desenvolver, sustentar e evoluir pipelines de dados e automações operacionais.Construir e orquestrar workflows utilizando Python e Apache Airflow.Implementar integrações entre sistemas, APIs e ferramentas corporativas.Desenvolver automações voltadas para eficiência operacional e redução de atividades manuais.Atuar na criação e manutenção de pipelines CI/CD utilizando GitLab.Implementar monitoramento, tratamento de falhas e controles de Data Quality.Realizar integrações e manipulação de dados em plataformas como Google BigQuery e AWS Redshift.Apoiar a administração e execução de rotinas automatizadas em ambientes cloud AWS e GCP.Trabalhar com aplicações containerizadas utilizando Docker e Kubernetes (EKS/GKE).Configurar e apoiar processos de deploy contínuo utilizando ArgoCD.Criar notificações e integrações via Microsoft Teams Webhooks.Apoiar troubleshooting de pipelines e processos automatizados em produção.Documentar fluxos, processos e soluções técnicas implementadas.Atuar em conjunto com áreas técnicas e de negócio no levantamento e entendimento das demandas. Requisitos Experiência prévia como Engenheiro(a) de Dados ou atuação similar em projetos de dados e automação.Conhecimento sólido em Python para desenvolvimento de pipelines e automações.Experiência com Apache Airflow para orquestração de workflows.Vivência com versionamento de código e pipelines CI/CD utilizando GitLab.Conhecimento em manipulação e integração de dados em BigQuery e/ou AWS Redshift.Experiência com Docker e Kubernetes (EKS/GKE).Conhecimento em ambientes cloud AWS e/ou GCP.Vivência com automação de processos utilizando Power Automate.Conhecimento em APIs, integrações e webhooks.Experiência com práticas de Data Quality e monitoramento de pipelines.Capacidade analítica para troubleshooting e resolução de problemas.Boa comunicação e perfil colaborativo para atuação com diferentes áreas. Diferenciais  Experiência com GitOps e ArgoCD.Conhecimento em AWS SSM.Vivência em ambientes de alta volumetria de dados.Experiência com observabilidade e monitoramento de pipelines.Conhecimento em arquitetura e modelagem de dados.Experiência em projetos de automação operacional.Vivência com práticas DevOps/DataOps.Conhecimento em segurança e governança de dados.Experiência em ambientes multi-cloud. . Vaga Exclusiva para Pessoa com deficiência (PCD)
PUBLICIDADE
(Espaço reservado pra publicidade em breve.)

Informações adicionais

Empresa
BRQ Digital Solutions
Localização
Remoto
Tipo de contrato
CLT
Salário
A partir de R$ 6.000
Fonte
PCD Online

Ao candidatar-se, você será direcionado para o site de origem desta vaga (PCD Online).

Candidatar-se →