Engenheiro de Dados Pleno

Vagas Externas — Remotar · remote · CLT · pleno
Descrição

Desenvolvimento e otimização de pipelines de dados com Apache Airflow e Cloud Functions.

A FCamara está em busca de um Engenheiro de Dados Pleno para atuar no desenvolvimento, implementação e otimização de pipelines de dados, utilizando ferramentas como Apache Airflow para orquestração de tarefas. O profissional também será responsável pela criação e gerenciamento de funções em ambientes de cloud, como AWS Lambda ou Google Cloud Functions, e pela configuração e manutenção de dashboards em Grafana para monitoramento de desempenho.

- Projetar, implementar e otimizar pipelines de ETL (Extração, Transformação e Carga) para garantir a fluidez dos dados entre sistemas.

- Utilizar ferramentas como Apache Airflow para orquestrar e agendar tarefas de processamento de dados.

- Criar e gerenciar funções em ambientes de cloud (ex.: AWS Lambda, Google Cloud Functions) para automação de processos e manipulação de dados.

- Integrar serviços de dados na nuvem para melhorar a escalabilidade e a eficiência.

- Configurar e manter dashboards em Grafana para monitorar o desempenho de pipelines de dados e identificar possíveis gargalos.

- Implementar alertas e métricas para garantir a integridade e a disponibilidade dos dados.

- Documentar processos e rotinas de dados para garantir a transparência e facilitar a manutenção.

- Participar de Engineering Change Proposals (ECP) para propor melhorias e inovações nos fluxos de trabalho e na arquitetura de dados.

- Trabalhar em estreita colaboração com equipes de ciência de dados, analistas e desenvolvedores para entender requisitos e garantir que as soluções atendam às necessidades do negócio.

- Participar de reuniões de planejamento e revisão para alinhar objetivos e prioridades.

- Implementar e monitorar processos de validação de dados para garantir a qualidade e a precisão das informações.

- Realizar testes e auditorias nos pipelines de dados para identificar e corrigir problemas.

Processo seletivo inclui:
Selecionamos as principais informações da posição. Para conferir o descritivo completo, clique em "acessar"
Candidatar-se

Esta vaga é agregada de Vagas Externas — Remotar. A candidatura é feita no site da fonte.
Candidatar-se no site da fonte