Pessoa Consultora Data Engineer

Modelo: Remoto

Contratação: PJ

Na FSB Holding, sua excelência faz a nossa reputação. E vice-versa.

Buscamos uma Pessoa Consultora Data Engineer para atuar na construção e evolução de pipelines, transformações e modelos de dados, contribuindo para uma plataforma cada vez mais confiável, escalável e eficiente.

Essa pessoa terá atuação próxima às diferentes etapas da jornada dos dados — da ingestão e transformação à qualidade, documentação, monitoramento e otimização — utilizando tecnologias de engenharia de dados e cloud.

Responsabilidades:

Desenvolver e manter pipelines de ingestão batch e streaming das fontes corporativas (ERPs como Protheus, sistemas como Fluig, APIs e arquivos) para a camada Bronze.

Construir transformações e modelagem física de dados nas camadas Silver e Gold, aplicando regras de qualidade, deduplicação e padronização.

Implementar e monitorar testes de qualidade de dados alinhados às cinco dimensões do Farol de Qualidade (Completude, Acurácia, Consistência, Tempestividade e Unicidade), garantindo cumprimento de SLAs.

Instrumentar métricas e observabilidade dos pipelines (execução, falhas, latência) e configurar alertas.

Catalogar tabelas e datasets no catálogo de dados corporativo, documentando linhagem e metadados.

Colaborar com Analytics Engineers e áreas de negócio para garantir dados confiáveis e disponíveis para consumo analítico.

Otimizar performance, custo e ciclo de vida dos dados (particionamento, retenção, arquivamento) em ambiente de nuvem (GCP).

Participar dos rituais ágeis do time (planning, dailies, retros) e contribuir para a evolução das práticas de engenharia de dados.

Requisitos técnicos:

Construção de pipelines de ingestão batch e streaming a partir de fontes corporativas (ERP, BPM, ferramentas corporativas, APIs, planilhas, arquivos).

Experiência com GCP: BigQuery, Cloud Storage, Dataflow, Pub/Sub e/ou Cloud Composer (Airflow gerenciado).

Construção física das camadas Bronze, Silver e Gold como tabelas materializadas (não views), com deduplicação, padronização e regras de negócio.

Modelagem de dados dimensional e/ou normalizada, com versionamento de código (Git).

Implementação de testes de qualidade alinhados às cinco dimensões de Qualidade.

Definição e cumprimento de SLAs de disponibilidade e atualização dos dados entregues, com ferramentas como Great Expectations, dbt tests, Soda ou Pandera.

Monitoramento de pipelines (métricas de execução, falhas, latência) e configuração de alertas.

Documentação de métricas operacionais dos pipelines para o time de engenharia e stakeholders.

Otimização de custo dos pipelines e do armazenamento em nuvem (FinOps).

Gestão do ciclo de vida dos dados: particionamento, retenção e arquivamento.

Graduação em Ciência da Computação, Engenharia, Sistemas de Informação ou áreas correlatas.

Experiência sólida com SQL e ao menos uma linguagem de programação para engenharia de dados, preferencialmente Python.

Conhecimento de orquestração de pipelines (Airflow, Dagster ou similar).

Desejável: conhecimento de dbt, esteiras de CI/CD para dados (DataOps) e conceitos de governança de dados (catálogo, LGPD).

Perfil comportamental (soft skills):

Forte capacidade de alinhamento com stakeholders de diferentes áreas e níveis, técnicos e de negócio.

Autogerenciável, com senso de priorização e organização para lidar com múltiplas demandas simultâneas.

Vivência prática em metodologias ágeis (Scrum, Kanban ou modelo híbrido).

Perfil dinâmico e adaptável a mudanças de prioridade e contexto.

Forte capacidade de resolução de problemas, com raciocínio estruturado e orientado a dados.

Comunicação clara, colaboração e proatividade no dia a dia com o time e com outras áreas.

Diferenciais:

Experiência prévia em ambientes de holding ou grupos com múltiplas marcas.

Conhecimento de frameworks de governança como DAMA-DMBOK.

Formação Principal

Graduação em Ciência da Computação, Engenharia, Sistemas de Informação ou áreas correlatas.

Localidade e Modalidade

100% remoto.

Diversidade

Esta é uma vaga também para Pessoas com Deficiência (PCD).

Nº do Fluig: 1247643