Atuar na coleta, processamento e armazenamento de grandes volumes diários de dados.
Garantir alta disponibilidade nas diferentes etapas dos pipelines de dados.
Prover mecanismos eficientes e escaláveis para a leitura dos dados armazenados.
Desenvolver APIs e bibliotecas para envio de eventos padronizados pelas diferentes soluções que compõem a plataforma Méliuz.
Configurar mecanismos para monitoramento das soluções desenvolvidas.
Desenvolver e executar rotinas de ETL/ELT.
Estar atento a melhoria contínua no fluxo de trabalho do time.
Auxiliar em mentoria técnica para disseminação de conhecimento dentro do time.

Conhecimentos em algoritmos e estruturas de dados;
Experiência prática em projetar, desenvolver e manter pipelines de dados;
Proficiência em SQL e em linguagens de programação, preferencialmente Python e/ou Go;
Experiência com Clouds públicas, AWS e/ou GCP
Experiência com o uso de ferramentas de infra-as-code (ex: Terraform);
Experiência com o uso de ferramentas de orquestração (ex: Airflow, Dagster, Prefect);
Cultura DevOps;
Inglês técnico intermediário.
Experiência em pipelines de dados em nuvem GCP e AWS;
Experiência com o uso de dbt;
Experiência com Spark/Scala;
Conhecimento em Clickhouse.

Especialista em Engenharia de Dados

Key skills