Senior/Staff Data Engineer
IncogniaJob Description
📋 Description Criar, implantar, manter e monitorar a infraestrutura de dados e Data Lake. Fornecer ferramentas, guidelines e templates para uso fluido da infraestrutura. Implantar e gerenciar orquestração; pipelines batch e real-time de alto desempenho. Monitorar sistemas para alta disponibilidade, performance e redução de custos. Criar mecanismos que garantam políticas de acesso aos dados. 🎯 Requirements Graduação em Engenharia de Software, Ciência da Computação ou áreas correlatas Experiência em Kubernetes e deployment de sistemas distribuídos em larga escala Experiência com Data Lakes e formatos Iceberg/Delta Lake/Hudi Experiência no uso e gerenciamento de ferramentas de orquestração de Dados Pipelines de dados/ETL em larga escala com Spark Sistemas distribuídos e engines de consulta distribuídas Ferramentas de observabilidade/monitoramento Inglês avançado 🎁 Benefits Benefícios descritos no nosso e-book