Transforme o futuro com a Minsait
Na Minsai t, acreditamos na tecnologia como força para transformar realidades e gerar impacto positivo. Desenvolvemos soluções que conectam inovação, eficiência e progresso em setores essenciais como administração pública, telecomunicações & mídia, energia & utilities, indústria & consumo, saúde e finanças.
Aqui, você encontra um ambiente que valoriza a autonomia, a colaboração e o crescimento contínuo, com projetos desafiadores e oportunidades reais de desenvolvimento.
Nosso jeito de ser
Valores
Se você busca desafios com significado, a Minsait é o seu lugar.
Desenvolver e manter pipelines de dados em lote usando o PySpark (focado em SQL)
Escreva e otimize consultas SQL complexas para dar suporte à lógica de negócios e às necessidades de relatórios
Entenda os requisitos de forma autônoma e traduza para código
Transforme e integre dados de diversas fontes em tabelas Iceberg e Snowflake
Contribuir para o desenvolvimento de data marts e conjuntos de dados selecionados para consumo comercial
Colabore com analistas de negócios para entender as necessidades de dados
Monitore e gerencie trabalhos de dados em execução no AWS EMR orquestrados pelo Airflow, aproveitando o S3, o Glue e outros serviços da AWS
Garanta a qualidade, a consistência e o desempenho dos dados em todo o pipeline
Requisitos Técnicos e de Experiência :
Estamos procurando um Engenheiro de Dados Sênior qualificado com uma base sólida em desenvolvimento baseado em SQL. Essa função se concentrará na criação e manutenção de pipelines de dados usando o PySpark, com SQL como a linguagem de codificação principal. O candidato também terá uma boa compreensão das estruturas de modelagem de dados (como modelagem dimensional Kimball) e experiência no suporte a datawarehouses e data marts.
Qualificações preferenciais
Experiência na criação e gerenciamento de data marts
Exposição ao Airflow ou outras ferramentas de orquestração
Familiaridade com ferramentas de infraestrutura como código, como o Terraform
Compreensão dos padrões ODS (Operational Data Store) e arquitetura de data lake
Experiência com Bitbucket (ou qualquer ferramenta git semelhante)
Experiência / compreensão de Jenkins
Habilidades Comportamentais e Competências :
Fluência em inglês é um diferencial
Mínimo de 3 anos de experiência prática em engenharia de dados codificando consultas SQL complexas
Experiência comprovada em SQL – incluindo junções, agregações, funções de janela e ajuste de desempenho
Experiência prática com o PySpark, particularmente com o Spark SQL
Familiaridade com os serviços de dados da AWS (por exemplo, EMR, S3, Glue)
Compreensão de estruturas de modelagem de dados, incluindo a metodologia Kimball
Experiência de trabalho com Snowflake ou data warehouses em nuvem semelhantes
Conhecimento do Apache Iceberg ou formatos de tabela semelhantes (por exemplo, Delta Lake, Hudi)
Nível de Experiência Desejado :
Pleno
TRABALHE NA MINSAIT
Nosso compromisso com a diversidade é um elemento-chave da nossa cultura : Igualdade de oportunidades, respeito pelas pessoas e não discriminação são princípios de atuação para todos os profissionais da Minsait. Integramos o Bloomberg Gender-Equality Index (GEI) 2021 em termos de diversidade e igualdade de gênero.
Engenheiro Dados • campos dos goytacazes, Brasil