O que procuramos?
Buscamos um Engenheiro de Dados Sênior experiente e proativo para integrar o time Meta. Você será responsável por desenhar, desenvolver, implementar e otimizar soluções de dados robustas e escaláveis para nossos clientes, utilizando tecnologias de ponta como Snowflake, Airbyte, DBT e Airflow, e aplicando as melhores práticas em Data Lake, Data Warehouse e Data Quality.
Atribuições principais :
Projetar, construir e otimizar arquiteturas de Data Warehouse em Snowflake e soluções de Data Lake, garantindo escalabilidade, performance e governança;
Desenvolver e gerenciar pipelines de ingestão de dados (ELT / ETL) utilizando Airbyte para conectar e extrair dados de diversas fontes (APIs, bancos de dados, arquivos, etc.);
Orquestrar, agendar e monitorar fluxos de dados complexos utilizando Apache Airflow, garantindo a confiabilidade e a eficiência dos processos de transformação e carga;
Criar e definir modelos de dados otimizados para performance e análise em Snowflake, incluindo esquemas relacionais e dimensionais;
Desenvolver e manter processos de transformação de dados utilizando SQL, Python, Spark dentro dos pipelines orquestrados por Airflow, preparando os dados para consumo em Snowflake;
Implementar e gerenciar a governança de dados, controle de qualidade, segurança e versionamento de código para os pipelines e para o ambiente Snowflake;
Identificar gargalos de performance e otimizar consultas e processos em Snowflake e nos pipelines de dados.
Requisitos :
Sólida experiência prática no desenvolvimento e implementação de soluções de Data Warehouse utilizando Snowflake (modelagem, otimização de queries, gerenciamento de warehouses virtuais, segurança);
Experiência na configuração e gerenciamento de pipelines de ingestão de dados com Airbyte;
Proficiência no desenvolvimento, agendamento e monitoramento de DAGs em Apache Airflow utilizando Python;
Profundo conhecimento em conceitos e arquiteturas de Data Lake e Data Warehouse;
Fortes habilidades em SQL para modelagem, transformação e consulta de dados;
Experiência com linguagens de programação, especialmente Python, para desenvolvimento de scripts de transformação e automação;
Conhecimento em plataformas de cloud (AWS, Azure ou GCP) e seus serviços de dados;
Diferenciais :
Localidade da posição :
Remota
Por que construir sua carreira na Meta?
Oferecemos autonomia, metas claras e um ambiente dinâmico e desafiador, onde os profissionais têm oportunidade de interagir com diferentes tecnologias, participar de todos os tipos de projetos, trazer novas ideias e trabalhar de qualquer lugar do Brasil e (por que não?) do mundo. Além disso, somos uma das melhores empresas para se trabalhar no Brasil segundo o Great Place to Work e uma das 10 empresas que mais crescem no país há 3 anos consecutivos, segundo o Anuário Informática Hoje.
Quais são nossos valores?
Todas as pessoas são bem-vindas independentemente de sua condição, deficiência, etnia, crença religiosa, orientação sexual, aparência, idade ou afins. Queremos que você cresça conosco em um ambiente acolhedor e repleto de oportunidades.
Se identificou? Então, #VemSerMeta!
Engenheiro Dados • PORTO ALEGRE, RS