Overview
Atuar como Engenheiro de Dados promovendo a colaboração em equipe e a entrega de soluções eficientes e inovadoras em ambientes de dados.
Utilizar pensamento crítico e analítico para identificar padrões, resolver problemas complexos e apoiar a tomada de decisão baseada em evidências.
Contribuir para a evolução contínua das soluções e processos, adaptando-se a novas tecnologias e tendências, com foco em aprendizado constante e excelência técnica.
Responsibilities
Colaborar com equipes multidisciplinares, garantindo comunicação clara e foco em objetivos comuns.
Identificar problemas em fluxos e processos de dados, propor soluções criativas e implementar de forma eficaz.
Analisar grandes volumes de dados, identificar padrões e fornecer insights para apoiar a tomada de decisão baseada em evidências.
Projetar, desenvolver e otimizar pipelines e processos de ingestão, transformação e integração de dados.
Garantir a qualidade, segurança e disponibilidade dos dados em todo o ciclo de vida.
Contribuir para a melhoria contínua das práticas e processos de engenharia de dados.
Adaptar-se a novas tecnologias e metodologias, mantendo-se atualizado com tendências do setor.
Compartilhar conhecimento e incentivar a cultura de aprendizado contínuo dentro da equipe.
Requisitos
Proficiência em linguagens de programação como Python : capacidade de escrever scripts eficientes, manipular dados e implementar soluções de ETL (Extração, Transformação e Carga).
PySpark : habilidade em trabalhar com DataFrames, RDDs, realizar operações de transformação e ação, e otimizar jobs de Spark.
Apache Spark : capacidade de implementar soluções de processamento de dados em larga escala, compreender a execução de jobs e otimizar o desempenho.
Hadoop : conhecimento sobre armazenamento e processamento de dados em Hadoop (não é necessário experiência em implementação de soluções complexas).
Hive : capacidade de escrever consultas HiveQL e entender como otimizar consultas (não é necessária experiência em administração de clusters Hive).
GitHub : habilidades em usar comandos básicos do Git, gerenciar branches, realizar pull requests e colaborar efetivamente em projetos de equipe.
Conhecimento em SQL para manipulação e consulta de bancos de dados.
Habilidade em usar bibliotecas como PySpark para manipulação de dados.
PowerBI ou outras ferramentas de Data Visualization.
Inglês técnico.
Desejável
Certificações : Microsoft Certified : Azure Data Engineer Associate; Databricks Certified Data Engineer Associate, Cloud Computing, Databricks.
ElasticSearch : implementação de soluções de busca, análise e otimização de índices e consultas, integração com ferramentas.
Experiência em projetos do Setor Financeiro.
Familiaridade com ferramentas DevOps e IA Generativa.
Benefícios
Benefícios CLT : Vale Refeição, Alimentação e Multibenefícios; planos de saúde, odontológico, previdência privada, vale transporte, reembolso fretado, estacionamento, empréstimo consignado, cartão corporativo (quando aplicável).
Apoio à Vida e Bem-estar : GymPass, Sesc, sessões de atividade física e mindfulness; orientação psicológica, jurídica, financeira e social; auxílios variados para creche, gestantes, kit home office, descontos e cashback.
Desenvolvimento Profissional : reembolso de Graduação e Cursos, Mestrado em parceria com instituição de ensino, Mobility4U, Buddy & Conselheiro.
Diversidade & Inclusão : Abilities+, LGBTQIA+, networks de apoio e iniciativas de inclusão.
Demais vantagens : modelo híbrido flexível, voluntariado com impacto social e benefícios sujeitos a elegibilidade.
Get notified about new Data Engineer jobs in São Paulo, São Paulo, Brazil.
São Paulo, São Paulo, Brazil 3 months ago
#J-18808-Ljbffr
Engenheiro Pleno • Belém, Pará, Brasil