Engenheiro de dados

Oportunidade em Aberto – Engenheiro(a) de Dados JR / PL (Databricks / Azure)

Local : São Paulo / SP – Híbrido (presencial 3x por semana)

Contrato CLT

Responsabilidades :

Apoiar no desenvolvimento de pipelines de dados em Apache Spark (Databricks)

Colaborar na criação e manutenção de códigos em PySpark e Python

Atuar no processamento de dados em batch e streaming

Contribuir na qualidade do produto por meio de testes e boas práticas

Apoiar na automação de tarefas e processos com Jenkins (CI / CD)

Versionar e colaborar em projetos utilizando Git

Participar de equipes com metodologias ágeis (Kanban / Scrum)

Apoiar em tarefas relacionadas à orquestração de processos (ex. : Control-M)

Utilizar serviços da Microsoft Azure (Databricks, Data Factory, Storage Accounts)

Requisitos :

Conhecimento em Databricks e Apache Spark

Noções de PySpark, Python e Kedro

Familiaridade com processamento batch / streaming

Interesse em CI / CD com Jenkins

Conhecimento básico em Git

Noções de Microsoft Azure (Data Factory, Databricks, Storage)

Disposição para aprender e evoluir em metodologias ágeis

Diferenciais :

Conhecimento em Cloud AWS

Vivência prévia em ambiente financeiro

Para avançarmos, poderia me confirmar por favor :