Data Engineer

A CADS Digital, empresa pioneira em automação de processos com integração AI sob medida, está contratando para a vaga deEngenheiro de Dados Pleno- alguém liderar o desenvolvimento de uma plataforma de dados de alto desempenho.O perfil ideal que buscamos é um profissional determinado a aprender e implementar o melhor stack de ferramentas possível para construir soluções robustas e escaláveis - contribuindo ativamente com as decisões a serem tomadas.

A peça central da nossa arquitetura é oDatabricks.ResponsabilidadesDesenvolver e otimizar pipelines de dados em larga escala (ETL / ELT) utilizando o ecossistema Databricks (PySpark, SQL, Delta Lake).

Construir e manter integrações via API entre nossa plataforma de dados e outros sistemas de orquestração e plataformas de negócio.Colaborar com as equipes de Negócio e Ciência de Dados para traduzir requisitos em soluções técnicas eficientes.Garantir a qualidade, performance e confiabilidade dos dados em todas as etapas do pipeline.Contribuir para a arquitetura de dados que dará suporte a futuras iniciativas de Machine Learning.Requisitos EssenciaisSólida experiência profissional atuando como Engenheiro de Dados.Profundo conhecimento e experiência prática com o ecossistema Databricks (Spark, Delta Lake, Databricks SQL, Workflows).

Domínio de Python e / ou Scala para desenvolvimento de scripts Spark.SQL avançado para consultas complexas e otimização de performance.Experiência com pelo menos uma das principais nuvens (AWS, Azure ou GCP).

DiferenciaisExperiência com Amazon Redshift.Conhecimento em ferramentas de orquestração de workflows (ex : Airflow).

Noções de MLOps para dar suporte à operacionalização de modelos de ML.O que oferecemosSalário competitivo e pacote de benefícios completo.Modelo de trabalho flexível (remoto ou híbrido).

Oportunidade de trabalhar em um projeto estratégico, com autonomia e um desafio intelectual constante.Ambiente com stack de tecnologia de ponta e as melhores ferramentas do mercado.Ficou interessado?

Clique em "Candidatar-se"e venha construir soluções inovadoras com a gente