Engenheiro de dados

A Dexian, lançada em 2023, tem presença global e traz consigo quase 30 anos de experiência através de suas companhias legadas, principalmente da combinação da DISYS e Signature Consultants. Iniciamos no Brasil 2007 como DISYS e, de lá para cá, conquistamos mais de 60 clientes de diferentes setores da economia. Como Dexian, passamos a ser uma das maiores empresas de soluções de staffing, soluções de TI e complementação de força de trabalho. Estamos liderando a indústria por meio de entrega de serviços exclusivos que combina escala global, projetos de serviço completo e agilidade tática para modernizar modelos de contratação. Apoiamos nossos clientes para encontrar a melhor maneira que seu gap de talentos seja endereçado, de maneira a suportar seu processo de transformação digital. Contamos com escritórios estrategicamente localizados em quatro grandes capitais : Curitiba (PR), Porto Alegre (RS), Rio de Janeiro (RJ) e São Paulo (SP). Assim, conseguimos nos manter próximos dos nossos clientes e consultores. Também somos uma Minority Owner Company e nos sentimos orgulhosos de termos nascido na diversidade.

O que esperar de nós :

Pessoas estão no centro de nossa estratégia e compõem o nosso maior capital. Temos compromisso de atrair, reter os melhores talentos e construir conexões reais para a vida. Por isso, atuamos como ponte entre profissionais altamente qualificados e oportunidades consistentes e prósperas. Acreditamos que, trazer o talento, a tecnologia e as organizações certas juntos, ajuda a desbloquear resultados transformadores e alcançar novos níveis de sucessos para os clientes que atendemos e os consultores que contratamos. E para isso, cinco valores fundamentais nos guiam : Integridade, Transparência, Autenticidade, Engenhosidade e Empatia. A Dexian está comprometida com a responsabilidade social corporativa e, investe em programas que apoiam a diversidade e inclusão.

Se você compartilha dos mesmos valores, aqui é seu lugar!

Nosso Cliente :

Esta vaga irá atender nosso cliente, uma grande multinacional no segmento de petróleo e gás.

Estamos buscando um(a) Big Data Engineer para fazer parte da nossa equipe. Nesta posição, você irá desenvolver e suportar pipelines de dados escaláveis e soluções inovadoras em ambientes híbridos, utilizando tecnologias como Hadoop, Spark, Azure e Snowflake. Se você gosta de trabalhar com grandes volumes de dados e quer contribuir para projetos de impacto global na área de energia e sustentabilidade, essa oportunidade é para você!

Responsabilidades Principais :

Projetar, desenvolver e manter pipelines de dados escaláveis utilizando Apache Hadoop, Spark e Kafka

Implementar processos de ETL e integração de dados de múltiplas fontes (internas e externas)

Trabalhar com grandes volumes de dados estruturados e não estruturados para habilitar análises em escala

Otimizar e ajustar jobs Spark e Hadoop para melhor performance

Atuar com CDP (Cloudera Data Platform) para deploy e gerenciamento de aplicações Big Data

Integrar soluções com Azure, Snowflake e infraestrutura on-premises

Colaborar com cientistas de dados, analistas, arquitetos e stakeholders para entender requisitos e entregar soluções robustas

Utilizar ferramentas de versionamento como GitHub e automações via GitHub Actions e / ou Azure DevOps

Explorar e implementar novas tecnologias de acordo com o roadmap interno de Big Data

Garantir segurança, integridade e governança dos dados

Requisitos Técnicos :

Formação : Bacharelado em Ciência da Computação ou áreas correlatas | GPA mínimo : 6.5 / 10

Experiência : 5 a 8+ anos em TI, com pelo menos 3 anos em ambientes Hadoop

Linguagens : Scala, Java e / ou Python

Frameworks e Ferramentas :

Apache Spark, Hadoop Ecosystem

Hive, Iceberg, HBase

Solr

Kafka, Spark Streaming ou Apache Flink

Oozie (Airflow é diferencial)

Sistemas UNIX / Linux

Git, GitHub, DevOps (desejável Azure DevOps)

Cloud : Experiência com Azure (desejável conhecimento em AWS)

Diferenciais :

Conhecimento em Apache NiFi

Habilidades de modelagem de dados

Experiência prévia no setor de energia (Oil & Gas)

Soft Skills :

Excelente comunicação verbal e escrita (Inglês avançado é mandatório)

Perfil proativo, autônomo e colaborativo

Forte capacidade analítica e de resolução de problemas complexos

Facilidade para trabalhar em times ágeis (Scrum) e ambientes multifuncionais

Habilidade de interface com áreas de negócio, arquitetura e desenvolvimento técnico

Capacidade de documentar soluções e boas práticas de forma clara e objetiva