Talent.com
Consultor(a) de Engenharia de Dados Sr "#981890"

Consultor(a) de Engenharia de Dados Sr "#981890"

Dexian Brasilsão paulo, estado de são paulo, br
Há 12 dias
Descrição da vaga

Quem Somos

“A DEXIAN é uma consultoria global de origem Americana focada em talentos para complementar a equipe de tecnologia da informação de nossos clientes. Estamos presente em 10 países, com 45 escritórios ao redor do mundo. Por mais de 25 anos, a DEXIAN® atende indústrias e clientes globais, em diversas áreas, com a missão de atrair e reter os maiores talentos do mundo.

Hoje somos orgulhosamente reconhecidos como uma das maiores empresas de “staffing augmentation” dos Estados Unidos pela Staffing Industry Analysts (SIA). Também somos uma Minority Owner Company e nos sentimos orgulhosos de termos nascido na diversidade.

No Brasil, chegamos em 2007 e de lá para cá, conquistamos mais de 50 clientes de diferentes setores da economia.

O que esperar de nós

É importante que você saiba que por trás de cada movimento DEXIAN existem cinco valores fundamentais : colaboração, respeito, justiça, comprometimento e engenhosidade. Colaboração, justiça e respeito não são apenas palavras; comprometimento não é só um pensamento; e engenhosidade vai além de aspiração. Essas qualidades nos definem em todos os níveis, todas as parcerias e na forma como trabalhamos todos os dias. Compartilha dos mesmos valores, aqui é seu lugar! Que tal desenvolver sua carreira conosco?

A DEXIAN do Brasil incentiva a DIVERSIDADE. Nossas oportunidades também estão disponíveis para candidatura de pessoas com deficiência e reabilitados.

Nosso Cliente

Essa vaga irá atender nosso cliente do segmento de Indústria.

O que esperar do seu dia a dia de trabalho

  • Projetar, desenvolver e manter pipelines de dados utilizando Databricks (Spark, Delta Lake, notebooks e jobs).
  • Integrar e transformar dados provenientes de múltiplas fontes (bancos de dados relacionais, APIs, S3, entre outros).
  • Implementar boas práticas de versionamento, logging, monitoramento e documentação de dados.
  • Trabalhar em conjunto com times de Analytics, Data Science e Produto para garantir a disponibilidade e qualidade dos dados.
  • Criar e otimizar consultas SQL e scripts em Python para manipulação e tratamento de grandes volumes de dados.
  • Garantir a segurança e governança de dados em conformidade com as políticas internas e com a arquitetura da AWS (IAM, Glue, Lake Formation, etc.).
  • Realizar tuning de performance em jobs Spark e consultas SQL.

Perfil desejado

  • Pensamento analítico e orientado a performance.
  • Boa comunicação e perfil colaborativo com diferentes times.
  • Autonomia para propor melhorias e soluções técnicas.
  • O que você precisa ter :

  • Experiência sólida em AWS (S3, Glue, Lambda, IAM, Athena, Redshift ou equivalente).
  • Domínio de Databricks (Spark SQL, Delta Lake, clusters, jobs e notebooks).
  • Proficiência em Python voltado para engenharia de dados (pyspark, pandas, boto3).
  • Forte conhecimento em SQL e modelagem de dados (dimensional, relacional e data lakehouse).
  • Conhecimento de pipelines ETL / ELT, versionamento com Git e integração contínua (CI / CD).
  • Capacidade de analisar e otimizar performance de queries e jobs de processamento distribuído.
  • Diferenciais

  • Experiência com arquitetura Lakehouse e Unity Catalog.
  • Conhecimento em ferramentas de orquestração (Airflow, Databricks Workflows, Step Functions).
  • Experiência com APIs REST e integração de dados em tempo real (Kafka, Kinesis).
  • Familiaridade com boas práticas de FinOps e otimização de custos em nuvem.
  • Idioma : Inglês Desejável

    Onde você vai trabalhar?

    Atuação hibrida a ser negociado com cliente.

    Modelo de Contrato : Flexível.

    Criar um alerta de emprego para esta pesquisa

    Engenharia Dados • são paulo, estado de são paulo, br