Engenheiro De Dados Sr Aws

Responsabilidades e atribuições

Descrição da posição : Buscamos um(a) profissional com sólida experiência em engenharia de dados, com domínio técnico em ferramentas modernas de processamento, automação e cloud.

A pessoa atuará em projetos estratégicos, com foco em performance, qualidade e entrega de valor para o negócio.O que esperamos que você realize :

Desenvolver e manter pipelines de dados utilizandoPySpark .

Integrar e processar dados em ambientesAWS , incluindo EMR, Glue, S3 e Athena.

Automatizar fluxos de trabalho comAirflow (MWAA) .

Aplicar boas práticas de engenharia de dados com foco em performance e escalabilidade.

Participar da definição e implementação de processos deCI / CD .

Realizar consultas e análises em bancos de dados utilizandoSQL .

Colaborar com times multidisciplinares para garantir entregas alinhadas com os objetivos do negócio.

Atuar com senso de dono, buscando melhorias contínuas e soluções eficientes.Requisitos e qualificações

O que precisamos que você tenha de conhecimento : Obrigatórios :

Sólido conhecimento emPySpark

Experiência com SQL(consultas e entendimento de modelo de dados)

Conhecimento emAWS : EMR, Airflow (MWAA), S3, Glue, Athena

Familiaridade comconceitos de CI / CDDesejáveis :

Experiência comPython

Vivência em ambientes de dados complexos e escaláveis