Engenheiro(A) De Dados Sênior - Gcp

OverviewQuer fazer a diferença na nova economia e transformar pessoas e negócios para prosperarem?

Vem pra Cadastra!

Procuramos um(a) Engenheiro(a) de Dados Sênior, com especialização profunda no ecossistema Google Cloud Platform (GCP), para liderar o design, a construção e a otimização de nossas soluções de dados na nuvem.Como pessoa de referência para as melhores práticas de engenharia de dados em GCP, seu papel será crucial para criar uma arquitetura de dados escalável, resiliente e de alta performance.

Você irá desenvolver frameworks e ferramentas para suportar o crescimento acelerado de um dos nossos clientes, garantindo que toda a organização possa alavancar o poder do BigQuery, Dataflow e Cloud Composer para impulsionar a tomada de decisões.Esta posição é para atuar de forma 100% remota.Main responsibilitiesNo nosso Data Hub você terá o desafio de : Projetar, desenvolver e gerenciar pipelines de dados (ETL / ELT) robustos e escaláveis, utilizando Dataflow, Dataproc (Spark) e / ou Cloud Data Fusion.Modelar, construir e otimizar nosso Data Warehouse e Data Lake no Google BigQuery e Google Cloud Storage, aplicando as melhores práticas de performance e custo.Orquestrar fluxos de trabalho de dados complexos utilizando o Cloud Composer (Apache Airflow gerenciado).

Implementar a ingestão de dados em tempo real (streaming) com Pub / Sub e Dataflow.Implementar e zelar pela governança, segurança e qualidade dos dados na plataforma GCP, utilizando ferramentas como Dataplex, Data Catalog e Secret Manager.Automatizar o provisionamento e o gerenciamento da infraestrutura de dados (IaC), preferencialmente com Terraform.Monitorar a performance e os custos dos serviços de dados em GCP, propondo e implementando otimizações contínuas.Atuar como referência técnica para o time e para o cliente, colaborando com equipes de Analytics e Ciência de Dados para otimizar o consumo dos dados.Requirements and skillsO que a Cadastra espera de você : Sólida experiência comprovada como Engenheiro(a) de Dados, com foco profundo no ecossistema Google Cloud Platform.Domínio de Python e SQL aplicados ao desenvolvimento de soluções de engenharia de dados em larga escala.Experiência prática com as principais ferramentas do GCP : BigQuery (modelagem, otimização de queries, particionamento), Dataflow e / ou Dataproc (Spark), Cloud Composer (Airflow) e Cloud Storage.Experiência com automação e práticas de CI / CD (ex : GitHub Actions, Cloud Build) e Infraestrutura como Código (IaC), preferencialmente com Terraform.Vivência com extração de dados via APIs e modelagem de processos ETL / ELT (sanitização, unificação, agregação de dados).

Diferenciais : Certificação Google Cloud Professional Data Engineer.Experiência com ingestão e modelagem de dados de sistemas SAP (ECC, SF) e / ou em domínios de negócio de RH.Experiência com tecnologias de containerização (Docker, Kubernetes / GKE) no contexto de aplicações de dados.Conhecimento em implementação de ingestão de dados via streaming com Pub / Sub.Experiência com metodologias ágeis de desenvolvimento.Additional informationO que oferecemos : Vale alimentação e refeição no cartão FLASHAuxílio Home Office no cartão FLASHPlano de saúde de acordo com a sua localidadePlano odontológico de acordo com a sua localidadeDay off de aniversário + valor depositado no cartão FLASHLicença-maternidade e paternidade estendidaParticipação nos lucros (PLR)Seguro de vidaAuxílio crecheBônus por indicaçãoVale-transporteClude | Plataforma de SaúdeTotal PassCRM Bônus

#J-18808-Ljbffr