Engenheiro de Dados DATAHUB

Description

No Close-up nós trabalhamos com dados informações e tecnologia para ajudar a transformar a área da saúde!

Somos uma empresa deconteúdo e serviços para a indústria farmacêuticae contribuímos para o conhecimento dastendências do mercado ajudando com eficiência e transparência a estreitar as relações entre laboratórios e profissionais médicos.

Estamos em busca de umENGENHEIRO DE DADOS - DATAHUBpara nos apoiar!

Responsibilities

• Construir manter e evoluir pipelines de ingestão e transformação de dados no Snowflake.
• Integrar dados provenientes de múltiplas fontes como:
• sistemas de CRM e ERP;
• APIs;
• planilhas e arquivos;
• serviços de armazenamento;
• bancos de dados e sistemas locais;
• processos de web scraping.
• Estruturar manter e evoluir as camadas de dados:
• RAW: armazenamento dos dados brutos conforme recebidos das fontes de origem;
• TRUSTED: dados tratados padronizados validados e submetidos a regras de qualidade;
• CURATED: dados organizados enriquecidos e disponibilizados para consumo analítico integrações e aplicações.
• Implementar mecanismos de governança qualidade segurança e rastreabilidade dos dados.
• Monitorar os processos de carga identificando falhas gargalos e oportunidades de otimização.
• Atuar na padronização e integração de dados entre os diferentes países da América Latina.
• Documentar pipelines regras de transformação integrações e modelos de dados.
• Apoiar a evolução da arquitetura de dados e das iniciativas de inteligência artificial do DataHub.

Prerequisites

Requisitos técnicos obrigatórios

• Experiência com Snowflake incluindo:
• modelagem de dados;
• ingestão e transformação de dados;
• otimização de consultas;
• monitoramento e otimização de custos.
• Experiência com Azure Data Factory.
• Conhecimento avançado em SQL.
• Experiência com processos de ETL e ELT.
• Experiência com integração de múltiplas fontes e formatos de dados.
• Experiência com desenvolvimento em Python.
• Conhecimento de práticas de DevOps e implementação de pipelines de CI/CD.
• Experiência com monitoramento tratamento de erros e observabilidade de pipelines de dados.

Conhecimentos desejáveis

• Conhecimento do Snowflake Cortex e da preparação de agentes de inteligência artificial no ambiente Snowflake.
• Conhecimento de modelos de inteligência artificial Machine Learning e Large Language Models.
• Experiência com soluções de web scraping e tratamento de alterações nas estruturas das fontes de dados.
• Conhecimento de segurança controle de acesso e governança de dados no Snowflake.

Experiences

Benefícios que fazem o seu dia a dia ser ainda melhor

• Assistência Médica

Comcoparticipaçãoe parceria Welhub garantindo cuidado completo para você e seus dependentes. Saúde e tranquilidade caminhando juntas.

• Assistência Odontológica

Sorriso bonito e sem surpresas: sem coparticipação para o colaborador!

• Cartão Benefícios Flex

Nosso cartão é 100% flexível: use comovale-alimentaçãoouvale-refeição do seu jeito de acordo com a sua rotina.

• Desconto Farmácia

Acesso a condições especiais e descontos em medicamentos para manter a saúde em dia.

• Seguro de Vida

Proteção e segurança para você e sua família.

• Day Off de Aniversário

O dia é seu e o presente também! Tire seu merecido descanso no seu aniversário.

• Parcerias Educacionais

Faculdades Idiomas TI e Dados. Aprender sempre faz parte do nosso pacote!

• Auxílio Crechepara filhos até 1 ano a contar da licença maternidade para as mamães;

Employment Type : Full Time
Experience: years
Vacancy: 1