Talent.com
A vaga não está disponível no seu país.
Senior Data Engineer

Senior Data Engineer

DRISHTICON Incsantos, estado de são paulo, br
Há 15 horas
Descrição da vaga

We have an immediate contract requirement for Senior Data Engineer with one of our direct clients in USA. Contract and Remote job (Need to support during EST business hours).

About the Job duties

  • Construct data pipelines using Airflow and Cloud Functions to meet business

requirements set on from the Product and Engineering teams

  • Maintain and optimize table schemas, views, and queries in our data warehouse and
  • databases

  • Perform ad-hoc analysis to troubleshoot stakeholder issues surrounding data and
  • provide insights into feature usage

  • Develop workflows and integrations with data partners to expand our data capabilities
  • Document data architecture and integration efforts to provide a clear understanding of
  • the data platform to other team members

  • Provide guidance on data best practices when building out new product lines
  • Automate long running manual processes to free up internal resources
  • Create scalable framework for onboarding new data partners
  • Must have

  • Experience with data task orchestration (Airflow, CRON, Prefect etc..) with dependency
  • mapping

  • Data analysis and data modeling
  • Strong experience in Python, SQL, shell scripting
  • Experience interacting with APIs, SFTP, Cloud Storage locations (eg. GCS, s3)
  • Analytical problem solving skills, ability to analyze application logs to troubleshoot issues
  • Familiarity with Cloud Computing (GCP a plus)
  • Nice to have

  • Experience with Javascript
  • Hands on work with Airflow
  • ML / MLOps
  • Docker and K8s
  • NoSQL
  • Exposure to producer / consumer messaging systems
  • Some additional notes from our consultant onsite

    Essential skills :
  • SQL
  • Python
  • Git
  • Apache Airflow (or other orchestrators such as Dagster or Prefect)
  • Nice-to-have skills :

  • Node.js or JavaScript
  • Google BigQuery
  • Event-driven serverless cloud functions (Google Cloud Functions, AWS Lambda or Azure Functions)
  • Asynchronous event-driven messaging (Google Cloud Pub / Sub, AWS SNS, AWS SQS, Azure Service Bus, Azure Event Grid or Azure Storage Queues)
  • Object storage : either cloud-based (Google Cloud Storage, AWS S3 or Azure Blob Storage) or on-premises (e.g., MinIO, Ceph)
  • Bachelor's degree required.

    Criar um alerta de emprego para esta pesquisa

    Senior Data Engineer • santos, estado de são paulo, br

    Vagas relacionadas
    • Promovida
    Cientista de dados

    Cientista de dados

    Apllos Solutionspraia grande, Brasil
    A Apllos é uma parceira para a evolução digital da gestão da Cadeia de Valor.Soluciona com qualidade problemas complexos de diversos setores com um time de especialistas de alto nível técnico e exp...Mostre maisÚltima atualização: 12 dias atrás
    • Promovida
    Senior Data Engineer

    Senior Data Engineer

    EightpointSão Paulo, BR
    Eightpoint is an internet technology company specializing in the agile development of products and content that address real-world interests, captivating users and driving significant growth for pa...Mostre maisÚltima atualização: 11 dias atrás
    • Promovida
    Data engineer - híbrido em São Paulo

    Data engineer - híbrido em São Paulo

    SofttekSão Paulo, São Paulo, Brasil
    Python, Data Bricks, SQL e Oracle.Trabalho em equipe e comprometimento.De segunda a sexta-feira, 9 : 00 as 18 : 00.A Softtek valoriza a diversidade e inclusão em sua força de trabalho.A empresa tem uma...Mostre maisÚltima atualização: 14 dias atrás
    • Promovida
    Data Engineer

    Data Engineer

    Elios TalentSão Paulo, São Paulo, Brazil
    Data Engineer Highlights Build and maintain pipelines that power data-driven insights Hybrid or remote flexibility High-growth opportunities in cloud and big data technologies Role Summary We are ...Mostre maisÚltima atualização: há mais de 30 dias
    • Promovida
    • Nova!
    Senior Data Engineer

    Senior Data Engineer

    Flatiron Softwareribeirão pires, estado de são paulo, br
    Flatiron is a global remote software development company with engineers located around the world.We unite experts from diverse backgrounds and experiences in a collaborative culture to deliver exce...Mostre maisÚltima atualização: 15 horas atrás
    • Promovida
    • Nova!
    Cientista de dados

    Cientista de dados

    Naturaguarujá, estado de são paulo, br
    Desenvolvimento e manutenção dos modelos regulatórios de risco de crédito (PD, LGD, EAD e Estágios IFRS9), garantindo aderência às normas IFRS9 e regulamentações do BACEN (Res.Ser responsável técni...Mostre maisÚltima atualização: 15 horas atrás
    • Promovida
    Senior Data Engineer

    Senior Data Engineer

    Jusfymauá, Brasil
    Somos uma startup jurídica que busca constantemente soluções para facilitar a vida dos advogados e advogadas do Brasil.Atuamos na área de tecnologia, desenvolvendo produtos e ferramentas que auxili...Mostre maisÚltima atualização: 12 dias atrás
    • Promovida
    Senior Data Engineer

    Senior Data Engineer

    KeyrusSão Paulo, Brasil
    A Keyrus acredita na diversidade e na inclusão.Encorajamos a todos a participarem em nosso processo de contratação, não importando o gênero, idade, raça, religião. Não permitimos nenhum tipo de disc...Mostre maisÚltima atualização: há mais de 30 dias
    • Promovida
    Data Engineer - 1 Vaga

    Data Engineer - 1 Vaga

    WinninSão Paulo, Brasil
    A Board Academy é um time apaixonado por inovação e transformação.Somos uma empresa especializada na Formação, Desenvolvimento e Certificação de Conselheiros, criada para revolucionar o modelo trad...Mostre maisÚltima atualização: há mais de 30 dias
    • Promovida
    • Nova!
    Senior Data Engineer

    Senior Data Engineer

    Microtalent is becoming INSPYR Global Solutionsguarujá, estado de são paulo, br
    Offer 100% remotly ONLY Brazil.The Senior Cloud Data Engineer leads the design, architecture, and implementation of secure, scalable data solutions on AWS, utilizing Snowflake, dbt, and modern auto...Mostre maisÚltima atualização: 15 horas atrás
    • Promovida
    Data Engineer

    Data Engineer

    Persistent SystemsSão Paulo, SP, São Paulo (microrregião); São Paulo (estado), BR
    We are an AI-led, platform-driven Digital Engineering and Enterprise Modernization partner, combining deep technical expertise and industry experience to help our clients anticipate what’s next.Our...Mostre maisÚltima atualização: 23 dias atrás
    • Promovida
    • Nova!
    GCP Data Engineer

    GCP Data Engineer

    Tata Consultancy Servicesguarujá, estado de são paulo, br
    Venha para uma das maiores empresas de Serviços IT do mundo!! Aqui você pode transformar sua carreira!.Por que fazer parte da TCS? Aqui na TCS acreditamos que as pessoas fazem a diferença, por isso...Mostre maisÚltima atualização: 15 horas atrás
    • Promovida
    Data Management Specialist – Makati Based

    Data Management Specialist – Makati Based

    Atlas Fertilizer CorporationSantos, São Paulo, Brasil
    Bachelor's Degree in Data Science, Economics or any other related field.With at least 1-2 years' experience as Data Analyst or any related experience. With strong communication and organizational sk...Mostre maisÚltima atualização: 28 dias atrás
    • Promovida
    Data Engineer

    Data Engineer

    Tata Consultancy ServicesSão Paulo, Brazil, Brazil
    Come to one of the biggest IT Services companies in the world!! Here you can transform your career!.Why to join TCS? Here at TCS we believe that people make the difference, that's why we live a cul...Mostre maisÚltima atualização: há mais de 30 dias
    • Promovida
    Data Engineer...

    Data Engineer...

    Tata Consultancy ServicesSão Paulo, São Paulo, BR
    Come to one of the biggest IT Services companies in the world!! Here you can transform your career! Why to join TCS? Here at TCS we believe that people make the difference, that's why we live a cul...Mostre maisÚltima atualização: há mais de 30 dias
    • Promovida
    Data Engineer

    Data Engineer

    WinninSão Paulo, Brasil
    Estamos em busca de uma pessoa Engenheira de Dados Sênior, apaixonada por dados e inovação, para se juntar a uma equipe de alto impacto. Nesta posição, você terá a oportunidade de desempenhar um pap...Mostre maisÚltima atualização: 24 dias atrás
    • Promovida
    Senior Data Engineer

    Senior Data Engineer

    Tata Consultancy ServicesSão Paulo, São Paulo, Brazil
    Venha para uma das maiores empresas de serviços de TI do mundo!! Aqui você pode transformar sua carreira!Por que se juntar à TCS? Aqui na TCS acreditamos que as pessoas fazem a diferença, por isso ...Mostre maisÚltima atualização: há mais de 30 dias
    • Promovida
    Data Engineer Senior

    Data Engineer Senior

    Grupo FcamaraSão Paulo, Brasil
    A FCamara está em busca de IA Engineer Sênior.Esta oportunidade é em parceria com uma das maiores referências nacionais em ensino superior na área da saúde, com forte presença nos cursos de Medicin...Mostre maisÚltima atualização: 26 dias atrás