Match score not available

Senior Data Engineer

Remote: 
Full Remote
Contract: 
Work from: 

Offer summary

Qualifications:

Experience with Data Warehousing concepts including ETL processes and Snowflake., Practical experience with Python and PySpark for testing data pipelines., Strong background in Cloud Data Architecture and Agile development., Fluent in English, both written and spoken. .

Key responsabilities:

  • Designing test plans and cases, implementing automated tests using Python/PySpark.
  • Ensuring data accuracy, integrity, and consistency in ODS, Data Warehouse, and Power BI reports.
  • Validating ETL processes and data pipelines for performance and schema changes.
  • Integrating automated data tests into the data engineering workflow using CI/CD and Agile methodologies.

Minsait logo
Minsait XLarge http://www.minsait.com
10001 Employees
See all jobs

Job description

JOB DESCRIPTION

Somos aproximadamente 50k Minsaiters no Mundo e mais de 7k Minsaiters no Brasil e estamos presentes nas maiores empresas em todos os setores. Nossa estrutura permite participar de projetos globais e proporciona um ambiente colaborativo que nos certifica em GreatPlacesToWork e planos diferenciados para Jovens Profissionais também reconhecidos pela Employers for Youth. 


RESPONSIBILITIES AND ASSIGNMENTS

  • Estratégia de teste, dados e automação: projetar planos e casos de teste e de dados, e implementar testes automatizados usando Python/PySpark e Great Expectations.
  • Validação e teste de dados: garantindo a precisão, integridade e consistência dos dados em relatórios ODS, Data Warehouse e Power BI.
  • Teste de ETL e pipeline de dados: validando transformações, cargas incrementais, alterações de esquema e desempenho.
  • Teste de SQL e BI: verificando transformações de dados, agregações e lógica de negócios em relatórios.
  • CI/CD e metodologias ágeis: integrando testes de dados automatizados ao fluxo de trabalho de engenharia de dados




REQUIREMENTS AND QUALIFICATIONS

  • Requisitos Obrigatórios:
  • Experiência dos conceitos de Data Warehousing (processos ETL, ODS vs. Data Warehouse, Snowflake, dimensões de mudança lenta).
  • Experiência prática com Python e PySpark para testar pipelines de dados.
  • Capacidade de executar validação manual de dados consultando conjuntos de dados de origem e destino para garantir correção.
  • Sólida experiência em Arquitetura de Dados em Nuvem
  • Experiência com desenvolvimento Agile para integrar testes automatizados ao fluxo de trabalho de engenharia de dados.
  • Experiência com ferramentas em Cloud com AWS
  • Experiência Fluente com escrita, conversação no idioma Inglês
  • Experiência em escrever casos, planos de teste e estratégias de teste para pipelines de dados, garantindo precisão, integridade e desempenho de transformações de dados.







ADDITIONAL INFORMATION

TRABALHE NA MINSAIT

 

  • Modelo de contratação CLT.
  • Plano de Saúde subsidiado pela empresa para o titular.
  • Opção de inclusão de dependentes no Plano de Saúde com desconto em folha de pagamento.
  • Assistência Odontológica (opcional).
  • Opção de inclusão de dependentes no Plano de Assistência Odontológica com desconto em folha de pagamento.
  • Vale Refeição no cartão Flash Benefícios.
  • Vale Transporte (opcional).
  • POP - Programa de Orientação Pessoal que visa oferecer suporte emocional e aconselhamento com orientação confidencial nas áreas psicológica, jurídica, financeira, social e pet sem custo para titular e dependentes legais.
  • Plataforma de Saúde Wellhub-Gympass (Acesso a mais de 700 academias em todo o Brasil com planos descontado em folha de pagamento).
  • Parcerias com grandes marcas de consumo.
  • Convênio com o SESC para titular e dependentes.
  • Convênios para descontos com instituições de ensino (graduação e pós-graduação) e escola de idiomas.
  • Seguro de vida em grupo.

 

Nosso compromisso com a diversidade é um elemento-chave da nossa cultura: Igualdade de oportunidades, respeito pelas pessoas e não discriminação são princípios de atuação para todos os profissionais da Minsait. Integramos o Bloomberg Gender-Equality Index (GEI) 2021 em termos de diversidade e igualdade de gênero.


Olá, somos a Minsait!

A Minsait é uma empresa do grupo Indra. Somos uma empresa de transformação digital e tecnologia da informação que oferece a seus clientes de diferentes segmentos tecnologias disruptivas e serviços especializados.


Estamos presentes em mais de 140 países, e combinamos nossa experiência em Cloud, Segurança, Payments e Phygital com a tecnologia mais inovadora para impulsionar nossos negócios, gerando um impacto positivo na sociedade. Nosso objetivo é liderar uma revolução tecnológica mais humana.


Há mais 25 anos no Brasil, somos reconhecidos por oferecer um ambiente estimulante, aprendizado contínuo, oportunidades de crescimento e mobilidade nacional e internacional para nossos talentos. Nossos mais de 7.000 profissionais espalhados de norte a sul do país, atestam nossa cultura de respeito, diversidade e inclusão.


Em 2023 conquistamos pelo terceiro ano consecutivo a certificação do Great Place to Work Institute (GPTW), que revela que as pessoas são felizes aqui, graças ao clima positivo que todos nós construímos juntos. Além disso, somos reconhecidos como uma das Melhores Empresas para Jovens Profissionais em Tecnologia, de acordo com o estudo da EFY Tech Brasil, também por três anos seguidos, além de recebermos o selo Bloomberg de igualdade de gênero, uma referência reconhecida para empresas para acompanhar seu progresso na inclusão de gênero.


Todas as vagas são abertas também para PCDs.


 Vem ser Minsaiter!


Required profile

Experience

Spoken language(s):
English
Check out the description to know which languages are mandatory.

Other Skills

  • Collaboration
  • Problem Solving

Data Engineer Related jobs