Offer summary

Qualifications:

Bachelor's degree in Computer Science, Engineering, or related field., Experience with Databricks and Azure technologies., Strong understanding of ETL processes and data architecture., Ability to collaborate with cross-functional teams..

Key responsabilities:

Develop and optimize data pipelines in Databricks for performance and scalability.

Work with Azure Data Lake, Azure SQL, and Azure Synapse Analytics to create robust data solutions.

Create and manage efficient ETL workflows.

Ensure data quality, integrity, and security across the architecture.

Job description

Responsabilidades:

Desenvolver e otimizar pipelines de dados no Databricks, utilizando as melhores práticas para garantir performance e escalabilidade.
Trabalhar com o Azure Data Lake, Azure SQL, Azure Synapse Analytics, e outras tecnologias da plataforma Azure para criar soluções de dados robustas.
Criar e gerenciar fluxos de ETL (extração, transformação e carga) eficientes.
Garantir a qualidade, integridade e segurança dos dados em toda a arquitetura.
Colaborar com equipes multidisciplinares (cientistas de dados, analistas de BI, desenvolvedores e arquitetos) para integrar dados e transformar informações em insights acionáveis.
Participar da definição da arquitetura de dados, garantindo a escalabilidade e desempenho do sistema.
Monitorar e otimizar a performance dos pipelines e soluções de dados implementadas.

Required profile