Engenheiro(a) de Dados Especialista | Databricks | AWS | PySpark
K2
SeniorHome Office 1 candidatohoje
Sobre a Vaga
Salário a Combinar
E-mail: rh***@***.br — Quando disponibilizado pela empresa, o contato poderá ser visualizado por assinantes Premium.
1 Vaga
A K2 Partnering Solutions está em busca de 3 Engenheiros(as) de Dados Especialistas para atuar em um projeto estratégico de longa duração em uma das maiores empresas do segmento farmacêutico do Brasil.
Responsabilidades
- Desenvolver e manter pipelines de dados (ETL/ELT) utilizando Databricks.
Implementar e evoluir arquiteturas Lakehouse seguindo o modelo Medallion (Bronze, Silver e Gold).
- Desenvolver soluções escaláveis utilizando Apache Spark (PySpark).
- Automatizar processos de ingestão, monitoramento e tratamento de falhas.
- Implementar práticas de governança, segurança e qualidade dos dados.
- Otimizar performance de processamento e custos em ambientes AWS.
- Atuar na definição de padrões e melhores práticas de Engenharia de Dados.
- Participar de decisões de arquitetura e evolução da plataforma de dados.
Requisitos
- Experiência sólida como Engenheiro(a) de Dados.
- Domínio em Databricks.
- Experiência com Apache Spark / PySpark.
- Conhecimento avançado em SQL.
- Experiência com Python.
Vivência em ambientes AWS, especialmente
- Amazon S3
- IAM
Segurança
- Otimização de custos
- Experiência com arquitetura Lakehouse.
- Conhecimento em pipelines ETL/ELT.
- Experiência com ferramentas de CI/CD.
- Conhecimento em versionamento de código (Git).
- Experiência com arquitetura Medallion.
- Conhecimento em DataOps.
- Experiência com monitoramento e observabilidade de pipelines.
- Vivência em projetos de grande volume de dados.
- Experiência no segmento farmacêutico.
- Perfil analítico e hands-on.
- Excelente capacidade para resolução de problemas.
- Boa comunicação.
- Facilidade para trabalhar em equipe.
- Visão de arquitetura e escalabilidade.
Nível: Senior
Benefícios
Não informado.
Vagas semelhantes para você
Selecionadas com base na tecnologia, modalidade, nível e localização desta oportunidade.