Descrição:
Venha fazer a diferença com performance e criatividade ao lado da Gateware!
Somos uma empresa focada em tecnologia, inovação, parceira SAP Partner Open Ecosystem e SAMSUNG SDS, participante do Pacto Global da ONU no Brasil, certificada GPTW (Great Place To Work) pela 6ª vez consecutiva e certificada GPMH (Great People Mental Health) pela 2ª vez consecutiva.
Com mais de 25 anos de história, promovemos a transformação através de soluções e serviços de TI.
Atuamos com:
▪️ Gestão Estratégica: GMO Gestão de Mudanças, PMO Gestão de Projetos, Cutover Estratégico de Negócio e Governança;
▪️ Alocação de Profissionais e Squads de Desenvolvimento: Profissionais especializados e times de tecnologia, com acompanhamento exclusivo.
Além disso, inovamos diariamente para proporcionar um ambiente de alta performance e que apoia a diversidade.
Estamos com tudo pronto para dar as boas-vindas a um profissional incrível como você!
Buscamos um(a) profissional para desenvolver e sustentar soluções de engenharia e qualidade de dados em larga escala, com foco em confiabilidade, desempenho e observabilidade.
Responsabilidades
Desenvolver e evoluir frameworks de qualidade de dados com Python e PySpark, automatizando validações e acompanhando o histórico de qualidade.
Otimizar pipelines no Databricks para reduzir o tempo de processamento e os custos computacionais.
Implementar métricas e alertas para identificar falhas e acompanhar a operação da plataforma.
Colaborar com Produto e Arquitetura na definição de soluções e apoiar tecnicamente a equipe.
Requisitos
Experiência sólida em engenharia de dados, processamento distribuído e otimização de pipelines de grande volume.
Inglês avançado.
Domínio de Python, PySpark e SQL e experiência prática com Databricks.
Experiência com AWS, Azure ou GCP e conhecimento de arquiteturas como Data Lake ou Lakehouse.
Conhecimento em Data Quality, governança de dados e observabilidade, preferencialmente com Datadog.
Diferenciais — Machine Learning aplicado à detecção de Data Drift, uso de YAML para automatizar regras de validação e experiência em mentoria técnica.