Data Engineer Sênior São Paulo - Warren Brasil

Descrição

Job descriptionNa Warren, confiança é a base de tudo.

Nossos clientes sabem, com total transparência, como seus investimentos são geridos, quais as taxas envolvidas e o nível de risco de cada um.

Nosso propósito é eliminar o conflito de interesses no mercado de investimentos brasileiro:

não somos comissionados pelos produtos sugeridos, garantindo que o perfil e os objetivos de cada cliente estejam no centro de todas as decisões.

Se você acredita em um mercado financeiro mais transparente, capaz de oferecer a melhor experiência de investimentos para seus clientes, a Warren é o seu lugar.

Aqui, você terá a oportunidade de se desenvolver enquanto atua em um ambiente de alta performance, aprendendo com os melhores profissionais do mercado.

Buscamos pessoas que valorizam o trabalho em equipe, sempre prezando pela ética e excelência em suas entregas.

Somos uma empresa para todas as pessoas que desejam fazer o seu melhor todos os dias, independentemente de gênero, etnia, orientação ou qualquer outra condição, e nosso processo seletivo é baseado na neutralidade.

Main responsibilitiesExecutar atividades de manutenção e aprimoramento da Plataforma de Dados, empregando tecnologias como AWS, Databricks e Terraform;Gerenciar as iniciativas e relatórios técnicos relacionados à eficiência de custos da Plataforma de Dados, seguindo práticas de FinOps;Planejar e executar migração massiva de dados e expansão de novos componentes;Atuar ativamente na resolução de incidentes atreladas à ingestão, ambiente e catálogo de dados, identificando sua causa raiz;Projetar, implementar e dar suporte a uma plataforma que fornece acesso seguro a grandes conjuntos de dados;Modelar dados brutos para suportar amplo consumo de dados na camada Silver;Fazer a construção e manutenção de data lakes, com camadas streaming e batch;Analisar o desempenho em plataforma de processamento distribuído de dados, tunning de aplicações e componentes;Manter-se atualizado(a) quanto aos avanços nas tecnologias de big data e execução de PoC (provas de conceito) para projetar a arquitetura de dados de acordo com o aumento do volume de dados.

Requirements and skillsExperiência em construção e manutenção de Data Lakes, com camadas streaming e batch;Prévia vivência com orquestração de pipeline de dados, preferencialmente Databricks Workflows;Conhecimento sobre Cloud Computing:

Amazon Web Services e/ou Google Cloud Plataform e/ou Azure;Prévia utilização de boas práticas de Data Quality;Amplo conhecimento de workloads de ingestão de dados, casos de uso do cliente, incluindo desempenho, disponibilidade e escalabilidade;Sólida experiência em pelo menos um framework distribuído de dados, preferencialmente Spark e/ou Hadoop;Conhecimento de uma linguagem de programação: Scala ou Python (preferencialmente);Será muito legal se você tiver: Experiência com administração e arquitetura da plataforma Databricks;Conhecimentos em Terraform, dbt e Elementary;Experiência em desenvolvimento de microsserviços e APIs;Conhecimentos em padrões de arquitetura de informação;Conhecimentos de modelagem multidimensional e data warehouse;Mindset Ágil;Experiência com ferramentas de DevOps (Jenkins, Kubernetes, Docker, etc); Additional informationO que a Warren te proporciona? Cultura de inovação com times multidisciplinares e estrutura horizontal, focados em desenvolver as melhores soluções para nossas pessoas usuárias.

Possibilidade de contribuir em frentes diversas para o seu crescimento.

RS:
Plano de Saúde Unimed POA para você e seus dependentes;
RS:
Plano Odontológico Qualimais (Unimed) para você e seus dependentes;Fora do
RS:
Plano de Saúde Seguros Unimed para você e seus dependentes;Fora do
RS:

Plano Odontológico Seguros Unimed e Care Plus para você e seus dependentes;Benefício VR e VA;Licença maternidade estendida;Licença paternidade estendida;Day off de aniversário;2 Day Offs remunerados por ano;Auxílio Creche;Auxílio Transporte;Programa de Partnership: seja uma pessoa sócia da Warren.

Bonificação Variável Semestral;TotalPass;Seguro de Vida Prudential.

#J-18808-Ljbffr