Engenheiro de Dados Sênior - Brasília, Brasil - Amazing Devs

    Amazing Devs
    Default job background
    Descrição
    Engenheiro de Dados Sênior

    Descrição da vaga:

    Remoto - Engenheiro de Dados - Senior -Banco de TalentosNosso diferencial está nas pessoas, no conhecimento técnico, experiência de mercado e na capacidade de atuar em qualquer etapa, do início ao fim, da cadeia de valor, o que se traduz em inovação.

    Venha fazer parte de nosso banco de talentos e seja notado por diversas empresas de TI.Buscamos desenvolvedores com uma sólida experiência de mercado.

    ObrigatórioMais de 7 anos de experiência Python Spark SQL ETL Cloud Services


    Salário:
    a combinar

    ResponsabilidadesImplementar soluções à partir de definições de negócioCriar testes automatizados para garantir a qualidade das entregasRealizar Code Review periódicamenteParticipar de definições junto ao time das melhores soluções arquiteturais, tanto para o Front-End quanto para o Back-EndPropor melhorias no Produto apresentando suas idéias durante as reuniõesMentoria e suporte aos outros desenvolvedoresCorrigir os problemas encontrados no produto


    DescriçãoAqui está o que você fará no seu trabalho diário:Projete e implemente recursos de produtos em colaboração com proprietários de produtos, desenvolvedores de relatórios, analistas de produtos, arquitetos e parceiros de negócios dentro de uma metodologia Agile/Scrum.

    Projete e implemente plataformas de dados para requisitos escaláveis, de alto desempenho e em grande escala, integrando dados de diversas fontes de dados e gerenciando dados estruturados e não estruturados, ao mesmo tempo que combina estruturas de armazenamento existentes.

    Analise, diagnostique e identifique gargalos em fluxos de trabalho de dadosParticipar de demonstrações para clientes e requisitos para sistemas (funcionais e não funcionais).Monitore, refine e relate constantemente o desempenho dos sistemas de gerenciamento de dados.

    Para ter sucesso nesta função, você deve ter:Fortes habilidades de programação com Python.
    Sólida experiência com Spark.

    Fundações sólidas de engenharia (boas práticas de codificação, boas habilidades de design arquitetônico).Experiência em trabalhar com SQL em cenários avançados que exigem grande otimização.

    Mais de 7 anos de experiência com engenharia de dados em larga escala, com ênfase em análises e relatóriosMais de 3 anos de experiência desenvolvendo em ecossistema semelhante ao HadoopExperiência na construção de soluções Data Lake escalonáveis em nuvem, em tempo real e de alto desempenho.

    Proficiência em projetar e implementar processos ETL (Extrair, Transformar, Carregar), lidando com grandes volumes de dados (terabytes de dados que exigiam processamento distribuído)Experiência no desenvolvimento de soluções em Cloud Services (AWS, GCP ou Azure)Experiência com bancos de dados NoSQL como Apache HBase, MongoDB ou Cassandra.

    Experiência em tecnologias de processamento de fluxos de dados, incluindo Kafka, Spark Streaming, etc...


    Sobre a Empresa - Somos Amazing DevsComo uma empresa 100% brasileira, possuímos os melhores talentos de TI e atuamos no território nacional e internacional.

    Venha fazer parte do nosso time.

    Diversidade e InclusãoAcreditamos na importância de praticar o respeito às diferenças, comportamento que conversa com nosso valor "Ética".

    Por isso, trabalhamos continuamente para garantirmos um ambiente plural e inclusivo onde as pessoas se sintam valorizadas e possam ser elas mesmas.

    Além de impactar diretamente no engajamento das pessoas profissionais, tem-se como benefício o maior estímulo à inovação e a geração de vantagens competitivas ao negócio.

    Construímos ações com o foco em gênero, étnico-racial, LGBTQIAP+ e pessoas com deficiência.

    Atuar na valorização da diversidade, através do estabelecimento de políticas e ações que assegurem a promoção da inclusão em uma cultura organizacional de respeito entre as diferenças é o nosso principal valor e buscamos sempre fortalecer os nossos pilares de Diversidade e Inclusão.

    #Python #Spark #SQL #ETL #CloudServices