Data Engineer - Alphaville - Barueri, BR, .-, Brasil - GFT Technologies

Descrição

O que buscamos:
Profissional que atue com ENGENHARIA DE DADOS, cujo principal desafio dentro do projeto é apoiar o desenvolvimento contínuo das iniciativas de Memória Digital em um projeto internacional


Responsabilidades:

Atualizar e aprimorar scripts pyspark existentes em execução no EMR no EKS, potencialmente criar novos scripts pyspark; Atualizar e aprimorar scripts API Lambda existentes (python) e ajudar na análise dos dados resultantes para insights de negócios.

Há potencial para se envolver no desenvolvimento de painéis de qualidade de dados do Tableau, bem como alguma exposição adjacente ao design e desenvolvimento de modelos de ML e LLM, mas a função principal será apoiar as necessidades de engenharia de dados da equipe.

Desenvolver código baseado em lógica de transformação complexa. A configuração de testes estruturados para essas soluções também será uma prioridade futura.


Requisitos e Qualificações:
Inglês avançado/fluente (C1/C2); Python; Pyspark ou Spark; SQL; Experiência com ferramentas AWS, EMR, Funções Lambda; Sagemaker Notebook; Jira; Metodologias ágeis


Desejáveis:

Integração de API Opensearch DynamoDB Git, experiência CI/CD Tableau Descrição comportamental: Procuramos uma pessoa que: Goste de trabalhar em equipe e seja colaborativa em suas atribuições; Tenha coragem para se desafiar e ir além, abraçando novas oportunidades de crescimento; Transforme ideias em soluções criativas e busque qualidade em toda sua rotina; Tenha habilidades de resolução de problemas; Possua habilidade e se sinta confortável para trabalhar de forma independente e gerenciar o próprio tempo; Tenha interesse em lidar com situações adversas e inovadoras no âmbito tecnológico.

Big enough to deliver – small enough to care. #VempraGFT #VamosVoarJuntos #ProudToBeGFT