Empregos
>
São Paulo

    Senior Data Engineer - São Paulo, Brasil - Maersk

    Maersk
    Default job background
    Descrição

    Here at Maersk we're embarking on an industry-defining transformation, on a bold new direction, expanding our capabilities to become a true end-to-end logistics provider that can deliver intelligent solutions for customers around the world.

    It's a big moment for all of us – and we all have our part to play.

    What We offer
    To work at Maersk is to work with the world. You'll learn from – and collaborate with – skilled professionals who literally move the world, every day.

    With a supportive environment to develop your skills, you'll gain access to world-class learning programmes to accelerate your career goals.

    And you'll find yourself welcome in our diverse and inclusive culture, where you are valued for who you are and rewarded for what you bring.

    Position description

    We are seeking an Azure Senior Data Engineer who has strong experience in DWH and ETL technologies on Big Data and Azure cloud and experience in real time data processing.

    Candidates must have strong communication skills that allow you to regularly deal with stakeholders, as well as with specialists from related fields including POs, architects, and other Engineers.

    They should show some proven experience in the architecture definition ensuring the scalability, reliability, and performance.


    What you'll be doing:

    Facilitate data integration, data conformity, data integrity and ensure data structures are designed for flexibility to support future business needs and enhancements.

    Design data warehouse models, ensuring data design follows the prescribed reference architecture framework while reflecting appropriate business rules built for logical, physical and conceptual model.

    Understand the relationships across business information and units of data, Reverse engineer data from various source systems.
    Collect, interpret and analyse large volumes of data across various business functions.
    Develop data collection systems, data analytics, and other strategies that optimize statistical efficiency and quality.
    Transform raw data into meaningful, understandable insights using statistical tools and techniques.
    Actively mentor and guide other Data Engineers, fostering a collaborative and knowledge-sharing culture within the team.
    Take a lead role in defining and implementing the overall data architecture, ensuring scalability, reliability, and performance
    Collaborate with different team members, including management, IT, and other stakeholders to understand data needs and deliver solutions.

    Data Security and Compliance:
    Implement and enforce data security measures to protect sensitive information; ensure compliance with data governance and privacy regulations.

    Documentation:
    Create and maintain comprehensive documentation for data processes, workflows and solutions; facilitate knowledge transfer within the team.

    To succeed in this role, we believe that you can offer:
    Bachelor's/Master's degree in Computer Science, Information Technology, or a related field.
    Demonexperience as a Data Engineer or in a similar role.
    Have experience cleansing, manipulating and analysing large datasets both structured and unstructured.
    Exceptional data

    Project experience using Azure cloud, data lake storage, Data factory, Spark/Databricks, Python or Java, Kafka (for streaming and real time data consumption).

    Experience using tools for efficient data virtualization, exploration, and transformation tools (Dremio)
    Experience in creating Batch and Realtime Data pipelines on Azure (preferentially).
    Experience in performance tuning of complex ETL mappings for relational and non-relational workloads.
    Advanced SQL programming, PySpark, PL/SQL or T-SQL, SparkSQL
    Hands on Unix scripting or PowerShell, experience with Azure PaaS services
    Hadoop Data Serialization mechanism line PARQUET, AVRO, ORC.

    Hands on experience in Azure, preferably data heavy / analytics applications leveraging relational and NoSQL databases, data warehouse and big data.

    Native speaker Portuguese and Advanced English (spoken, written, reading)
    Technical and English proficiency is differential


    Soft skills:
    Should be familiar with project management strategies and frameworks, such as Agile and Scrum.
    Business Understanding to transform business requirements into technical solutions.
    Clear Communication to be align with stakeholders, project managers and the internal team.

    Problem Solving:
    Ability to analyse problems, identify efficient solutions, and implement them is crucial.

    Collaboration and Teamwork:
    Effective teamwork is essential in data environments. This includes collaborating with data scientists, business analysts, and other team members to achieve.

    Analytical Skills:
    In addition to technical skills, the ability to think analytically is vital. This involves analysing data, identifying trends and insights, and making informed decisions.

    Adaptability and Continuous Learning to be able to demonstrate the willingness and ability to adapt to new technologies and methods, as well as a commitment to continuous learning.

    Critical Thinking to critically evaluate information and make informed decisions. This is crucial to ensuring data quality and the accuracy of analyses.
    Technical Leadership to be able to lead technical discussions with the development team.

    This is a big moment for us – we have a clear vision for the future of global trade and there's never been a more exciting time to take part.

    Are you ready?

    Maersk is committed to a diverse and inclusive workplace, and we embrace different styles of thinking.

    Maersk is an equal opportunities employer and welcomes applicants without regard to race, colour, gender, sex, age, religion, creed, national origin, ancestry, citizenship, marital status, sexual orientation, physical or mental disability, pregnancy, gender identity or any other characteristic protected by applicable law.


    We are happy to support your need for any adjustments during the application and hiring process. If you need special assistance or an accommodation to use our website, apply for a position, or to perform a job, please contact us by emailing

  • Iteris

    Data Engineer

    há 20 horas


    Iteris São Paulo, Brasil effective

    JOB DESCRIPTION · Somos a Iteris. · Uma empresa de tecnologia que desde 2009 integra o humano e o tecnológico visando agregar cada vez mais valor para a transformação digital dos nossos clientes. · Já somos mais de 900 pessoas apaixonadas por tecnologia e unidas por laços reais, ...

  • ExitLag

    Data Engineer

    há 20 horas


    ExitLag São Paulo, Brasil

    Desenvolver e manter pipelines de dados: Construir e manter sistemas de pipeline de dados robustos e eficientes para coleta, armazenamento e análise de grandes conjuntos de dados. · Experiência com Airflow, Clickhouse, S3 são valorizados · Otimização do Armazenamento de Dados: Im ...

  • GeekHunter

    Data Engineer

    há 20 horas


    GeekHunter São Paulo, Brasil

    · Esta é uma vaga de um cliente da GeekHunter, candidate-se para ter acesso às informações completas sobre a empresa. · O profissional será responsável em prover soluções técnicas para novas features e dar o suporte necessário as features já existentes, afinal, nem tudo são flor ...


  • BTG Pactual São Paulo, Brasil

    Data Reliability Engineer (DRE) | Dados · na BTG Pactual São Paulo, São Paulo, Brazil No seu dia a dia: · Atuar junto à equipe de Data Analytics para desenhar, implementar, apoiar na construção e melhoria contínua dos serviços da Plataforma de Dados, visando a melhor custo ef ...

  • Creditas

    Data Engineer Sênior

    há 20 horas


    Creditas São Paulo, Brasil

    Creditas é uma plataforma digital focada em melhorar a vida das pessoas na América Latina em 3 ecossistemas: auto, imobiliário e benefícios corporativos. A empresa disponibiliza um amplo leque de produtos e serviços aos seus clientes, incluindo soluções fintech, seguros digitais ...

  • GeekHunter

    Data Engineer BigData

    há 20 horas


    GeekHunter São Paulo, Brasil

    · Esta é uma vaga de um cliente da GeekHunter, candidate-se para ter acesso às informações completas sobre a empresa. · Diferenciais: · Conhecimento do ciclo de vida das informações e dos modelos, seus processos e indicadores de qualidade e governança; · Experiência com software ...

  • GeekHunter

    Data Engineer Sênior

    há 4 horas


    GeekHunter São Paulo, Brasil

    · Esta é uma vaga de um cliente da GeekHunter, candidate-se para ter acesso às informações completas sobre a empresa. · Ter experiência em escrever pipelines de dados modernos implantados na nuvem. · Ter trabalhado em equipes ágeis para entregar software de forma iterativa. · Se ...

  • Zup Innovation

    Pessoa Data Engineer

    há 8 horas


    Zup Innovation São Paulo, Brasil

    Por que ser zupper? · Vamos direto ao ponto: o que oferecemos é um ambiente de crescimento exponencial. Mais do que palavras bonitas, isso significa que oferecemos todas as oportunidades para que você possa protagonizar sua evolução e todo o suporte necessário. · Como protagonis ...


  • XP Inc São Paulo, Brasil Permanent

    Sobre nós · Muitos acham que sonhamos grande demais, mas na XP Inc. acreditamos no impossível. Nossa história começou em 2001, com um pequeno escritório de agentes autônomos de investimentos em Porto Alegre e hoje somos um grande ecossistema de serviços financeiros, mídia e educ ...


  • GeekHunter São Paulo, Brasil

    · Esta é uma vaga de um cliente da GeekHunter, candidate-se para ter acesso às informações completas sobre a empresa. · Prioridade de nuvem Azure, legado na AWS · Python, ingestão de pipelines · Pyspark · Data Lake Azure, padrão Delta Lake do Databricks · Airflow é a ferramenta ...


  • Creditas São Paulo, Brasil

    Creditas é uma plataforma digital focada em melhorar a vida das pessoas na América Latina em 3 ecossistemas: auto, imobiliário e benefícios corporativos. A empresa disponibiliza um amplo leque de produtos e serviços aos seus clientes, incluindo soluções fintech, seguros digitais ...


  • Experian São Paulo, Brasil Tempo integral

    Job Description · Área: Data Lab · Subárea: Data Engineer · As principais atividades: · Atuar em conjunto com os demais líderes técnicos para desenhar as soluções técnicas dos produtos. · Desenvolver pipelines de dados e preparar a infraestrutura necessária para disponibilizá-l ...


  • Santander São Paulo, Brasil Tempo integral

    Data Engineer Spec IICountry: Brazil Requisitos ImprescindívelExperiência em ambiente BigData na Cloud Azure.Experiência em processos de ingestão de dados Batch e Near real-time.Experiência em: Scala, Pyspark e Spark SQL.Experiência em: Databricks.Conhecimento em metodologias áge ...


  • Knewin São Paulo, Brasil

    Company Description Somos uma empresa global, líder em serviços de informação, conhecida no restante do mundo como Experian. Nos grandes momentos da vida, como a compra de um carro, a ida de um filho para a faculdade ou mesmo a abertura e expansão de um negócio, estamos presentes ...


  • GeekHunter São Paulo, Brasil

    · Esta é uma vaga de um cliente da GeekHunter, candidate-se para ter acesso às informações completas sobre a empresa. · Um indivíduo altamente motivado que adora trabalhar como parte de uma equipe de alto desempenho · Colaborativo, um comunicador sólido e que trabalhe bem com su ...


  • Warren Brasil São Paulo, Brasil

    Job descriptionNa Warren, confiança é a base de tudo. Nossos clientes sabem, com total transparência, como seus investimentos são geridos, quais as taxas envolvidas e o nível de risco de cada um. Nosso propósito é eliminar o conflito de interesses no mercado de investimentos bras ...


  • Keyrus São Paulo, Brasil

    A Keyrus acredita na diversidade e na inclusão. Encorajamos a todos a participarem em nosso processo de contratação, não importando o gênero, idade, raça, religião. Não permitimos nenhum tipo de discriminação. Isto é reforçado no processo de contratação e vivido dessa forma na em ...

  • GFT Technologies SE

    Data Engineer

    há 1 hora


    GFT Technologies SE Alphaville-Barueri, Brasil

    O que buscamos: · Profissional que atue com ENGENHARIA DE DADOS, para um projeto global da GFT que consiste na construção do DWH corporativo. · Responsabilidades: · Monitorar e solucionar problemas do ambiente do Banco de Dados SQL do Azure e dos processos ETL (desde a identific ...


  • Keyrus Brazil São Paulo, Brasil

    A Keyrus acredita na diversidade e na inclusão. Encorajamos a todos a participarem em nosso processo de contratação, não importando o gênero, idade, raça, religião. Não permitimos nenhum tipo de discriminação. Isto é reforçado no processo de contratação e vivido dessa forma na em ...

  • GFT Technologies

    Data Engineer

    há 6 dias


    GFT Technologies Alphaville - Barueri, BR, .-, Brasil Tempo integral

    O que buscamos: Profissional que atue com ENGENHARIA DE DADOS, cujo principal desafio dentro do projeto é apoiar o desenvolvimento contínuo das iniciativas de Memória Digital em um projeto internacional. Responsabilidades: Atualizar e aprimorar scripts pyspark existentes em execu ...