Empregos
>
São Paulo

    Senior Data Engineer - São Paulo, Brasil - A.P. Moller - Maersk

    A.P. Moller - Maersk
    A.P. Moller - Maersk São Paulo, Brasil

    há 3 semanas

    Default job background
    Descrição

    Here at Maersk we're embarking on an industry-defining transformation, on a bold new direction, expanding our capabilities to become a true end-to-end logistics provider that can deliver intelligent solutions for customers around the world.

    It's a big moment for all of us – and we all have our part to play.

    What We offer
    To work at Maersk is to work with the world. You'll learn from – and collaborate with – skilled professionals who literally move the world, every day.

    With a supportive environment to develop your skills, you'll gain access to world-class learning programmes to accelerate your career goals.

    And you'll find yourself welcome in our diverse and inclusive culture, where you are valued for who you are and rewarded for what you bring.

    Position description

    We are seeking an Azure Senior Data Engineer who has strong experience in DWH and ETL technologies on Big Data and Azure cloud and experience in real time data processing.

    Candidates must have strong communication skills that allow you to regularly deal with stakeholders, as well as with specialists from related fields including POs, architects, and other Engineers.

    They should show some proven experience in the architecture definition ensuring the scalability, reliability, and performance.


    What you'll be doing:


    Facilitate data integration, data conformity, data integrity and ensure data structures are designed for flexibility to support future business needs and enhancements.

    Design data warehouse models, ensuring data design follows the prescribed reference architecture framework while reflecting appropriate business rules built for logical, physical and conceptual model.

    Understand the relationships across business information and units of data, Reverse engineer data from various source systems.
    Collect, interpret and analyse large volumes of data across various business functions.
    Develop data collection systems, data analytics, and other strategies that optimize statistical efficiency and quality.
    Transform raw data into meaningful, understandable insights using statistical tools and techniques.
    Actively mentor and guide other Data Engineers, fostering a collaborative and knowledge-sharing culture within the team.
    Take a lead role in defining and implementing the overall data architecture, ensuring scalability, reliability, and performance
    Collaborate with different team members, including management, IT, and other stakeholders to understand data needs and deliver solutions.

    Data Security and Compliance:
    Implement and enforce data security measures to protect sensitive information; ensure compliance with data governance and privacy regulations.

    Documentation:
    Create and maintain comprehensive documentation for data processes, workflows and solutions; facilitate knowledge transfer within the team.

    To succeed in this role, we believe that you can offer:
    Bachelor's/Master's degree in Computer Science, Information Technology, or a related field.
    Demonexperience as a Data Engineer or in a similar role.
    Have experience cleansing, manipulating and analysing large datasets both structured and unstructured.
    Exceptional data

    Project experience using Azure cloud, data lake storage, Data factory, Spark/Databricks, Python or Java, Kafka (for streaming and real time data consumption).

    Experience using tools for efficient data virtualization, exploration, and transformation tools (Dremio)
    Experience in creating Batch and Realtime Data pipelines on Azure (preferentially).
    Experience in performance tuning of complex ETL mappings for relational and non-relational workloads.
    Advanced SQL programming, PySpark, PL/SQL or T-SQL, SparkSQL
    Hands on Unix scripting or PowerShell, experience with Azure PaaS services
    Hadoop Data Serialization mechanism line PARQUET, AVRO, ORC.

    Hands on experience in Azure, preferably data heavy / analytics applications leveraging relational and NoSQL databases, data warehouse and big data.

    Native speaker Portuguese and Advanced English (spoken, written, reading)
    Technical and English proficiency is differential


    Soft skills:
    Should be familiar with project management strategies and frameworks, such as Agile and Scrum.
    Business Understanding to transform business requirements into technical solutions.
    Clear Communication to be align with stakeholders, project managers and the internal team.

    Problem Solving:
    Ability to analyse problems, identify efficient solutions, and implement them is crucial.

    Collaboration and Teamwork:
    Effective teamwork is essential in data environments. This includes collaborating with data scientists, business analysts, and other team members to achieve.

    Analytical Skills:
    In addition to technical skills, the ability to think analytically is vital. This involves analysing data, identifying trends and insights, and making informed decisions.

    Adaptability and Continuous Learning to be able to demonstrate the willingness and ability to adapt to new technologies and methods, as well as a commitment to continuous learning.

    Critical Thinking to critically evaluate information and make informed decisions. This is crucial to ensuring data quality and the accuracy of analyses.
    Technical Leadership to be able to lead technical discussions with the development team.

    This is a big moment for us – we have a clear vision for the future of global trade and there's never been a more exciting time to take part.

    Are you ready?
    Maersk is committed to a diverse and inclusive workplace, and we embrace different styles of thinking.

    Maersk is an equal opportunities employer and welcomes applicants without regard to race, colour, gender, sex, age, religion, creed, national origin, ancestry, citizenship, marital status, sexual orientation, physical or mental disability, pregnancy, gender identity or any other characteristic protected by applicable law.

    We are happy to support your need for any adjustments during the application and hiring process.

    If you need special assistance or an accommodation to use our website, apply for a position, or to perform a job, please contact us by emailing
    .


    #J-18808-Ljbffr
  • Tata Consultancy Services

    Data Engineer

    há 2 semanas

    Tata Consultancy Services São Paulo, Brasil

    Tata Consultancy Services (TCS) é líder global em serviços de TI, consultoria e soluções de negócios com uma grande rede de centros de inovação e entrega. · Nossa missão é ajudar os clientes a alcançar seus objetivos de negócios, fornecendo consultoria inovadora e de primeira cla ...

  • Iteris

    Data Engineer

    há 2 semanas

    Iteris São Paulo, Brasil effective

    JOB DESCRIPTION · Somos a Iteris. · Uma empresa de tecnologia que desde 2009 integra o humano e o tecnológico visando agregar cada vez mais valor para a transformação digital dos nossos clientes. · Já somos mais de 900 pessoas apaixonadas por tecnologia e unidas por laços reais, ...

  • Remoto

    Data Engineer

    há 1 semana

    Remoto São Paulo, Brasil

    Desenvolver e manter pipelines de dados: Construir e manter sistemas de pipeline de dados robustos e eficientes para coleta, armazenamento e análise de grandes conjuntos de dados. · Experiência com Airflow, Clickhouse, S3 são valorizados · Otimização do Armazenamento de Dados: Im ...

  • Convenia Software Para Gestão De Rh

    Data Engineer

    há 2 semanas

    Convenia Software Para Gestão De Rh São Paulo, Brasil

    Transformar a rotina de RHs e DPs só é possível com pessoas que estão conectadas com nossos sonhos e que querem fazer parte da história que estamos construindo. · A missão como Data Engineer será construir e manter a infraestrutura dos dados, gerando insights e apoio para impulsi ...

  • ExitLag

    Data Engineer

    há 2 semanas

    ExitLag São Paulo, Brasil

    Desenvolver e manter pipelines de dados: Construir e manter sistemas de pipeline de dados robustos e eficientes para coleta, armazenamento e análise de grandes conjuntos de dados. · Experiência com Airflow, Clickhouse, S3 são valorizados · Otimização do Armazenamento de Dados: Im ...

  • Dexian Brasil

    Data Engineer

    há 2 semanas

    Dexian Brasil São Paulo, Brasil

    Quem somos: A Dexian é uma consultoria global de origem Americana focada em talentos para complementar a equipe de tecnologia da informação de nossos clientes. Estamos presente em 10 países, com 45 escritórios ao redor do mundo. Por mais de 25 anos, a Dexian atende indústrias e c ...

  • Geekhunter

    Data Engineer

    há 3 semanas

    Geekhunter São Paulo, Brasil

    Esta é uma vaga de um cliente da GeekHunter, candidate-se para ter acesso às informações completas sobre a empresa. O profissional será responsável em prover soluções técnicas para novas features e dar o suporte necessário as features já existentes, afinal, nem tudo são flores. E ...

  • Tata Consultancy Services

    Data Engineer

    há 1 semana

    Tata Consultancy Services São Paulo, Brasil

    Tata Consultancy Services (TCS) é líder global em serviços de TI, consultoria e soluções de negócios com uma grande rede de centros de inovação e entrega. · Nossa missão é ajudar os clientes a alcançar seus objetivos de negócios, fornecendo consultoria inovadora e de primeira cla ...

  • Invillia

    Data Engineer Sr

    há 3 dias

    Invillia Sao Paulo, Brasil

    RESPONSABILIDADES E ATRIBUIÇÕES · Principais atividades · . Desenvolver e manter processos de ingestão, tratamento, controle/segurança e disponibilização de dados para diferentes consumidores (serviços, front-end, entre outros); · . Participar de projetos envolvendo consumo de da ...

  • Softtek

    Senior Data Engineer

    há 1 semana

    Softtek São Paulo, Brasil

    Responsabilidade: · Apoiar na análise e levantamento de requisitos para as soluções envolvendo esteira de dados (Data Engineering); · Apoio na tomada de decisão e desenho de arquitetura das soluções de dados considerando atendimento aos requisitos de negócios, requisitos técnicos ...

  • Iteris Consultoria E Software Ltda

    Senior Data Engineer

    há 2 semanas

    Iteris Consultoria E Software Ltda São Paulo, Brasil

    Uma empresa de tecnologia que desde 2009 integra o humano e o tecnológico visando agregar cada vez mais valor para a transformação digital dos nossos clientes. · Já somos mais de 900 pessoas apaixonadas por tecnologia e unidas por laços reais, que acreditam que a excelência nos r ...

  • BTG Pactual

    Data Reliability Engineer

    há 2 semanas

    BTG Pactual São Paulo, Brasil

    Data Reliability Engineer (DRE) | Dados · na BTG Pactual São Paulo, São Paulo, Brazil No seu dia a dia: · Atuar junto à equipe de Data Analytics para desenhar, implementar, apoiar na construção e melhoria contínua dos serviços da Plataforma de Dados, visando a melhor custo ef ...

  • Creditas

    Data Engineer Sênior

    há 1 semana

    Creditas São Paulo, Brasil Tempo integral

    Creditas é uma plataforma digital focada em melhorar a vida das pessoas na América Latina em 3 ecossistemas: auto, imobiliário e benefícios corporativos. A empresa disponibiliza um amplo leque de produtos e serviços aos seus clientes, incluindo soluções fintech, seguros digitais ...

  • Geekhunter

    Data Engineer Pleno

    há 3 semanas

    Geekhunter São Paulo, Brasil

    BenefíciosVale refeiçãoVale alimentaçãoPlano de saúdePlano odontológicoAuxílio-crecheDesconto em farmáciaSeguro de vidaVale academiaParticipações nos lucrosRequisitosTecnologias NecessáriasConhecimentos obrigatóriosGoogle CloudPythonTecnologias DesejáveisConhecimentos não obrigat ...

  • Invillia

    Mid Data Engineer

    há 3 semanas

    Invillia São Paulo, Brasil

    RESPONSABILIDADES E ATRIBUIÇÕESApoiar nas definições técnicas do ecossistema de dados com plataforma Google CloudImplementar melhorias na arquitetura e processos para melhorar a performance, monitoração e evolução dos produtos de dados.Desenvolver e manter processos de ingestão, ...

  • Invillia

    Data Engineer Sr

    há 3 dias

    Invillia São Paulo, Brasil

    RESPONSABILIDADES E ATRIBUIÇÕESPrincipais atividades. Desenvolver e manter processos de ingestão, tratamento, controle/segurança e disponibilização ...

  • Invillia

    Mid Data Engineer

    há 1 semana

    Invillia São Paulo, Brasil

    RESPONSABILIDADES E ATRIBUIÇÕES · Apoiar nas definições técnicas do ecossistema de dados com plataforma Google Cloud · Implementar melhorias na arquitetura e processos para melhorar a performance, monitoração e evolução dos produtos de dados. · Desenvolver e manter processos de i ...

  • Invillia

    Mid Data Engineer

    há 1 semana

    Invillia São Paulo, Brasil

    RESPONSABILIDADES E ATRIBUIÇÕESApoiar nas definições técnicas do ecossistema de dados com plataforma Google CloudImplementar melhorias na arquitetura e processos para melhorar a performance, monitoração e evolução dos produtos de dados.Desenvolver e manter processos de ingestão, ...

  • Invillia

    Mid Data Engineer

    há 3 semanas

    Invillia São Paulo, Brasil

    RESPONSABILIDADES E ATRIBUIÇÕES. Apoiar nas definições técnicas do ecossistema de dados com plataforma Google Cloud. Implementar melhorias na ...

  • Creditas

    Data Engineer Sênior

    há 3 semanas

    Creditas São Paulo, Brasil

    Creditas é uma plataforma digital focada em melhorar a vida das pessoas na América Latina em 3 ecossistemas: auto, imobiliário e benefícios corporativos. A empresa disponibiliza um amplo leque de produtos e serviços aos seus clientes, incluindo soluções fintech, seguros digitais ...