Data Engineer AWS N/I NOVO

Descrição da Vaga:
Profissional responsável por construir e sustentar pipelines de dados resilientes e escaláveis no ambiente (AWS), garantindo que os produtos de dados regulatórios cheguem ao destino sem latência ou falhas.

Projeto:
O projeto visa a adequação técnica e operacional da empresa às exigências da Resolução Conjunta BCB nº 18 (Banco Central do Brasil). O foco é transformar a Política Corporativa de Qualidade de Dados em uma operação real e auditável através das ferramentas já existentes nas companhias, garantindo o atendimento ao prazo regulatório.

Tamanho do Projeto:
Evolução e expansão de uma base de mais de 1.400 testes existentes para cobrir as 24 obrigações da RC 18.

Responsabilidade:
\Criar o “Selo de Confiança” dos dados, garantindo que as evidências operacionais para o regulador sejam concretas e auditáveis.

Atribuições:

\Configurar suítes de expectativas por domínio crítico da RC 18.

\Integrar validações de qualidade nos pipelines de Airflow/Spark/EMR.

\Assegurar cobertura das tabelas finais do Data Lake (corrigindo lacunas atuais).

\Automatizar validações pré-envio de CADOCs e gerar logs auditáveis

Outros Requisitos e qualificações, ferramentas, habilidades, cursos e certificações:

\Ferramentas: Domínio absoluto de Great Expectations, Python, e ecossistema AWS (EMR, Spark).

\Habilidades: Implementação de regras de completude, tempestividade e rastreabilidade

Benefícios MJV:
TotalPass\Wellhub;
‍‍‍‍ Seguro de vida em grupo;
Vale Refeição/ Alimentação;
Plano de saúde e odontológico – Bradesco;
Ações de treinamento: palestras, fóruns, trocas e conversas de conhecimentos relativos ao nosso negócio. Estamos em constante conexão para aprender mais e juntos;
Programa +MJVer: programa interno de indicação onde você indica um colega para trabalhar conosco e se esse relacionamento der match, você ganha um prêmio.
Parcerias: quer desconto? Temos um grupo no Workplace onde divulgamos parcerias com instituições de ensino, escolas de idiomas, academias, restaurantes, produtos e outros serviços.