Engenheiro de Dados Databricks Pleno N/I NOVO

NOSSO NEGÓCIO

Aqui na Programmers, aceleramos grandes ideias com inovação e tecnologia. Com uma trajetória de mais de 30 anos, o que nos move são os desafios em construir ideias em soluções reais, para que nossos clientes sejam referências no segmento que atuam.

Especialistas em desenvolvimento de software e inteligência de dados, temos uma relação de transparência, confiança, credibilidade e reconhecimento neste mercado.

Nosso maior sonho? Impactar empresas e pessoas.

O QUE ESPERAMOS DE VOCÊ?

Estamos buscando um(a) Engenheiro(a) de Dados Pleno para atuar no desenvolvimento de produtos de dados voltados para BI generativo, analytics conversacional e soluções com inteligência artificial.

Nesta função, você trabalhará na construção de modelos, métricas e contextos que permitam o consumo confiável dos dados por usuários de negócio e aplicações baseadas em LLMs.

RESPONSABILIDADES:

• Projetar, desenvolver e implantar pipelines de dados ETL/ELT escaláveis no Databricks usando PySpark, SQL e Delta Lake.

• Desenvolver e evoluir produtos de dados para analytics conversacional.

• Otimizar o desempenho dos pipelines de dados e gerenciar fluxos de trabalho utilizando Jobs, Workflows e notebooks do Databricks.

• Ingerir, limpar, transformar e processar dados estruturados e não estruturados provenientes de diversas fontes (armazenamento em nuvem, APIs, RDBMS, etc.).

• Implementar verificações de qualidade dos dados, validações e mecanismos de monitoramento.

• Colaborar com arquitetos de dados, analistas e usuários de negócios para traduzir requisitos em modelos e pipelines de dados.

• Gerenciar e monitorar a execução dos pipelines com ferramentas como Databricks Workflows ou Airflow.

• Garantir governança de dados, rastreabilidade e conformidade com boas práticas de segurança e privacidade (ex.: Unity Catalog, controle baseado em funções).

• Contribuir para a melhoria contínua da plataforma de dados por meio de automação, reutilização e documentação.

PARA ESSA OPORTUNIDADE VOCÊ PRECISA TER:

• Experiência prática em engenharia de dados, trabalhando com Databricks.
• Experiência com Databricks, especialmente Unity Catalog, SQL Warehouses e Genie.
• Experiência em PySpark, SQL e processamento distribuído de dados.
• Familiaridade com LLMs, engenharia de contexto, prompt engineering e avaliação de respostas de IA.
• Boa comunicação e capacidade de interagir com gestores, diretoria e C-level.

SERIAM PONTOS DE DESTAQUE SE VOCÊ TIVER:

• Certificação Databricks (ex.: Databricks Certified Data Engineer Associate/Professional) é altamente desejável.
• Experiência com produtos de IA em ambientes corporativos.

INFORMAÇÕES ADICIONAIS

Modelo de trabalho: híbrido, com três dias presenciais e dois dias remotos.

Local de atuação: Eldorado do Sul/RS.

PARA UMA VIDA MAIS SAUDÁVEL, TE PROPORCIONAMOS:

• Plano de saúde, com cobertura nacional
• Plano odontológico
• Convênio com Sesc
• Wellhub

TE APOIAMOS COM:

• Vale refeição ou alimentação
• Auxílio creche
• Participação nos resultados
• Licença parental estendida
• Plano de desenvolvimento individual/anual com subsídio para capacitação
• Treinamento do idioma inglês
• Programa de intercâmbio (USA)

Nossas vagas são para todos!
Valorizamos a diversidade, pois ela impulsiona a inovação, fortalece nossas soluções e torna nosso ambiente mais inclusivo. Cada diferença é uma oportunidade de aprendizado, tornando nosso dia a dia mais inspirador e nossas entregas ainda melhores.