aplica.ai
EntrarCriar conta

Databricks Data Engineer | Senior (Remote)

Compass UOL · Remoto · Remote · CLT

Recebendo candidaturas · conferida em 30/10

Ficha da vaga

Modelo
Remoto
Onde aceita
Não informado
Senioridade
Sênior
Salário
Salário não divulgado
Contrato
CLT

Fonte: Gupy · Ver vaga original →

  • python dados
  • sql
  • git github
  • ci cd

Organizei a descrição em seções com IA. O texto completo da vaga está logo abaixo.

Sobre a vaga

Compass UOL seeks a Senior Databricks Data Engineer to work on the construction, migration, and evolution of data engineering solutions in Databricks environments.

O que você vai fazer

  • Atuação na construção, migração e evolução de soluções de Engenharia de Dados em ambientes Databricks
  • Desenvolvimento e manutenção de pipelines de dados escaláveis, confiáveis e performáticos
  • Implementação de processos de ingestão, transformação e disponibilização de dados utilizando Spark e PySpark
  • Atuação em arquiteturas Data Lake e Data Lakehouse, com implementação do modelo Medallion (Bronze, Silver e Gold)
  • Interpretação de regras de negócio e tradução em processos e soluções de dados

O que pedem

  • Domínio de PySpark, Apache Spark e SQL
  • Experiência com Delta Lake, Delta Tables, Unity Catalog e Lakeflow Declarative Pipelines
  • Conhecimento em Lakeflow Connect para ingestão de dados
  • Experiência com Jobs, Workflows, orquestração e monitoramento de pipelines
  • Vivência com arquitetura Lakehouse e modelo Medallion (Bronze, Silver e Gold)

Descrição completa da vaga

.Responsabilidades e atribuições Atuação na construção, migração e evolução de soluções de Engenharia de Dados em ambientes Databricks;Desenvolvimento e manutenção de pipelines de dados escaláveis, confiáveis e performáticos;Implementação de processos de ingestão, transformação e disponibilização de dados utilizando Spark e PySpark;Atuação em arquiteturas Data Lake e Data Lakehouse, com implementação do modelo Medallion (Bronze, Silver e Gold);Interpretação de regras de negócio e tradução em processos e soluções de dados;Participação em projetos de migração e modernização de plataformas de dados;Garantia de qualidade, performance, monitoramento e confiabilidade dos pipelines.

Requisitos e qualificações Domínio de PySpark, Apache Spark e SQL;Experiência com Delta Lake, Delta Tables, Unity Catalog e Lakeflow Declarative Pipelines;Conhecimento em Lakeflow Connect para ingestão de dados;Experiência com Jobs, Workflows, orquestração e monitoramento de pipelines;Vivência com arquitetura Lakehouse e modelo Medallion (Bronze, Silver e Gold);Experiência com migração de plataformas ou desenvolvimento de projetos em Databricks;Conhecimento de Git, CI/CD e boas práticas de desenvolvimento e deploy;Conhecimento de ferramentas e tecnologias como Airflow, Kafka, dbt, AWS Glue e BigQuery;Experiência com bancos SQL/NoSQL, como PostgreSQL, MongoDB ou Cassandra.Diferencial: Experiência em projetos contábeis e financeiros, certificação Databricks Certified Data Engineer Associate.

Perguntas e respostas sobre a vaga

Aceita candidatos de onde?
A vaga não diz.
Qual o regime de contratação?
CLT.
É remota?
Sim, é remota.
Informa salário?
Não, a vaga não divulga.

Nenhuma vaga séria cobra para você se candidatar, e eu nunca peço dado bancário dentro de uma candidatura. O plano pago é cobrado só pelo Asaas, meu parceiro de pagamento.

Vagas parecidas

Candidatar com o aplica.ai

Leva 2 minutos, só o CV.