Engenheiro de Dados Pl
Genial Investimentos · Híbrido · São Paulo, SP · CLT
Recebendo candidaturas · conferida em 14/11
Ficha da vaga
- Modelo
- Híbrido
- Onde aceita
- Aceita candidatos do Brasil
- Senioridade
- Pleno
- Salário
- Salário não divulgado
- Contrato
- CLT
Fonte: Gupy · Ver vaga original →
- python
- sql
- git github
- api rest
- cloud basico
Organizei a descrição em seções com IA. O texto completo da vaga está logo abaixo.
Sobre a vaga
A Genial Investimentos busca um Engenheiro de Dados Pleno para atuar no desenvolvimento de pipelines, modelagem de dados e integração com serviços AWS, trabalhando em modelo remoto.
O que você vai fazer
- Desenvolver e evoluir pipelines de dados batch e streaming utilizando Python, Spark e Databricks.
- Construir integrações com bancos de dados, APIs e serviços AWS.
- Modelar e transformar dados seguindo os padrões de arquitetura e qualidade da plataforma.
- Monitorar pipelines em produção, atuando na investigação de falhas, performance e causa raiz.
- Participar de code reviews e contribuir para a evolução dos padrões de engenharia do time.
O que pedem
- Python sólido para engenharia de dados, com boas práticas de desenvolvimento, testes e tratamento de erros.
- SQL, incluindo CTEs, window functions e otimização de queries.
- Apache Spark / PySpark, com entendimento de particionamento, shuffle, joins, cache e planos de execução.
- Delta Lake, incluindo MERGE, OPTIMIZE, VACUUM, schema evolution e estratégias de reprocessamento.
- Databricks, com experiência em Jobs/Workflows e conhecimentos de Unity Catalog.
Remuneração e benefícios
- Plano de saúde
- Plano odontológico
- Vale refeição e alimentação
- Seguro de vida
- Wellhub (Gympass)
Descrição completa da vaga
Buscamos profissionais que tenham vontade de crescer, colocar a mão na massa e fazer acontecer. Vivemos um momento único, recheado de desafios e oportunidades para agregar ainda mais valor aos nossos clientes. Se você tem esse perfil e essa ambição, inscreva-se nesta vaga e junte-se a nós para construir o futuro do mercado financeiro.#VemSerGenialResponsabilidades e atribuições Desenvolver e evoluir pipelines de dados batch e streaming utilizando Python, Spark e Databricks.Construir integrações com bancos de dados, APIs e serviços AWS.Modelar e transformar dados seguindo os padrões de arquitetura e qualidade da plataforma.Monitorar pipelines em produção, atuando na investigação de falhas, performance e causa raiz.Participar de code reviews e contribuir para a evolução dos padrões de engenharia do time.Trabalhar próximo às áreas de negócio para entender requisitos e transformar necessidades em soluções de dados.Garantir boas práticas de qualidade, segurança, governança e observabilidade dos dados.
Requisitos e qualificaçõesPython sólido para engenharia de dados, com boas práticas de desenvolvimento, testes e tratamento de erros.SQL, incluindo CTEs, window functions e otimização de queries.Apache Spark / PySpark, com entendimento de particionamento, shuffle, joins, cache e planos de execução.Delta Lake, incluindo MERGE, OPTIMIZE, VACUUM, schema evolution e estratégias de reprocessamento.Databricks, com experiência em Jobs/Workflows e conhecimentos de Unity Catalog.AWS para dados, principalmente S3, IAM e serviços de integração/mensageria.Modelagem dimensional e arquitetura em camadas, incluindo SCD tipos 1 e 2.Git e desenvolvimento via pull request.Experiência com ingestão de bancos relacionais e APIs REST.DiferenciaisExperiência no mercado financeiro.Structured Streaming.Databricks Asset Bundles e Terraform.CI/CD para pipelines de dados.Delta Lake, incluindo MERGE, OPTIMIZE, VACUUM, schema evolution e estratégias de reprocessamento.Informações adicionaisAssistência MédicaAssistência OdontológicaVale RefeiçãoVale AlimentaçãoSeguro de VidaTotal PassGymPassAux. CrechePPRSão Paulo, modelo Remoto
Perguntas e respostas sobre a vaga
- Aceita candidatos de onde?
- Aceita candidatos do Brasil.
- Qual o regime de contratação?
- CLT.
- É remota?
- Não, é híbrida.
- Informa salário?
- Não, a vaga não divulga.
Nenhuma vaga séria cobra para você se candidatar, e eu nunca peço dado bancário dentro de uma candidatura. O plano pago é cobrado só pelo Asaas, meu parceiro de pagamento.
Vagas parecidas
Data Engineer
hojeCDC Foundation · Remoto · Américas
$103,500 - $143,500 annually
- analise dados
- sql
- python
Engenheiro de Dados Sênior
há 1 diaEngenheiro de Dados Sênior N8N
há 1 dia