Engenheiro de Dados Sênior | Automações com IA | Azure e AWS
Lumini IT Solutions · Remoto · Remote Brasil
Recebendo candidaturas · conferida em 22/09
Ficha da vaga
- Modelo
- Remoto
- Onde aceita
- Aceita candidatos do Brasil
- Senioridade
- Sênior
- Salário
- Salário não divulgado
Fonte: Gupy · Ver vaga original →
- api rest
- cloud basico
- git github
- python
- sql
Organizei a descrição em seções com IA. O texto completo da vaga está logo abaixo.
Sobre a vaga
A Lumini IT Solutions busca um Engenheiro de Dados Sênior para atuar remotamente em projetos de modernização, IA e automação, construindo pipelines em Azure e AWS.
O que você vai fazer
- Projetar e desenvolver pipelines de ingestão de dados a partir de fontes diversas (ETLs, APIs, bancos relacionais e não relacionais, arquivos, sensores de telemetria, etc.);
- Integrar e consolidar dados de diferentes fontes nos ecossistemas Azure e AWS, garantindo qualidade, consistência e confiabilidade;
- Implementar arquiteturas de referência para o processamento e armazenamento de dados;
- Criar e gerenciar Data Lakes, Data Warehouses e Data Marts;
- Desenvolver e otimizar processos de ETL/ELT utilizando ferramentas como Azure Data Factory, Databricks, Synapse Analytics, AWS Glue, AWS Lambda e Redshift;
O que pedem
- Experiência sólida como Engenheiro de Dados na construção de pipelines escaláveis;
- Domínio de soluções em nuvem na AWS (S3, Redshift, Glue, Athena) e Azure (Data Factory, Synapse, Databricks, Azure SQL, Blob Storage, Monitoramento);
- Experiência na integração de dados via APIs REST/SOAP e no processamento em tempo real;
- Domínio de bancos de dados relacionais (SQL Server, PostgreSQL) e não relacionais (CosmosDB, DynamoDB, MongoDB);
- Proficiência em Python, Spark, SQL e PowerShell/Bash para manipulação e engenharia de dados;
Descrição completa da vaga
UTILIZE A SUA PAIXÃO POR TECNOLOGIA PARA CAUSAR IMPACTO POSITIVO E #VemSerLuminiITAqui na Lumini IT a inovação e a resiliência fazem parte da nossa rotina.Somos uma empresa de soluções de TI que preza pela qualidade e agilidade na entrega de seus serviços.O nosso grande segredo para estar sempre um passo à frente do mercado é a audácia e a transformação que cada LUMINER promove todos os dias.Nossa integridade nos impulsiona e, o melhor, todo mundo colabora com todo mundo, não importa quem deu a ideia, somos uma empresa de estratégia horizontal, todas as pessoas estão dispostas a ajudar e se envolvem legitimamente para fazer dar certo e entregar resultados.Curtiu? Inscreva-se na vaga!Responsabilidades e atribuiçõesEstamos em busca de um Engenheiro de Dados para atuar na construção e integração de pipelines de dados em ambientes Azure e AWS, garantindo a ingestão, o processamento, a disponibilidade dos dados e o suporte a automações com IA.O profissional será responsável pela integração de APIs, ETLs e bases de dados existentes, além da implementação de arquiteturas escaláveis voltadas para análise e tomada de decisão.O projeto faz parte de um programa de longa duração focado em modernização, inovação, Dados, IA, Produtividade, Otimização e Automação de Processos.Principais Responsabilidades:Projetar e desenvolver pipelines de ingestão de dados a partir de fontes diversas (ETLs, APIs, bancos relacionais e não relacionais, arquivos, sensores de telemetria, etc.);Integrar e consolidar dados de diferentes fontes nos ecossistemas Azure e AWS, garantindo qualidade, consistência e confiabilidade;Implementar arquiteturas de referência para o processamento e armazenamento de dados;Criar e gerenciar Data Lakes, Data Warehouses e Data Marts;Desenvolver e otimizar processos de ETL/ELT utilizando ferramentas como Azure Data Factory, Databricks, Synapse Analytics, AWS Glue, AWS Lambda e Redshift;Garantir a governança, a segurança e a escalabilidade dos pipelines de dados;Monitorar e otimizar a performance das cargas de dados, identificando gargalos e propondo melhorias contínuas;Atuar em colaboração direta com cientistas de dados, analistas funcionais e áreas de negócio.Requisitos e qualificaçõesPerfil Desejado:Experiência sólida como Engenheiro de Dados na construção de pipelines escaláveis;Domínio de soluções em nuvem na AWS (S3, Redshift, Glue, Athena) e Azure (Data Factory, Synapse, Databricks, Azure SQL, Blob Storage, Monitoramento);Experiência na integração de dados via APIs REST/SOAP e no processamento em tempo real;Domínio de bancos de dados relacionais (SQL Server, PostgreSQL) e não relacionais (CosmosDB, DynamoDB, MongoDB);Proficiência em Python, Spark, SQL e PowerShell/Bash para manipulação e engenharia de dados;Prática com cultura DataOps, versionamento de código (Git) e esteiras de CI/CD para dados;Conhecimento em modelagem de dados, otimização de consultas (query tuning) e performance de bancos de dados;Conhecimento sobre boas práticas de segurança, governança e conformidade (LGPD);Boa comunicação verbal e escrita, com capacidade de documentação técnica e interlocução com times de negócio.Diferenciais:Experiência com arquiteturas orientadas a eventos (event-driven) utilizando AWS Kinesis, Azure Event Hub ou Apache Kafka;Vivência na implementação de pipelines de Machine Learning e MLOps em ambientes de nuvem;Certificações Microsoft (ex: DP-203 – Azure Data Engineer Associate) ou AWS (ex: AWS Certified Data Engineer / Data Analytics).Informações adicionaisModalidade de Trabalho: Home Office;Contratação: PJ;Horário de atuação da equipe: comercial.Importante: Nós valorizamos a diversidade e inclusão, consideramos todos os candidatos para as nossas vagas, independente de cor, raça, religião, gênero e identidade de gênero, nacionalidade, deficiência, orientação sexual, ascendência, idade, etc.
Perguntas e respostas sobre a vaga
- Aceita candidatos de onde?
- Aceita candidatos do Brasil.
- Qual o regime de contratação?
- A vaga não diz.
- É remota?
- Sim, é remota.
- Informa salário?
- Não, a vaga não divulga.
Nenhuma vaga séria cobra para você se candidatar, e eu nunca peço dado bancário dentro de uma candidatura. O plano pago é cobrado só pelo Asaas, meu parceiro de pagamento.
Vagas parecidas
Data Engineer
hojeCDC Foundation · Remoto · Américas
$103,500 - $143,500 annually
- analise dados
- sql
- python
Engenheiro de Dados Sênior
há 1 diaEngenheiro de Dados Sênior N8N
há 1 dia