Engenheiro de Dados - DATAHUB

No Close-up nós trabalhamos com dados, informações e tecnologia para ajudar a transformar a área da saúde!Somos uma empresa de conteúdo e serviços para a indústria farmacêutica e, contribuímos para o conhecimento das tendências do mercado, ajudando com eficiência e transparência a estreitar as relações entre laboratórios e profissionais médicos.Estamos em busca de um ENGENHEIRO DE DADOS - DATAHUB para nos apoiar!

Responsabilidades e atribuições Construir, manter e evoluir pipelines de ingestão e transformação de dados no Snowflake.Integrar dados provenientes de múltiplas fontes, como:

sistemas de CRM e ERP; APIs; planilhas e arquivos; serviços de armazenamento; bancos de dados e sistemas locais; processos de web scraping.

Estruturar, manter e evoluir as camadas de dados:

RAW: armazenamento dos dados brutos, conforme recebidos das fontes de origem; TRUSTED: dados tratados, padronizados, validados e submetidos a regras de qualidade; CURATED: dados organizados, enriquecidos e disponibilizados para consumo analítico, integrações e aplicações.

Implementar mecanismos de governança, qualidade, segurança e rastreabilidade dos dados. Monitorar os processos de carga, identificando falhas, gargalos e oportunidades de otimização. Atuar na padronização e integração de dados entre os diferentes países da América Latina. Documentar pipelines, regras de transformação, integrações e modelos de dados. Apoiar a evolução da arquitetura de dados e das iniciativas de inteligência artificial do DataHub.

Requisitos e qualificaçõesRequisitos técnicos obrigatórios

Experiência com Snowflake, incluindo:

modelagem de dados; ingestão e transformação de dados; otimização de consultas; monitoramento e otimização de custos.

Experiência com Azure Data Factory. Conhecimento avançado em SQL. Experiência com processos de ETL e ELT. Experiência com integração de múltiplas fontes e formatos de dados. Experiência com desenvolvimento em Python. Conhecimento de práticas de DevOps e implementação de pipelines de CI/CD. Experiência com monitoramento, tratamento de erros e observabilidade de pipelines de dados.

Conhecimentos desejáveis

Conhecimento do Snowflake Cortex e da preparação de agentes de inteligência artificial no ambiente Snowflake. Conhecimento de modelos de inteligência artificial, Machine Learning e Large Language Models. Experiência com soluções de web scraping e tratamento de alterações nas estruturas das fontes de dados. Conhecimento de segurança, controle de acesso e governança de dados no Snowflake.

Informações adicionaisBenefícios que fazem o seu dia a dia ser ainda melhor💙 Assistência MédicaCom coparticipação e parceria Welhub, garantindo cuidado completo para você e seus dependentes. Saúde e tranquilidade caminhando juntas.😁 Assistência OdontológicaSorriso bonito e sem surpresas: sem coparticipação para o colaborador!💳 Cartão Benefícios FlexNosso cartão é 100% flexível: use como vale-alimentação ou vale-refeição, do seu jeito, de acordo com a sua rotina.💊 Desconto FarmáciaAcesso a condições especiais e descontos em medicamentos para manter a saúde em dia.🛡 Seguro de VidaProteção e segurança para você e sua família.🎂 Day Off de AniversárioO dia é seu — e o presente também! Tire seu merecido descanso no seu aniversário.🎓 Parcerias EducacionaisFaculdades, Idiomas, TI e Dados. Aprender sempre faz parte do nosso pacote!👶🏽 Auxílio Creche para filhos até 1 ano a contar da licença maternidade para as mamães;