Engenheiro de Dados - Datahub

Sobre a oportunidade

No Close-up nós trabalhamos com dados, informações e tecnologia para ajudar a transformar a área da saúde!Somos uma empresa de conteúdo e serviços para a indústria farmacêutica e, contribuímos para o conhecimento das tendências do mercado, ajudando com eficiência e transparência a estreitar as relações entre laboratórios e profissionais médicos.Estamos em busca de um ENGENHEIRO DE DADOS - DATAHUB para nos apoiar!

Responsabilidades e atribuições
Construir,
manter e evoluir pipelines de ingestão e transformação de dados no
Snowflake.Integrar
dados provenientes de múltiplas fontes, como:

sistemas
de CRM e ERP;
APIs;
planilhas
e arquivos;
serviços
de armazenamento;
bancos
de dados e sistemas locais;
processos
de web scraping.

Estruturar,
manter e evoluir as camadas de dados:

RAW:
armazenamento dos dados brutos, conforme recebidos das fontes de origem;
TRUSTED: dados
tratados, padronizados, validados e submetidos a regras de qualidade;
CURATED: dados
organizados, enriquecidos e disponibilizados para consumo analítico,
integrações e aplicações.

Implementar
mecanismos de governança, qualidade, segurança e rastreabilidade dos
dados.
Monitorar
os processos de carga, identificando falhas, gargalos e oportunidades de
otimização.
Atuar
na padronização e integração de dados entre os diferentes países da
América Latina.
Documentar
pipelines, regras de transformação, integrações e modelos de dados.
Apoiar
a evolução da arquitetura de dados e das iniciativas de inteligência
artificial do DataHub.

Requisitos e qualificaçõesRequisitos técnicos obrigatórios

Experiência
com Snowflake, incluindo:

modelagem
de dados;
ingestão
e transformação de dados;
otimização
de consultas;
monitoramento
e otimização de custos.

Experiência
com Azure Data Factory.
Conhecimento
avançado em SQL.
Experiência
com processos de ETL e ELT.
Experiência
com integração de múltiplas fontes e formatos de dados.
Experiência
com desenvolvimento em Python.
Conhecimento
de práticas de DevOps e implementação de pipelines de CI/CD.
Experiência
com monitoramento, tratamento de erros e observabilidade de pipelines de
dados.

Conhecimentos desejáveis

Conhecimento
do Snowflake Cortex e da preparação de agentes de inteligência artificial
no ambiente Snowflake.
Conhecimento
de modelos de inteligência artificial, Machine Learning e Large Language
Models.
Experiência
com soluções de web scraping e tratamento de alterações nas estruturas das
fontes de dados.
Conhecimento
de segurança, controle de acesso e governança de dados no Snowflake.

Informações adicionaisBenefícios que fazem o seu dia a dia ser ainda melhor💙 Assistência MédicaCom coparticipação e parceria Welhub, garantindo cuidado completo para você e seus dependentes. Saúde e tranquilidade caminhando juntas.😁 Assistência OdontológicaSorriso bonito e sem surpresas: sem coparticipação para o colaborador!💳 Cartão Benefícios FlexNosso cartão é 100% flexível: use como vale-alimentação ou vale-refeição, do seu jeito, de acordo com a sua rotina.💊 Desconto FarmáciaAcesso a condições especiais e descontos em medicamentos para manter a saúde em dia.🛡 Seguro de VidaProteção e segurança para você e sua família.🎂 Day Off de AniversárioO dia é seu — e o presente também! Tire seu merecido descanso no seu aniversário.🎓 Parcerias EducacionaisFaculdades, Idiomas, TI e Dados. Aprender sempre faz parte do nosso pacote!👶🏽 Auxílio Creche para filhos até 1 ano a contar da licença maternidade para as mamães;