Data Lake Engineer (PT)

📢 A nossa missão:

A Ivy Partners é uma empresa suíça de consulting que contribui para a evolução das empresas nos seus desafios estratégicos, tecnológicos e organizacionais.

A nossa missão é oferecer aos nossos colaboradores uma carreira que contribua positivamente para a sua realização e bem-estar, criando um ambiente de apoio onde todos são valorizados e capacitados com formação e perspectivas de crescimento.

👩‍💻🧑‍💻 Como Data Lake Engineer irás:

• Colaborar com o Líder de Dados para definir e refinar a estratégia de migração de dados do SAS para o Microsoft Data Lake
• Implementar a estratégia de migração e os casos de uso associados dentro da infraestrutura do Data Lake
• Projetar, desenvolver e manter pipelines de ingestão de dados para garantir um fluxo de dados suave e eficiente para o Data Lake
• Otimizar e ajustar o desempenho do Data Lake para atender aos requisitos da organização em termos de escalabilidade, confiabilidade e desempenho
• Desenvolver e manter políticas de governança de dados, garantindo qualidade, integridade e segurança dos dados dentro do ambiente do Data Lake
• Trabalhar em estreita colaboração com equipas multifuncionais, incluindo cientistas de dados, analistas e operações de TI, para entender os requisitos de dados e fornecer expertise técnica
• Solucionar e resolver quaisquer problemas relacionados à ingestão, processamento ou armazenamento de dados dentro do Data Lake
• Manter-te atualizado com as melhores práticas da indústria, tecnologias emergentes e tendências em engenharia de dados e computação em nuvem, e aplicá-las para aprimorar a infraestrutura do Data Lake
• Fornecer orientação técnica e suporte a membros juniores da equipe, promovendo um ambiente colaborativo e de compartilhamento de conhecimento

🙌🏼💡Responsabilidades Adicionais:

• Desenvolver e manter processos de gerenciamento de metadados para catalogar e organizar os ativos de dados dentro do Data Lake
• Implementar políticas de gerenciamento do ciclo de vida dos dados para gerir a retenção, arquivamento e exclusão de dados dentro do Data Lake
• Colaborar com arquitetos de dados para projetar e implementar modelos de dados escaláveis otimizados para armazenamento e análise dentro do Data Lake
• Implementar controles de acesso a dados e medidas de segurança para proteger dados sensíveis armazenados no Data Lake
• Monitorar o uso do Data Lake e métricas de desempenho, identificando áreas para otimização e melhoria
• Participar na avaliação e seleção de ferramentas e tecnologias para aprimorar o ecossistema do Data Lake

🏅 Sobre ti!

Esta posição será perfeita para ti se, tecnicamente tens:

• Licenciatura ou Mestrado em Ciências da Computação, Engenharia ou área relacionada
• Experiência comprovada em engenharia de dados, com foco na construção e gerenciamento de plataformas de dados em grande escala, preferencialmente em ambientes de Cloud
• Proficiência em linguagens de programação como Python e experiência em Pyspark, Fabric e SQL Server
• Forte compreensão de conceitos de computação distribuída e experiência com tecnologias de big data como Hadoop, Hive ou Azure Data Lake
• Experiência com ferramentas de integração de dados e ETL como Apache NiFi, Talend ou Informatica
• Familiaridade com plataformas de nuvem como Microsoft Azure, incluindo serviços como Azure Data Factory, Azure Databricks e Azure Synapse Analytics
• Experiência com metodologias de desenvolvimento ágil e práticas DevOps é uma vantagem

E se humanamente falando:

• És analítico, rigoroso e tens um bom espírito de equipa
• Tens fortes capacidades de comunicação e uma mentalidade fantástica

🤝 A Ivy, também é sobre:

Zelo | Oferecemos um ambiente de apoio onde todos são valorizados e capacitados com formação e perspetiva de crescimento.

Confiança | Trabalhar connosco é estabelecer uma parceria baseada na confiança, profissionalismo e transparência em todos os momentos.

Inovação | Potenciamos a transformação digital efectiva através de uma combinação única de tecnologia inovadora e pensamento criativo.

Responsabilidade | A comunidade está no centro de tudo o que fazemos, e levamos essa responsabilidade a sério, trabalhando arduamente para criar um impacto positivo.

🚀 Juntares-te à Ivy significa fazer parte de uma aventura desafiante a cada passo!

Obrigado por considerares juntar-te a nós, estamos ansiosos para ouvir mais sobre ti!