Sobre o trabalho Engenheiro de Dados Pleno
Venha fazer parte de um ecossistema vivo onde o futuro dos negócios é criado e vivido todos os dias. Faça parte desta transformação!
Na LUZA Group, a paixão, a perseverança e a vontade de superar limites definem o nosso caminho para o sucesso.
Fundada em 2006, somos uma multinacional portuguesa com mais de 1.200 profissionais talentosos e um volume de negócios. Com presença em mercados estratégicos como Portugal, Espanha, Marrocos, Brasil, México, Estados Unidos e China, oferecemos soluções inovadoras em engenharia, TI, design, consultoria, Indústria 4.0, treinamento e recrutamento. Tudo o que fazemos é movido pelo talento de nosso povo.
Este é um momento de crescimento e oportunidade. O futuro pertence a mentes visionárias. Junte-se a nós!
Responsabilidades e Tarefas da Função
- Projetar, desenvolver e manter pipelines de dados em batch e real time, seguindo padrões definidos pela arquitetura;
- Realizar limpeza, transformação e enriquecimento de dados;
- Desenvolver e otimizar consultas em SQL Server e Azure SQL Database;
- Apoiar na construção e manutenção de Data Lakes e Data Warehouses no Azure Data Storage;
- Desenvolver notebooks e jobs no Azure Databricks utilizando Python e PySpark;
- Criar e manter DAGs no Airflow, seguindo boas práticas;
- Apoiar a governança e qualidade dos dados (validações, checks, documentação);
- Trabalhar em conjunto com analistas de dados e cientistas de dados;
- Apoiar o monitoramento e correção de falhas em pipelines;
- Participar de pesquisas e provas de conceito de novas tecnologias, com orientação de profissionais mais experientes.
Requisitos Obrigatórios
- Experiência prática com pipelines de dados (batch e streaming);
- SQL avançado (SQL Server e Azure SQL Database);
- Azure Databricks;
- Python e PySpark;
- Airflow;
- Azure Data Storage;
- Conhecimento em Power BI (consumo de dados, noções de DAX e M).
Requisitos Complementares
- Noções de estatística aplicada a dados;
- Uso de pandas e numpy;
- Conhecimento inicial em Docker e cloud.
Competências Comportamentais
-
Boa capacidade de aprendizado;
-
Organização e atenção à qualidade;
-
Comunicação clara com áreas técnicas e de negócio;
-
Trabalho colaborativo.
O que oferecemos
- Wellhub;
- OnHappy;
- Sesc;
- Horário Flexível.