Pessoa Engenheira de Dados - Pleno/Sênior
Location
Modelo, SC | Brazil
Job description
Buscando projetos inovadores?
Então vem com a Mollica IT e encontre a oportunidade certa pra dar match!
Estamos em busca de profissionais inovadores e criativos, que tenham paixão em crescer, evoluir e aprender.
Qual será a sua missão:
- Extrair dados de diversas fontes de dados por meio de vários fornecedores de dados disponíveis (A maioria dos dados é estruturada ou semiestruturada, enquanto uma pequena parte não é estruturada);
- Transformar dados para reconciliar alterações em formatos de arquivo e esquemas ao longo do tempo ou em diversas fontes de dados para o mesmo tipo de informação;
- Alinhar os dados em várias resoluções temporais (por exemplo, agregação ou desagregação em vários níveis no tempo);
- Armazenar arquivos de forma estruturada para referência futura e desenvolver um esquema de dados;
- Depositar dados no banco de dados para consulta e análise convenientes;
- Manter pipelines automáticos para ingerir dados continuamente;
- Realizar a limpeza de dados para fornecer resultados rápidos de pesquisa, juntamente com uma API de recuperação de dados, suportada em suplementos do Excel e pacotes Python;
- Demais rotinas da área.
📌 Dúvidas? Entre em contato com [email protected]
O que você precisa ter:
- Experiência com várias tecnologias de dados baseadas em nuvem, incluindo Databricks, Azure Datalake, Azure Data Explorer (ADX);
- Conhecimentos em Python e pacotes relacionados a processamento de dados, como pandas;
- Conhecimento em programação orientada a objetos com Python;
- Experiência com desenvolvimento de APIs frente a diversas tecnologias de dados;
- Familiarizados com tecnologias de banco de dados/SQL, DW e conceitos relacionados;
- Experiência em implantação de recursos de nuvem que oferecem suporte à engenharia de dados e pipelines de operações de ML;
- Conhecimentos na configuração de pipelines CI/CD para projetos na área de engenharia de dados e operações de ML;
- Conhecimentos no trabalho com grandes conjuntos de dados e arquiteturas de computação distribuída (ou seja, Apache Spark);
- Forte experiência com processos ETL;
- Experiência com GitHub;
- Obrigatório superior completo.
🌎 Idioma:
- Inglês Avançado para conversação (Haverá etapa de entrevista nesse idioma)
✔️Assistência Médica
✔️Assistência Odontológica
✔️Vale Refeição de R$ 580,00/mês
✔️Seguro de Vida
Contratação : CLT
Prazo: Indeterminado
Local: São Paulo - SP - Atuação em modelo híbrido (Jardim São Luiz - zona sul)
Horário de Trabalho: Comercial
Job tags
Salary
R$ 580
