Engenheiro de Dados Senior

Descrição da empresa

Aqui na Inovando já desenvolvemos 50+ projetos novos utilizando Node.js, React.js e React Native, se você deseja se aprofundar mais nessas tecnologias essa oportunidade é pra você! Nós estamos sempre trabalhando com as versões mais atualizadas da nossa stack e entregando produtos com qualidade. Também trabalhos com os Stacks .NET, Angular, PHP e Vue.JS em suporte e desenvolvimento de melhorias de sistemas legados.

Atividades e Responsabilidades

Os desafios dessa pessoa serão na frente da área, atuando com:

- sustentação de data lakes e soluções de dados:
-monitoração e gerenciamento de rotinas de ingestão de dados
-ETL
-solução de problemas/correção de pipeline de dados;
-entendimento de requisitos dos clientes internos.

Será responsável pela manutenção de pipelines de processamento de dados na Cloud, em ferramentas como Data Factory, Databricks e Storage.

É importante que você conheça sobre componentes em nuvem Azure, especialmente Azure DataFactory, Azure Databricks, Azure Storage, Azure SQL Server.

Outras capacidades técnicas de versionamento de código (Azure DevOps / git);
Desenvolvimento em Python;

Azure DevOps (CI/CD);
Arquitetura Spark em Databricks;
Azure Analysis Services e consumo de APIs.

Tecnologias usadas:

Power BI, Apache Spark, Apache Kafka, Databricks, Data Factory, Docker, Azure Devops, SQL, PySpark
Clouds: Azure

Requisitos

Experiência como Engenheiro de Dados com as seguintes tecnologias:

- Microsoft Azure
- Azure Data Factory
- Databricks
- Arquitetura Spark em Databricks;
- SQL

Desejável

- Azure Devops
- Noções de SAP
- Power BI