Vaga Back-End

Engenheiro(a) de dados

AWS S3 Python SQL

Smart System Consulting

Smart System Consulting

Pequena/média empresa

Localização: Híbrido

3 dias presencial, 2 dias remotos

Salário: Até R$15.000

Aceito candidatos de outras cidades/estados dispostos a se mudar para o local de trabalho

Descrição da empresa

A Smart System Consulting é uma empresa de tecnologia especializada em acelerar a transformação digital de negócios por meio de soluções inteligentes, equipes ágeis e atendimento personalizado. Desde 2022, atuamos como um verdadeiro marketplace de soluções tecnológicas, oferecendo serviços que vão de squads ágeis e desenvolvimento end-to-end até cloud management, inteligência artificial e estratégias de negócios.

Somos apaixonados por tecnologia e por pessoas. Nosso time é formado por profissionais altamente capacitados, distribuídos pelo Brasil, conectados por uma cultura que valoriza flexibilidade, inovação, colaboração e resultado. Aqui, cada projeto é uma oportunidade de criar impacto real, evoluir e fazer história junto com nossos clientes.

Se você busca um lugar onde pode crescer, ser ouvido e trabalhar com desafios relevantes, a Smart System é o seu próximo passo.

Atividades e Responsabilidades

• Liderança Técnica: Desenhar, desenvolver e implementar pipelines ETL/ELT robustos e de alta performance utilizando PySpark e Databricks.
• Otimização: Atuar na otimização de queries, clusters e arquiteturas no Databricks Lakehouse (incluindo Delta Lake e Unity Catalog) para garantir escalabilidade e redução de custos.
• Governança de Dados: Implementar e gerenciar políticas de segurança, linhagem e catálogo de dados utilizando o Unity Catalog.
• Qualidade de Dados: Criar rotinas automatizadas para monitoramento e validação da qualidade dos dados (data quality) e garantir a confiabilidade dos data assets.
• Colaboração: Trabalhar em estreita colaboração com Cientistas de Dados e Analistas de Negócios para traduzir requisitos de analytics em soluções de engenharia de dados.

Requisitos

• Experiência sólida como Engenheiro(a) de Dados
• Proficiência avançada em Databricks: Desenvolvimento de notebooks, otimização de clusters Spark e uso de Delta Lake.
• Linguagens: Forte habilidade em PySpark e SQL.
• Cloud Computing: Experiência com um ou mais provedores de nuvem (AWS ou GCP).
• Experiência com AWS Glue, EMR ou S3.
• Modelagem: Conhecimento profundo em modelagem de dados para Data Warehouses e Data Lakes (Dimensional, Data Vault).

Diferenciais (Altamente Desejável)
• Experiência com Unity Catalog ou outras ferramentas de governança de dados.
• Habilidade em deploy de soluções utilizando práticas de CI/CD e IaC.
• Certificações Databricks (Ex: Databricks Certified Data Engineer).


VEJA A EMPRESA NO MAPA