Vaga Back-End

Engenheiro(a) Sênior Web Scraping

MongoDB Node.js TypeScript API JavaScript

Melhor Plano

Melhor Plano

Startup

Salário: Não especificado

Aceito candidatos de outras cidades/estados dispostos a se mudar para o local de trabalho

Descrição da empresa

Nossa história começou em 2016, em um programa acelerador de Startups. Desde então, passamos por várias transformações e melhorias contínuas, refletindo nossa cultura de inovação. Hoje, o MelhorPlano.net é um marketplace e a referência mais confiável para consumidores compararem e contratarem serviços básicos como telefonia e serviços bancários no Brasil.

Por que Trabalhar Conosco?

Muitos acreditam que o porquinho é o símbolo perfeito quando o assunto é economia, e nós não poderíamos concordar mais! Por isso, chamamos nossa equipe carinhosamente de Mini-pigs. 🐷

Se você está interessado em trabalhar em uma startup em constante crescimento, com um clima descontraído, trabalho 100% remoto, horário flexível e a missão de impactar a vida das pessoas, seu lugar é aqui! 💻

Atividades e Responsabilidades

Projetar, desenvolver e manter crawlers e scrapers escaláveis e resilientes.
Garantir a coleta, processamento e atualização confiável dos dados.
Resolver problemas complexos relacionados a bloqueios, CAPTCHA, rate limits e mudanças estruturais nos sites.
Evoluir a arquitetura dos crawlers visando performance, estabilidade e baixo custo operacional.
Monitorar falhas, qualidade dos dados, execução dos crawlers e indicadores de saúde da plataforma.
Implementar mecanismos de observabilidade, logs, alertas e tratamento de erros.
Melhorar continuamente performance, consumo de recursos e tempo de execução das coletas.
Trabalhar com grandes volumes de dados e fluxos assíncronos de processamento.
Atuar como referência técnica do time no contexto de web scraping.
Colaborar diretamente com os times para entender necessidades e prioridades.
Investigar incidentes e atuar rapidamente na resolução dos problemas.
Explorar e aplicar novas tecnologias, ferramentas e abordagens melhores.

Requisitos

Experiência profissional de mais de 6 anos como engenheiro de software
Forte experiência com Typescript.
Experiência sólida com Node.js no backend.
Experiência sólida com web scraping.
Experiência com arquitetura serverless utilizando AWS Lambda
Experiência com Puppeteer, Playwright, Scrapy ou bibliotecas similares
Conhecimento ou experiência prática em sistemas integrados a LLMs
Conhecimento em sistemas anti-bot, proxies, rate limiting e mecanismos de resiliência para crawling
Experiência com mensageria, filas e processamento assíncrono (SQS, Kafka ou similares)
Experiência com observabilidade, monitoramento e troubleshooting de aplicações
Conhecimento em logs, métricas, alertas e ferramentas como AWS CloudWatch
Experiência com MongoDB
Experiência com APIs REST
Boa capacidade analítica e de resolução de problemas
Perfil autônomo, proativo colaborativo, boa comunicação e capacidade de planejamento e priorização.

O que nós oferecemos

Auxílio home office; Convênio SESC; Auxílio Luto; Cashback online em dobro na Méliuz; Day off de Aniversário;
Vale Refeição
Vale Alimentação
Plano de Saúde
Plano Odontológico
Seguro de Vida
Academia/Gympass