Startup
Localização: Remoto
Salário: Não especificado
Aceito candidatos de outras cidades/estados dispostos a se mudar para o local de trabalho
Nossa história começou em 2016, em um programa acelerador de Startups. Desde então, passamos por várias transformações e melhorias contínuas, refletindo nossa cultura de inovação. Hoje, o MelhorPlano.net é um marketplace e a referência mais confiável para consumidores compararem e contratarem serviços básicos como telefonia e serviços bancários no Brasil.
Por que Trabalhar Conosco?
Muitos acreditam que o porquinho é o símbolo perfeito quando o assunto é economia, e nós não poderíamos concordar mais! Por isso, chamamos nossa equipe carinhosamente de Mini-pigs. 🐷
Se você está interessado em trabalhar em uma startup em constante crescimento, com um clima descontraído, trabalho 100% remoto, horário flexível e a missão de impactar a vida das pessoas, seu lugar é aqui! 💻
Projetar, desenvolver e manter crawlers e scrapers escaláveis e resilientes.
Garantir a coleta, processamento e atualização confiável dos dados.
Resolver problemas complexos relacionados a bloqueios, CAPTCHA, rate limits e mudanças estruturais nos sites.
Evoluir a arquitetura dos crawlers visando performance, estabilidade e baixo custo operacional.
Monitorar falhas, qualidade dos dados, execução dos crawlers e indicadores de saúde da plataforma.
Implementar mecanismos de observabilidade, logs, alertas e tratamento de erros.
Melhorar continuamente performance, consumo de recursos e tempo de execução das coletas.
Trabalhar com grandes volumes de dados e fluxos assíncronos de processamento.
Atuar como referência técnica do time no contexto de web scraping.
Colaborar diretamente com os times para entender necessidades e prioridades.
Investigar incidentes e atuar rapidamente na resolução dos problemas.
Explorar e aplicar novas tecnologias, ferramentas e abordagens melhores.
Experiência profissional de mais de 6 anos como engenheiro de software
Forte experiência com Typescript.
Experiência sólida com Node.js no backend.
Experiência sólida com web scraping.
Experiência com arquitetura serverless utilizando AWS Lambda
Experiência com Puppeteer, Playwright, Scrapy ou bibliotecas similares
Conhecimento ou experiência prática em sistemas integrados a LLMs
Conhecimento em sistemas anti-bot, proxies, rate limiting e mecanismos de resiliência para crawling
Experiência com mensageria, filas e processamento assíncrono (SQS, Kafka ou similares)
Experiência com observabilidade, monitoramento e troubleshooting de aplicações
Conhecimento em logs, métricas, alertas e ferramentas como AWS CloudWatch
Experiência com MongoDB
Experiência com APIs REST
Boa capacidade analítica e de resolução de problemas
Perfil autônomo, proativo colaborativo, boa comunicação e capacidade de planejamento e priorização.
Acesse o perfil da Melhor Plano para conhecer sua história, suas vantagens e todas as informações relacionadas ao recrutamento.