/PUPWebCrawler

Simple implementation for WebCrawlers Headless based on GoogleChrome/puppeteer

Primary LanguageTypeScript

StackShare

PUPWebCrawler

Engine para fazer captura de dados em sistes simple ou com navegação dinâmica (ajax)

Dependências

  • NodeJS >= 8
  • PM2

Para instalar o projeto:

  • na raiz executar: $ npm i
  • instalar o PM2: $ npm i -g pm2

Executar o projeto:

  • rodar manualmente:
    • no diretório do projeto: $ npm start
  • PM2:
    • no diretório do projeto: $ pm2 start app.js

TODO

  • Testes
  • Docker
  • Refac code
  • Melhorar Readme