Get all links in all pages in one application
- Scrap Forever realiza o Get de todos os links em uma aplicação e navega nas demais páginas para garantir que não fique nenhum link pra trás
-
-t SCRAP_URL https://site.com.br
-
-o SCRAP_OUT, --output SCRAP_OUT Salva data
-
-p SCRAP_PROXY, --proxy SCRAP_PROXY (-p http://127.0.0.1:8080)
- scrap_forever.py -t https://site.com.br -o output.txt
- scrap_forever.py -t https://site.com.br -o output.txt -p http://127.0.0.1:8080