Repositório contendo cursos e projetos do freecodecamp.
- Flash Course Web developments with flask
- skills desenvolvidas:
- autenticação de usuário
- bootstrap
- entendimento de rotas
- integração com banco de dados
- html e css
- ORM
- skills desenvolvidas:
- Scrapy Course Web Scraping
- skills desenvolvidas:
- Criação de projetos Scrapy e desenvolvimento de spiders para diferentes tipos de sites.
- Configuração e utilização do Scrapy para extração de dados da web.
- Descoberta e extração de informações estruturadas e não estruturadas de páginas web.
- Limpeza e processamento dos dados extraídos usando pipelines.
- Armazenamento dos dados em arquivos e bancos de dados.
- Utilização de User-Agents e headers de navegador falsos para simular o comportamento de um navegador real.
- Implementação de rotação de proxies e uso de APIs de proxies para evitar bloqueios e proteger a identidade do spider.
- Execução de spiders na nuvem usando Scrapyd, ScrapeOps e Scrapy Cloud
- skills desenvolvidas:
- ...
🚧 Em construção 🚧