/weibo-spider-node

基于node puppeteer的微博爬虫，目标在于实现自动登录，根据关键词检索内容，发送内容数据到服务器

Primary LanguageJavaScript

node微博爬虫

环境依赖

node v12.13.0

windows 10

部署步骤

  1. npm install //安装依赖包

  2. config.js //配置微博账号，密码，浏览器模式

  3. node searh_keyword_spider.js //微博（综合）关键词爬取

    node search_user_spider.js //微博（用户）关键词爬取

    node search_article_spider.js //微博（用户）关键词爬取

版本内容更新

  1. 初始化项目

  2. 微博自动登录完成

  3. 关键词爬取完成

点击链接加入QQ群聊【adb，python，打卡，scrapy】：https://jq.qq.com/?_wv=1027&k=5nRUMwZR