/jdspider

京东爬虫

Primary LanguagePython

基于 Scrapy 的京东商城爬虫

已实现功能

  • 商品信息爬取, 包括:
    • 商品ID
    • 标题
    • 商品描述
    • 商品 URL
    • 评价数量 ( 好评 / 中评 / 差评 )
  • 商品评价爬取, 包括:
    • 评价 ID
    • 商品 ID
    • 用户 ID
    • 用户昵称
    • 评分
    • 评论内容
    • 评论时间