python:3.5 scrapy:1.3.2 pymongo:3.2 pycharm 环境搭建,自行百度 二、数据库说明 1. 产品分类 京东大概有1183个分类,这是除去了一些虚拟产品(话费、彩票、车票等)的分类,可以到如下网页查看: https://www.jd.com/allSort.aspx 我们也是从这个网址开始抓取。由于这些分类里面也有属于频道的页面,也就是说,这个...
爬虫开始,打开jingdong_pinglun文件!正在抓取第0页的数据!Traceback (most recent call last): File "C:/Users/19697/PycharmProjects/helloworld/test.py", line 54, in <module> jd_spider.parse_max_page() File "C:/Users/19697/PycharmProjects/helloworld/test.py", line 44, in parse_max_page ...