python_spider icon indicating copy to clipboard operation
python_spider copied to clipboard

spider of some famous website

Results 2 python_spider issues
Sort by recently updated
recently updated
newest added

在 weibo_comment/spider.py 下,如果获取json数据失败则会把 max_id_type 设置为 1 继续爬取。我验证后发现,max_id_type更改为 1 后爬取到的是按照时间降序的评论内容。

wallpapers项目运行后,爬取的图片是如何存储在本地电脑的呢,按照settings的配置,IMAGES_STORE = 'images',爬取成功后,文件夹images并没有图片