fengwuze
Results
1
comments of
fengwuze
这里我的想法是，框架提供最大的灵活性。 1、针对有可能封爬虫的网站 2、针对无封爬虫的网站 第1钟，你可以设置为单线程（这里暂时不讨论效率问题）来抓，设置一定的间隔时间。可以达到反封锁的效果。 针对第2钟，启用多线程方式，可以加快爬取网站页面的效果。 欢迎大家一块来讨论。