CarlKong

**一般爬虫都需要免费的或者收费的ip池来支持的，我这边实现了一个动态的获取代理，并在爬虫执行过程中对失效的代理剔除，并从ip代理商那边获取新的可用的代理来补充我们的ip池。不多说了，上代码，仅供参考。** ```java import com.alibaba.fastjson.JSONArray; import com.alibaba.fastjson.JSONObject; import okhttp3.OkHttpClient; import okhttp3.Request; import okhttp3.Response; import org.apache.commons.io.IOUtils; import org.slf4j.Logger; import org.slf4j.LoggerFactory; import us.codecraft.webmagic.Page; import us.codecraft.webmagic.Task; import us.codecraft.webmagic.proxy.Proxy; import us.codecraft.webmagic.proxy.ProxyProvider; import java.io.InputStream; import java.net.InetSocketAddress;...