爬虫必备!免费代理池接口

编写爬虫时,难免会遇到IP被封禁,这种时候就需要用到代理IP。

但网上的免费代理质量能不能用完全看缘分,需求不大的话收费代理也不太划算。

于是我整理了个一个代理池

1、高匿代理,检测可用性,根据结果进行优先级划分。

2、15分钟抓取并测试一次,把可用代理优先级提高。

3、测试网站为百度首页(www.baidu.com

4、免费代理还是会大概率出现不可用的情况

接口地址:p.ashtwo.cn

代码调用(python):

import requests
response = requests.get('http://p.ashtwo.cn')
if response.status_code == 200:
    print(response.text) #121.61.0.56:9999
  • 用支付宝打我
  • 用微信打我

Long may the sunshine

发表评论

电子邮件地址不会被公开。 必填项已用*标注

召唤蕾姆