首页
酷软
游戏
媒体
- 电影
- 剧集
- 动画
- 记录
- 综艺
- MV
- 有声世界
云资源
源码
更多
- 文库
- 系统
- web
- 站长帮
- 玩电脑
- 玩游戏
- 玩手机
- 涨姿势
- 玩软件
- 云图志
- 看漫画
- 微读书
- PS玩家
- 网文网语
- 硬件数码
- 编程开发
- 神秘之旅
- 福利线报
- 商业资源
- 网赚相关
- 健康加油站
赞助专区
云盘专区
资源阁
缘聚岛
BT种子库

[Python] 爬虫免费可用的代理IP获取

作者：精品下载站日期：2020-05-29 00:00:00 浏览：81 分类：编程开发

爬虫嘛，速度快了，IP指不定就被禁了，但是市面上很多的免费ip经看不经用，收费的又想白嫖，额说了这么多就是想白嫖而已。然后前段时间在网上瞎转悠的时候看到了一个网站的IP存活情况还算不错，，请求百度，超时设置为0.1秒，然后采集10个存活10个（比我在某宝上1000个存活不到1个的好多了）www.lanol.cn

然后就是自己已经写好的爬取代码（清洗保存这些自己根据需要稍加处理即可）

importparsel
importrequests

url='https://www.7yip.cn/free/?action=china&page=1'
headers={
'user-agent':'Mozilla/5.0(WindowsNT10.0;Win64;x64)AppleWebKit/537.36(KHTML,likeGecko)'
'Chrome/80.0.3987.163Safari/537.36',
}
html=requests.get(url=url,headers=headers).text
html=parsel.Selector(html)
Ip=html.xpath('//td[@data-]/text()').extract()
Port=html.xpath('//td[@data-]/text()').extract()
LeiXing=html.xpath('//td[@data-]/text()').extract()
result=[]
#By：Lan
foriinrange(len(Ip)):
a=(LeiXing[i]+'://'+Ip[i]+':'+Port[i])
pro={LeiXing[i]:a}
result.append(pro)
#代码源于www.lanol.cn
foriinresult:
try:
ssss=requests.get(url='http://www.baidu.com',headers=headers,proxies=i,timeout=0.1).status_code
ifssss==200:
print(i)
except:
print('不合格')