作者:dasgsdfsddsadas_501 | 来源:互联网 | 2023-09-14 13:30
本文知识点隧道代理的使用流程代码样例进阶学习前提条件:隧道代理的订单,可以免费试用。联系他们的客服开通试用使用流程获取隧道信息设置代理,进行验证开始爬取代理验证采用
本文知识点 隧道代理的使用流程代码样例进阶学习
前提条件: 隧道代理的订单,可以免费试用。联系他们的客服开通试用
使用流程 获取隧道信息设置代理,进行验证开始爬取
代理验证采用用户名密码的方式。这种验证很方便,简洁。
代码样例
先把代码贴出来,再一步一步按要求来。大家先copy过去,代码里需要注意以下三项皆为实际在快代理官网获得的参数。
proxy 隧道的host和端口username, password 代理验证的用户名与密码page_url 默认是快代理验证IP的测试网址,自己也可以改成其他的网址
以下代码为python3所写
"""快代理代理IP使用教程"""import requestsimport random# 要访问的目标网页page_url = "http://dev.kdlapi.com/testproxy"# 隧道的host与端口proxy = "tps163.kdlapi.com:15818"# 用户名和密码(隧道代理分配的)username = ""password = ""# 代理IP的格式proxies = { "http": "http://%(user)s:%(pwd)s@%(proxy)s/" % {'user': username, 'pwd': password, 'proxy': proxy}, "https": "https://%(user)s:%(pwd)s@%(proxy)s/" % {'user': username, 'pwd': password, 'proxy': proxy }}# 添加header,模拟用户请求headers = { "Accept-Encoding": "Gzip", # 使用gzip压缩传输数据让访问更快 "User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/79.0.3945.117 Safari/537.36"}# 发送request请求,打印响应code与body内容r = requests.get(url=page_url, proxies=proxies, headers=headers)print("response code",r.status_code)print("response body",r.text) 获取隧道代理的信息
打开后台,找到订单,点击管理
隧道的host就是ip,端口,用户名密码等信息
开始爬取
需要的都找到了,那现在运行下。看看结果,结果如下
response code 200。
隧道代理是分配一个固定的IP和端口,直接设置到代理里就好,它会自动更换IP的。
进阶学习 快代理IP教程大全