用户登录
忘记密码?
注册账号
免费试用
注册即送免费提取IP
使用帮助新闻资讯Python爬虫IP代理教程,让你不再为IP被封禁发愁!
您在闪臣遇到任何问题都欢迎您随时联系我们

Python爬虫IP代理教程,让你不再为IP被封禁发愁!

发布日期:2024-07-26

一、付费代理ip地址推荐

闪臣HTTP

闪臣HTTP需要注册,注册实名后可以领3000IP试用,还是很不错的,而且每天还可以领66个免费IP,持续一段时间免费试用

 

二、reuqests的ip代理

文章使用 http://httpbin.org/ip 这个测试 HTTP 请求及响应的网站

#没使用ip代理之前

import requests

 

response = requests.get("http://httpbin.org/ip")

print(response.text)

#使用ip代理之后

import requests

 

proxy = {

    'http': '171.35.171.247:9999'

}

 

response = requests.get("http://httpbin.org/ip",proxies=proxy)

print(response.text)

 

可以看见返回的ip和代理的ip一样

 

三、selenium的ip代理

#没使用代理之前

from selenium import webdriver

 

driver = webdriver.Chrome()

driver.get("http://httpbin.org/ip")

#使用代理之后

from selenium import webdriver

 

options = webdriver.ChromeOptions()

#添加IP代理

options.add_argument("--proxy-server=http://183.166.149.193:20005")

 

driver = webdriver.Chrome(chrome_options=options)

driver.get("http://httpbin.org/ip")

 

四、ip代理大坑(重点)

ip代理有http和https的区别,但很多小伙伴不清楚到底有什么区别,经过博主踩坑后终于搞懂了,在线分享给大家

1.

2.

结论:如果请求的ip是https类型的,但代理的ip是只支持http的,那么还是使用本机的ip,

如果请求的ip是http类型的,那么代理的ip一定要是http的,前面不能写成https。

 

本文来源转载

原文链接:Python爬虫IP代理教程,让你不再为IP被封禁发愁!_selenium使用ip代理,一个ip访问多少次有被封的可能-CSDN博客

若有侵权,请联系我们及时删除,谢谢!!