Python 代理 IP 轮换:3 种常用方法

代理的本质是“把请求的出口 IP 从你本机换成可控的中转出口”。所谓“轮换”,就是让多次请求尽量不要一直用同一个出口 IP。 本文将讲解常见的代理轮换实现方式,并展示如何基于 kookeey 的动态住宅代理服务,快速完成接入配置与实战应用(含可直接运行的代码示例)。

想省掉自己维护代理池的麻烦?

直接用 kookeey 的网关代理:拿到 host/port/账号密码后,粘贴代码就能发起请求。

先搞明白:轮换其实分两类

很多人照抄“轮换代理”代码却跑不通,原因是:你买的代理往往不是“给你一堆 IP 让你自己换”,而是“给你一个固定网关,后台自动分配出口”。 两种都叫轮换,但实现方式不同:

① 客户端轮换(自备代理列表)

你手里有多个代理 URL(A/B/C),每个请求随机或按顺序挑一个。

  • 优点:完全可控,可做加权、淘汰坏代理
  • 缺点:需要你维护代理池(可用率、健康检查、补充/淘汰)

② 网关轮换(服务商托管池)

你只连一个 host:port,同一个入口由服务商在后台分配不同出口 IP(或按会话保持)。

  • 优点:少维护,购买后更容易“直接能用”
  • 注意:是否每次都换 IP 取决于你的会话/轮换策略设置

什么时候值得上代理?

  • 目标站对单 IP 频率限制严格(常见 429/验证码/403)
  • 你需要多地区访问/验证地区内容
  • 你要并发采集,希望把请求分散到多个出口

小提醒:代理不是万能钥匙。稳定性通常来自:超时设置、限并发、重试策略、会话策略,而不只是“换 IP”。

使用 kookeey 动态住宅代理实现自动轮换

进入 kookeey 官网,创建账号并完成登录。

  1. 选择套餐并购买:按你的业务选择动态住宅
Python 代理 IP 轮换:3 种常用方法
  • 在控制台拿到接入信息:找到你的代理网关 HostPort用户名密码(或白名单鉴权)。
  • 先跑连通性测试:用 https://httpbin.org/ip 验证请求是否走代理、出口 IP 是否符合预期。

需要记住四个参数:host / port / username / password。 后面所有代码示例都围绕它们展开。

建议先把控制台的 host/port/账号密码复制出来,再回来粘贴到下面的代码里。

kookeey 全球代理IP点击按钮免费试用

最小化连通性测试(建议买完第一件事就跑)

import requests

proxy_host = "http-dynamic.kookeey.com"   # 控制台的 host

proxy_port = "8888"                      # 控制台的 port

username = "your_username"               # 你的用户名

password = "your_password"               # 你的密码

gateway = f"http://{username}:{password}@{proxy_host}:{proxy_port}"

proxies = {"http": gateway, "https": gateway}

r = requests.get("https://httpbin.org/ip", proxies=proxies, timeout=10)

r.raise_for_status()

print(r.text)

如果返回的 IP 不是你本机公网 IP,说明代理链路已打通。 如果 IP 没变化,可能是:你启用了会话保持(sticky),或请求复用导致短时间观察到相同出口。

三种基本写法:requests / aiohttp / Scrapy(复制即用)

方法 1:requests(最简单,适合单请求或小并发)

import requests

proxy_host = "http-dynamic.kookeey.com"

proxy_port = "8888"

username = "your_username"

password = "your_password"

gateway = f"http://{username}:{password}@{proxy_host}:{proxy_port}"

proxies = {"http": gateway, "https": gateway}

try:

    r = requests.get("https://httpbin.org/ip", proxies=proxies, timeout=10)

    r.raise_for_status()

    print(r.json())

except requests.exceptions.RequestException as e:

    print("request failed:", e)

说明:网关轮换模式下,不需要你维护一堆代理列表;所有请求都走同一个网关入口即可。

方法 2:aiohttp(异步并发,适合更高吞吐)

import aiohttp

import asyncio

proxy_host = "http-dynamic.kookeey.com"

proxy_port = "8888"

username = "your_username"

password = "your_password"

proxy = f"http://{username}:{password}@{proxy_host}:{proxy_port}"

async def fetch(session, i):

    try:

        async with session.get("https://httpbin.org/ip", proxy=proxy) as resp:

            text = await resp.text()

            print(f"[{i}] status={resp.status} body={text}")

    except Exception as e:

        print(f"[{i}] failed: {e}")

async def main():

    timeout = aiohttp.ClientTimeout(total=15, connect=10, sock_connect=10, sock_read=10)

    connector = aiohttp.TCPConnector(limit=50)  # 限制连接池,避免无限并发

    async with aiohttp.ClientSession(timeout=timeout, connector=connector) as session:

        await asyncio.gather(*[fetch(session, i) for i in range(1, 6)])

if __name__ == "__main__":

    asyncio.run(main())

并发不等于越大越好。代理再好也扛不住无脑拉满并发:记得设置超时 + 连接池上限。

方法 3:Scrapy(通过中间件统一设置代理)

适合爬虫工程化:统一在 Downloader Middleware 注入 proxy,遇到异常/常见状态码可触发重试。

# middlewares.py

import random

from scrapy.exceptions import NotConfigured

class RotateProxyMiddleware:

    def __init__(self, proxy_url_list):

        self.proxy_url_list = proxy_url_list

    @classmethod

    def from_crawler(cls, crawler):

        proxy_url_list = crawler.settings.getlist("PROXY_URL_LIST")

        if not proxy_url_list:

            raise NotConfigured("PROXY_URL_LIST is empty")

        return cls(proxy_url_list)

    def _set_proxy(self, request):

        request.meta["proxy"] = random.choice(self.proxy_url_list)

    def process_request(self, request, spider):

        if not request.meta.get("proxy"):

            self._set_proxy(request)

    def process_exception(self, request, exception, spider):

        self._set_proxy(request)

        request.dont_filter = True

        return request

# settings.py

proxy_host = "http-dynamic.kookeey.com"

proxy_port = "8888"

username = "your_username"

password = "your_password"

PROXY_URL_LIST = [

    f"http://{username}:{password}@{proxy_host}:{proxy_port}",

]

DOWNLOADER_MIDDLEWARES = {

    "yourproject.middlewares.RotateProxyMiddleware": 543,

    "scrapy.downloadermiddlewares.retry.RetryMiddleware": 550,

}

RETRY_ENABLED = True

RETRY_TIMES = 3

DOWNLOAD_TIMEOUT = 20

更稳的 5 个小习惯(比“换 IP”更重要)

  • 设置超时:connect/read/total,避免坏链路把程序拖死。
  • 限并发:aiohttp 用 connector/信号量;Scrapy 调并发与下载延迟。
  • 重试要有策略:对 429/5xx/超时做重试,必要时更换会话或重新发起连接。
  • 观察“是否轮换”要用正确方式:多次请求 httpbin,结合你在控制台选择的轮换/会话策略判断。
  • 合规与风控:遵守目标站条款与当地法律;代理是工具,不是免责。

常见问题(快速排查)

  • 407 Proxy Authentication Required:账号/密码错误,或你选择了白名单鉴权但没把本机 IP 加进去。
  • 一直超时:代理不可用、网络不通,或并发过高导致连接耗尽。
  • 出口 IP 不变:可能启用了会话保持(sticky),或短时间连接复用导致看起来没变。

最后一步:把控制台参数填进代码里,先跑通 httpbin

跑通之后再上真实目标站,并逐步加限并发与重试策略。

点击试用领取新人流量礼包

Python 代理 IP 轮换:3 种常用方法

说明:本文代码示例使用的是“网关轮换”思路(买完直接用)。如果你用的是“自备代理列表”,只需要把 gateway 换成你的多个代理并在客户端做随机/顺序选择即可。

免费获取 kookeey 新用户福利 🎁
200MB 动态流量
198元 优惠大礼包
100%独享IP ISP 支持独享端口 / API 调用
Python 代理 IP 轮换:3 种常用方法

本文来自网络投稿,不代表kookeey立场,如有问题请联系我们

(1)
kookeeykookeey
上一篇 2026-01-04 12:07
下一篇 6天前

相关推荐

  • 全球代理IP在海外市场拓展中的不可或缺性

    随着全球经济的快速发展,海外市场成为了各行各业的热门目标。然而,要在陌生的市场中站稳脚跟并取得成功并非易事。在这个信息时代,互联网的普及为市场拓展提供了全新的机遇。而全球代理IP作为其中的重要工具,发挥着不可或缺的作用。 代理IP是一种技术手段,它允许用户通过中间服务器来访问互联网并隐藏真实的IP地址。全球代理IP则是拥有来自世界各地的IP地址资源,能够模拟…

    2023-12-28
  • 全球动态住宅IP在多账号注册中的应用

    在全球化的互联网时代,多账号注册与管理已成为许多个人和企业的常见需求。无论是为了扩大市场推广,还是为了进行数据分析,多账号操作都显得尤为重要。然而,随着网络平台的监管日趋严格,为了避免账号被封禁或限制,用户开始寻求更为安全和有效的方法来注册和管理多个账号。全球动态住宅IP正是在这一背景下,成为了多账号注册中的关键工具。 一、全球动态住宅IP的定义与特点 全球…

    2024-06-14
  • 海外HTTP代理IP助力全球数据爬取:满足多地区与全球化需求

    随着全球化的加速和互联网的蓬勃发展,数据爬取在多个领域发挥着越来越重要的作用,如市场调研、竞品分析、价格监测等。然而,许多网站基于用户IP地址的地理位置进行内容访问控制,这为全球化数据爬取带来了挑战。海外HTTP代理IP的出现,为这一难题提供了有效的解决方案,它能够满足多地区和全球化的数据爬取需求。 海外HTTP代理IP通过提供来自全球不同国家或地区的IP地…

    2024-07-17
  • 静态ip代理如何更好帮助跨境业务的开展,需要使用ip代理池吗?

    随着全球化进程的加速,越来越多的企业开始涉足跨境业务,而跨境业务的开展需要解决很多技术问题,其中ip地址的问题是一个非常重要的方面。静态ip代理作为一种常见的技术手段,可以帮助企业更好地开展跨境业务,那么静态ip代理如何更好地帮助跨境业务的开展?为了业务更好开展是否需要使用ip代理池?本文将详细解答。 一、为什么静态ip代理可以更好帮助跨境业务的开展?(ip…

    2023-12-08
  • 跨境电商为什么需要全球IP代理

    随着全球互联网的发展,电商平台的发展和跨境贸易的便利化,跨境电商在过去几年中也一直呈现增长趋势,吸引了越来越多的企业和个体创业者入行。 然而,行业竞争也在不断加剧,跨境电商面临更多的越来越多的挑战,不同国家的法规、市场规则、税收政策、物流情况等不尽相同,其中,全球IP代理就是其中一项关键点。 为什么这么说呢?这要从跨境电商对IP代理的需求和具体应用场景来说。…

    2023-12-21