如何快速使用IP代理池?

sanyue科研 lv.1

发布时间：2022-12-01 05:48:18 188

相关标签： # python# 数据库# 数据

1.使用自己搭好的代理池或者别人搭建好的代理池，一般都是网页api的形式。
【建议多去Github逛逛，有你意想不到的收获，也能提高英语和参与一点项目的改进】

（1）第一步当然是你的api地址了。
例如：

self.PROXY_POOL_URL = 'http://localhost:5000/get'

如何快速使用IP代理池?_python

（2）向代理池的api发送请求获取返回的IP【一般以字符串返回】

def get_proxy(self):#代理池 并未启用
        try:
            response = requests.get(self.PROXY_POOL_URL)
            if response.status_code == 200:
                return {
                    'http':response.text,
                    'https':response.text
                }
            #proxies=Movie.get_proxy(self)
        except ConnectionError:
            return None

如何快速使用IP代理池?_数据库_02

（3）获取到之后，注意requests接受的代理的格式是字典格式

2.此外，可以从网上由IP代理的网站边抓取边使用，或者抓取了之后放到数据库或者一个网页的api上方便使用。

文章来源： https://blog.51cto.com/tony/5883298

特别声明：以上内容（图片及文字）均为互联网收集或者用户上传发布，本站仅提供信息存储服务！如有侵权或有涉及法律问题请联系我们。