Python 如何在线程环境中管理多个代理?

Python 如何在线程环境中管理多个代理?,python,multithreading,proxy,ip,tor,Python,Multithreading,Proxy,Ip,Tor,我希望每个线程使用不同的IP运行。是否可以为每个线程使用不同的ip? 到目前为止,我无法为每个线程分配不同的IP地址。目标是在不被禁止的情况下进行网络抓取 f1->ip X f2->ip y f3->ip z 这是我的密码: import requests from stem.control import Controller from stem import Signal import json import time import concurrent.futures from fa

我希望每个线程使用不同的IP运行。是否可以为每个线程使用不同的ip? 到目前为止,我无法为每个线程分配不同的IP地址。目标是在不被禁止的情况下进行网络抓取

f1->ip X

f2->ip y

f3->ip z

这是我的密码:

import requests
from stem.control import Controller
from stem import Signal
import json
import time  
import concurrent.futures  
from fake_useragent import UserAgent



def get_tor_session():
    # initialize a requests Session
    session = requests.Session()
    # setting the proxy of both http & https to the localhost:9050 
    # this requires a running Tor service in your machine and listening on port 9050 (by default)
    session.proxies = {"http": "socks5h://localhost:9150", "https": "socks5h://localhost:9150"}
    return session

def renew_connection():
    with Controller.from_port(port=9051) as c:
        c.authenticate()
        # send NEWNYM signal to establish a new clean connection through the Tor network
        c.signal(Signal.NEWNYM)

ua=UserAgent()
headers = {'User-Agent':ua.random}
urlA = 'https://api.ipify.org'

def serveur():
    renew_connection()
    s = get_tor_session()
    rA = s.get(urlA, headers=headers)
    print(rA.text)

def Th():
    with concurrent.futures.ThreadPoolExecutor() as executor:
        f1 = executor.submit(serveur)
        f2 = executor.submit(serveur)
        f3 = executor.submit(serveur)

Th()
以下是当前报表:

185.220.101.14
185.220.101.14
185.220.101.14
这可能是有用的:

我的任务是实现自动更新多代理

我用Tor做的。下面是一个小程序包,介绍如何运行多个Tor实例:

我使用macOS。还有代理的
privoxy
helper。以下是privoxy Python包:

有关如何使用它的信息,请参见:

要安装:

pip install git+https://github.com/detonavomek/privoxy-pool.git@https://github.com/detonavomek/privoxy-pool.git

这回答了你的问题吗?