Python RabbitMQ使用者连接在空闲90秒后终止
我有一个RabbitMQ任务队列和一个Pika使用者,用于使用ACK执行这些任务。问题是,连接在空闲90秒后终止,但我的任务通常需要更长的时间。这意味着,当任务仍在计算时,它们将返回到任务队列,并且永远不会确认 使用RabbitMQ 3.5.3和Pika 0.9.14以及channel.basic_消费方法。连接的心跳间隔为30秒 消费代码:Python RabbitMQ使用者连接在空闲90秒后终止,python,rabbitmq,pika,Python,Rabbitmq,Pika,我有一个RabbitMQ任务队列和一个Pika使用者,用于使用ACK执行这些任务。问题是,连接在空闲90秒后终止,但我的任务通常需要更长的时间。这意味着,当任务仍在计算时,它们将返回到任务队列,并且永远不会确认 使用RabbitMQ 3.5.3和Pika 0.9.14以及channel.basic_消费方法。连接的心跳间隔为30秒 消费代码: import pika from time import sleep RABBITMQ_URL = "amqp://user:pass@my-host.
import pika
from time import sleep
RABBITMQ_URL = "amqp://user:pass@my-host.com/my_virtual_host?heartbeat_interval=30"
QUEUE_NAME = "my_queue"
def callback(ch, method, properties, body):
print body
sleep(91) # if sleep value < 90 this code works (even 89)
ch.basic_ack(delivery_tag=method.delivery_tag)
parameters = pika.URLParameters(RABBITMQ_URL)
connection = pika.BlockingConnection(parameters)
channel = connection.channel()
channel.queue_declare(queue=QUEUE_NAME, durable=True)
channel.basic_qos(prefetch_count=1)
channel.basic_consume(callback, queue=QUEUE_NAME)
channel.start_consuming()
回溯:
Traceback (most recent call last):
File "main.py", line 19, in <module>
channel.basic_consume(callback, queue=QUEUE_NAME)
File "/usr/local/lib/python2.7/site-packages/pika/channel.py", line 221, in basic_consume
{'consumer_tag': consumer_tag})])
File "/usr/local/lib/python2.7/site-packages/pika/adapters/blocking_connection.py", line 1143, in _rpc
self.connection.process_data_events()
File "/usr/local/lib/python2.7/site-packages/pika/adapters/blocking_connection.py", line 240, in process_data_events
if self._handle_read():
File "/usr/local/lib/python2.7/site-packages/pika/adapters/blocking_connection.py", line 347, in _handle_read
if self._read_poller.ready():
File "/usr/local/lib/python2.7/site-packages/pika/adapters/blocking_connection.py", line 43, in inner
return f(*args, **kwargs)
File "/usr/local/lib/python2.7/site-packages/pika/adapters/blocking_connection.py", line 89, in ready
self.poll_timeout)
select.error: (9, 'Bad file descriptor')
这里的问题是,因为您睡眠时间太长,pika无法响应来自RabbitMQ的心跳请求,当这种情况发生时,RabbitMQ将关闭连接 解决这一问题的唯一方法是禁用心跳或以较小的间隔睡眠,并连续运行process_data_事件,以便pika能够处理心跳 e、 像这样的
就我个人而言,我会选择一个在后台自动处理心跳的库,这样你就不必处理它们了,例如,或者我自己的。请发布复制心跳的代码problem@DerickBailey谢谢你的快速回复。这是我的代码和我的回溯你能捕捉到确切的网络连接错误并发布吗?更新的代码和错误,使其更通用和可复制@joshuad2你能详细说明吗?太棒了。我很惊讶pika文档没有提到这一点。下次使用rabbitmq时,我一定会尝试这些库。对于这个项目,我已经放弃了rabbitmq,转而使用一个简单的redis队列。
def amqp_sleep(connection, time_to_sleep=20):
remaining = time_to_sleep
while remaining > 0:
connection.process_data_events()
time.sleep(5)
remaining -= 5