python中带有SyncManager类的多进程优先级队列的队列函数
我想实现多处理优先队列。 我发现答案如下: 借 在我实施这个之后。我可以对优先级队列使用.get()和.put()函数,但当我使用.Queue打印队列中的当前元素时,它给了我一个错误 代码:-python中带有SyncManager类的多进程优先级队列的队列函数,python,multiprocessing,priority-queue,Python,Multiprocessing,Priority Queue,我想实现多处理优先队列。 我发现答案如下: 借 在我实施这个之后。我可以对优先级队列使用.get()和.put()函数,但当我使用.Queue打印队列中的当前元素时,它给了我一个错误 代码:- class MyManager(SyncManager): pass def get_manager(): MyManager.register("PriorityQueue", PriorityQueue) # Register a shared PriorityQueue
class MyManager(SyncManager):
pass
def get_manager():
MyManager.register("PriorityQueue", PriorityQueue) # Register a shared PriorityQueue
m = MyManager()
m.start()
return m
m = get_manager()
call= m.PriorityQueue()
for i in range(5):
call.put(i)
print(call.queue)
错误:AttributeError:“AutoProxy[PriorityQueue]”对象没有属性“queue”
我阅读了SyncManager的python文档并修改了代码
新代码:-
class MyManager(SyncManager):
pass
def get_manager():
MyManager.register("PriorityQueue", PriorityQueue,exposed=['put','get','queue']) # Register a shared PriorityQueue
m = MyManager()
m.start()
return m
m = get_manager()
call= m.PriorityQueue()
for i in range(5):
call.put(i)
print(call.queue)
现在的产出是:-
<bound method AutoProxy[PriorityQueue].queue of <AutoProxy[PriorityQueue] object, typeid 'PriorityQueue' at 0x7ff3b48f2dd0>>
我仍然没有得到队列中的元素,我读到了register函数的method\u to\u typeid
属性来映射exposed
中提到的函数的返回类型,但我不知道如何使用它
有人能帮我吗?这样我就可以打印队列中的元素,而无需从队列中弹出它们。您只能通过代理使用引用对象的方法。由于
PriorityQueue().queue
不是一个方法,而是一个实例属性,因此需要提供一个可以返回此属性值的方法。
下面的示例选择具有子类化PriorityQueue
的广义get\u属性
方法
# Python 3.7.1
from queue import PriorityQueue
from multiprocessing.managers import SyncManager
from multiprocessing import Process
SENTINEL = None
class MyPriorityQueue(PriorityQueue):
def get_attribute(self, name):
return getattr(self, name)
class MyManager(SyncManager):
pass
def get_manager():
MyManager.register("PriorityQueue", MyPriorityQueue)
m = MyManager()
m.start()
return m
def f(q):
for item in iter(lambda: q.get()[1], SENTINEL):
print(item)
print(f'queue: {q.get_attribute("queue")}')
if __name__ == '__main__':
m = get_manager()
pq = m.PriorityQueue()
tasks = enumerate([f'item_{i}' for i in range(5)] + [SENTINEL])
for task in tasks:
pq.put(task)
print(f'queue: {pq.get_attribute("queue")}')
print(f'maxsize: {pq.get_attribute("maxsize")}')
p = Process(target=f, args=(pq,))
p.start()
p.join()
示例输出:
queue: [(0, 'item_0'), (1, 'item_1'), (2, 'item_2'), (3, 'item_3'), (4, 'item_4'), (5, None)]
maxsize: 0
item_0
item_1
item_2
item_3
item_4
queue: []
queue
似乎是一种方法,所以需要调用它。请尝试调用call.queue()
(如果需要任何参数,可能会出现另一个错误)。queue
不可调用。所以我们不需要带括号()的队列
,无论是普通队列、多处理队列还是任何其他类型的队列,谢谢,它们工作得很好,也消除了我的疑虑。