我正在尝试使asyncIO Futures不断发展。由于某种原因,我无法在任何其他范围内获得价值更新。
例如:
import concurrent.futures
import time
import asyncio
import random
def get_progress(futures):
return sum([f.done() for f in futures])
def long_task(t):
time.sleep(1.5)
return t
loop = asyncio.get_event_loop()
executor = concurrent.futures.ProcessPoolExecutor(max_workers=4)
inputs = ['a', 'b', 'c', 'd', 'e', 'f', 'g']
futures_ = [loop.run_in_executor(executor, long_task, i) for i in inputs]
for i in range(5):
time.sleep(1)
print(get_progress(futures_))
仅打印0
。但是,如果我在终端中运行此程序并调用get_progress(futures_)
它,则会按预期打印7。
我在这里想念什么吗?
ASYNCIO期货由归国run_in_executor
的目的是在ASYNCIO事件循环运行,并从不同的并发者。正确的异步代码如下所示:
async def track_progress():
for i in range(5):
await asyncio.sleep(1)
print(get_progress(futures_))
loop.run_until_complete(track_progress())
打印0 4 4 7 7。
请注意,您不需要asyncio,并且run_in_executor
如果您只想在线程中运行内容- concurrent.futures
完全有能力自行处理。例如:
executor = concurrent.futures.ProcessPoolExecutor(max_workers=4)
inputs = ['a', 'b', 'c', 'd', 'e', 'f', 'g']
futures_ = [executor.submit(long_task, i) for i in inputs]
由于是executor.submit
真正的并发期货,因此也futures_
包含它们。进行此修改后for
,跟踪其进度的原始循环将可以正常工作,并打印0 4 4 7 7。
谢谢您提供的明确示例。我不知道
executor.submit
,谢谢小费!