python 多线程问题?

我有一文件列表,我要开多个线程,比如10个,依次下载列表中的文件,python怎么写?多谢!

阅读 4.2k
2 个回答

简单の来, 用concurrent模块

from concurrent.futures import *

def download(url):
    #bala bala
    return url

with ThreadPoolExecutor(max_workers=10) as executor:
    res = executor.map(download, [1, 2, 3, 4])
    for r in res:
        #bala bala

python中的并发处理的话推荐用gevent代替多线程。

from gevent import monkey
monkey.patch_all()
from gevent.pool import Pool


def download(url):
    # download form url


def main():
    # your files list
    files = [...]

    # 10 current with gevent Pool
    pool = Pool(10)
    pool.map(download, files)

download函数可以使用requests模块来实现下载功能。希望可以帮到你。

撰写回答
你尚未登录,登录后可以
  • 和开发者交流问题的细节
  • 关注并接收问题和回答的更新提醒
  • 参与内容的编辑和改进,让解决方法与时俱进
推荐问题