python中的线程不会并行发生

python中的线程不会并行发生,第1张

python中的线程不会并行发生

要并行获取多个网址,一次最多限制20个连接:

import urllib2from multiprocessing.dummy import Pooldef generate_urls(): # generate some dummy urls    for i in range(100):        yield 'http://example.com?param=%d' % idef get_url(url):    try: return url, urllib2.urlopen(url).read(), None    except EnvironmentError as e:         return url, None, epool = Pool(20) # limit number of concurrent connectionsfor url, result, error in pool.imap_unordered(get_url, generate_urls()):    if error is None:       print result,


欢迎分享,转载请注明来源:内存溢出

原文地址:https://54852.com/zaji/5645128.html

(0)
打赏 微信扫一扫微信扫一扫 支付宝扫一扫支付宝扫一扫
上一篇 2022-12-16
下一篇2022-12-16

发表评论

登录后才能评论

评论列表(0条)

    保存