我有一个Parallel.ForEach()异步循环,可以通过该循环下载一些网页。我的带宽有限,因此每次只能下载x页,但是Parallel.ForEach执行所需网页的整个列表。
在运行Parallel.ForEach时,是否可以限制线程数或任何其他限制器?
演示代码:
Parallel.ForEach(listOfWebpages, webpage => { Download(webpage); });
真正的任务与网页无关,因此创造性的网络爬网解决方案将无济于事。
您可以MaxDegreeOfParallelism在ParallelOptions参数中指定:
MaxDegreeOfParallelism
ParallelOptions
Parallel.ForEach( listOfWebpages, new ParallelOptions { MaxDegreeOfParallelism = 4 }, webpage => { Download(webpage); } );
MSDN:并行ForEach
MSDN:ParallelOptions.MaxDegreeOfParallelism