5

更新 - 更改了问题的标题以反映我真正追求的内容

考虑以下代码：

// this query generates 12 instances of Func<int>, which each when executed
// print something to the console and wait for 1 second.
var actions = Enumerable.Range(0, 12).Select(i => new Func<int>(() =>
{
    Console.WriteLine("{0} - waiting 1 sec", i);
    Thread.Sleep(1000);
    return 1;
}));

// define a parallel query. Note the WithDegreeOfParallelism call here.
var query = from action in actions.AsParallel().WithDegreeOfParallelism(12)
            select action();

// execute, measuring total duration
var stopw = Stopwatch.StartNew();
query.ToList();
Console.WriteLine(stopw.Elapsed);
Console.WriteLine(Environment.ProcessorCount); // 3 on my machine

当省略对 的调用时WithDegreeOfParallelism，它分 4 个块执行，总共需要大约 4 秒，这是我所期望的，因为我的 CPU 计数是 3。

但是，当用任何大于 4 的数字调用WithDegreeOfParallelism时，我总是得到 3 个块，并且总持续时间不低于 3 秒。我预计 12 的值将获得（略多于）1 秒的总持续时间。

我错过了什么？以及如何强制并行执行超过 4 个非 CPU 密集型任务，这就是我所追求的？

更新：我当然可以回去手动启动线程，但我希望新的 PFX 库能让这更容易一些......无论如何，下面的代码给了我大约 1 秒的总执行时间

List<Thread> threads = new List<Thread>();
for (int i = 0; i < 12; i++)
{
    int i1 = i;
    threads.Add(new Thread(() =>
    {
        Console.WriteLine(i1);
        Thread.Sleep(1000);
    }));
}
threads.ForEach(t => t.Start());
threads.ForEach(t => t.Join());
4

3 回答 3

3

尝试使用选项在并行循环中启动新任务TaskCreationOptions.LongRunning。它们将立即开始，而不是等到线程池上的线程可用。

于 2011-07-27T12:45:47.987 回答
2

WithDegreeOfParallelism 规定了 PLINQ 应该创建多少个任务，但不一定要使用多少个线程。

由于任务作为工作项在 ThreadPool 上执行，因此执行查询的线程数将受到 ThreadPool 大小的限制。ThreadPool 会根据需要添加线程，但可能需要一段时间 - ThreadPool 每秒可能会添加 2 个线程左右。

如果要快速将线程添加到 ThreadPool 中，可以使用 SetMinThreads 方法。如果您将此代码放在代码的开头，则测试应该在一秒钟左右完成：

int prevThreads, prevPorts;
ThreadPool.GetMinThreads(out prevThreads, out prevPorts);
ThreadPool.SetMinThreads(12, prevPorts);

您可以决定需要多少线程，然后使用 SetMinThreads 和 SetMaxThreads 设置 ThreadPool 大小的界限。

于 2011-07-28T07:36:07.757 回答
2

正如我所说，WithDegreeOfParallelism 只设置了一个上限。尝试将您的任务从 10 增加到 100。您最终将获得所有 100 个任务的大约 10 秒。您的代码适用于具有较小操作的大量任务。并 Console.WriteLine("{0} threads " ,Process.GetCurrentProcess().Threads.Count);在您的任务中添加，然后您可以看到创建了多少线程。（线程数不是 plinq 创建的线程数。看看它是如何增加的）。

有很多方法可以使用 Plinq 进行并行处理。阅读这篇文章http://msdn.microsoft.com/en-us/library/dd997411.aspx。您需要为相关要求选择最佳方式以获得更好的性能。

于 2011-07-27T16:26:30.640 回答