c# - 有没有更好的方法将 Lambda 与 N 组一起使用？

Question

我有一种方法Process(IEnumerable<Record> records)，一次最多可以记录但不超过 3 条记录。我有数百条记录，所以我需要分组传递。我这样做：

var _Records = Enumerable.Range(1, 16).ToArray();
for (int i = 0; i < int.MaxValue; i += 3)
{
    var _ShortList = _Records.Skip(i).Take(3);
    if (!_ShortList.Any())
        break;
    Process(_ShortList);
}
// TODO: finish

它有效，但是......有更好的方法吗？

Answer 1

你可以使用MoreLinq的Batch

var result=Enumerable.Range(1, 16).Batch(3);

或者

var arrayOfArrays = Enumerable.Range(1, 16).Batch(3).Select(x => x.ToArray()).ToArray();

如果您想查看它，这里是源代码。

Answer 2

您可以使用此扩展方法：

public static IEnumerable<IEnumerable<T>> Split<T>(this IEnumerable<T> source, int chunkSize)
{
    return source
        .Select((value, i) => new { Index = i, Value = value })
        .GroupBy(item => item.Index % chunkSize)
        .Select(chunk => chunk.Select(item => item.Value));
}

它将项目的源集合拆分为具有给定大小的几个块。因此，您的代码将如下所示：

foreach (var chunk in Enumerable.Range(1, 16).Split(3))
{
    Process(chunk);
}

Answer 3

这是另一种 LINQ-y 方法：

var batchSize = 3;
Enumerable.Range(0, (_Records.Length - 1)/batchSize + 1)
    .ToList()
    .ForEach(i => Process(_Records.Skip(i * batchSize).Take(batchSize)));

Answer 4

如果您需要在解决方案中多次“分页”，您可以考虑使用扩展方法。

在 LINQPad 中一起破解，它会成功的。

public static class MyExtensions {
    public static IEnumerable<IEnumerable<T>> Paginate<T>(this IEnumerable<T> source, int pageSize) {
        T[] buffer = new T[pageSize];
        int index = 0;

        foreach (var item in source) {
            buffer[index++] = item;

            if (index >= pageSize) {
                yield return buffer.Take(pageSize);
                index = 0;
            }
        }

        if (index > 0) {
            yield return buffer.Take(index);
        }
    }
}

基本上，它预先填充一个大小的缓冲区，pageSize并在它满时产生它。如果还有< pageSize元素，我们也让它们产生。所以，

Enumerable.Range(1, 10).Paginate(3).Dump(); // Dump is a LINQPad extension

将产生

{{1, 2, 3}, {4, 5, 6}, {7, 8, 9}, {10}}

Answer 5

var _Records = Enumerable.Range(1, 16).ToArray();

int index = 0;
foreach (var group in _Records.GroupBy(element => index++ / 3))
    Process(group);

---

注意：上面的代码很短且相对高效，但仍然没有达到预期的效率（它本质上会在后台构建一个哈希表）。一个稍微麻烦但更快的方法是：

var _Records = Enumerable.Range(1, 16).ToArray();

var buff = new int[3];
int index = 0;

foreach (var element in _Records) {
    if (index == buff.Length) {
        Process(buff);
        index = 0;
    }
    buff[index++] = element;
}

if (index > 0)
    Process(buff.Take(index));

或者，将其打包成更可重用的形式：

public static class EnumerableEx {

    public static void Paginate<T>(this IEnumerable<T> elements, int page_size, Action<IEnumerable<T>> process_page) {

        var buff = new T[3];
        int index = 0;
        foreach (var element in elements) {
            if (index == buff.Length) {
                process_page(buff);
                index = 0;
            }
            buff[index++] = element;
        }

        if (index > 0)
            process_page(buff.Take(index));

    }

}

// ...

var _Records = Enumerable.Range(1, 16).ToArray();
_Records.Paginate(3, Process);

Answer 6

您可以创建自己的扩展方法：

static class Extensions {

  public static IEnumerable<IEnumerable<T>> ToBlocks<T>(this IEnumerable<T> source, int blockSize) {
    var count = 0;
    T[] block = null;
    foreach (var item in source) {
      if (block == null)
        block = new T[blockSize];
      block[count++] = item;
      if (count == blockSize) {
        yield return block;
        block = null;
        count = 0;
      }
    }
    if (count > 0)
      yield return block.Take(count);
  }

}

Answer 7

public static void ChunkProcess<T>(IEnumerable<T> source, int size, Action<IEnumerable<T>> action)
{
    var chunk = source.Take(size);

    while (chunk.Any())
    {
        action(chunk);

        source = source.Skip(size);
        chunk = source.Take(size);
    }
}

你的代码是

ChunkProcess(_Records, 3, Process);

Answer 8

此扩展方法工作正常。

public static class EnumerableExtentions
{
    public static IEnumerable<IEnumerable<T>> Chunks<T>(this IEnumerable<T> items, int   size)
    {
        return
            items.Select((member, index) => new { Index = index, Value = member })
                .GroupBy(item => (int)item.Index / size)
                .Select(chunk => chunk.Select(item => item.Value));
    }
}