web-dev-qa-db-ja.com

IEnumerable <T>を固定サイズのチャンクに分割します(内部シーケンスが固定長であるIEnumerable <IEnumerable <T >>を返します)

私はIEnumerable<T>そしてそれを固定サイズのチャンクに分割します。

私はこれを持っていますが、すべてのリストの作成/コピーのためにエレガントではないようです:

private static IEnumerable<IEnumerable<T>> Partition<T>(this IEnumerable<T> items, int partitionSize)
{
    List<T> partition = new List<T>(partitionSize);
    foreach (T item in items)
    {
        partition.Add(item);
        if (partition.Count == partitionSize)
        {
            yield return partition;
            partition = new List<T>(partitionSize);
        }
    }
    // Cope with items.Count % partitionSize != 0
    if (partition.Count > 0) yield return partition;
}

もっと慣用的なものはありますか?

編集:これは 配列をサブシーケンス配列の配列に分割する の複製としてマークされていますが、そうではありません-その質問は配列の分割を扱いますが、これは約IEnumerable<T>。さらに、その質問では、最後のサブシーケンスにパディングが必要です。 2つの質問は密接に関連していますが、同じではありません。

44
Alastair Maw

次のように、上記のBatchメソッドを自分で実装してみることができます。

    static class MyLinqExtensions 
    { 
        public static IEnumerable<IEnumerable<T>> Batch<T>( 
            this IEnumerable<T> source, int batchSize) 
        { 
            using (var enumerator = source.GetEnumerator()) 
                while (enumerator.MoveNext()) 
                    yield return YieldBatchElements(enumerator, batchSize - 1); 
        } 

        private static IEnumerable<T> YieldBatchElements<T>( 
            IEnumerator<T> source, int batchSize) 
        { 
            yield return source.Current; 
            for (int i = 0; i < batchSize && source.MoveNext(); i++) 
                yield return source.Current; 
        } 
    }

このコードを http://blogs.msdn.com/b/pfxteam/archive/2012/11/16/plinq-and-int32-maxvalue.aspx から取得しました。

[〜#〜] update [〜#〜]:この実装は、バッチだけでなくバッチ内のアイテムも遅延評価することに注意してください。以前のすべてのバッチが列挙された後にのみバッチが列挙された場合にのみ、正しい結果が生成されます。例えば:

public static void Main(string[] args)
{
    var xs = Enumerable.Range(1, 20);
    Print(xs.Batch(5).Skip(1)); // should skip first batch with 5 elements
}

public static void Print<T>(IEnumerable<IEnumerable<T>> batches)
{
    foreach (var batch in batches)
    {
        Console.WriteLine($"[{string.Join(", ", batch)}]");
    }
}

出力されます:

[2, 3, 4, 5, 6] //only first element is skipped.
[7, 8, 9, 10, 11]
[12, 13, 14, 15, 16]
[17, 18, 19, 20]

したがって、バッチを連続的に評価するときにバッチ処理を想定している場合は、上記の遅延ソリューションが機能します。そうでない場合は、厳密に連続したバッチ処理を保証できない場合(たとえば、バッチを並列処理する場合)、おそらくソリューションが必要になります上記の質問または MoreLINQ で言及されているものと同様に、バッチコンテンツを積極的に列挙します。

61
takemyoxygen

two iterator blocks( "yield returnメソッド」)。この拡張メソッドを作成しました。

static class Extensions
{
  public static IEnumerable<IEnumerable<T>> Partition<T>(this IEnumerable<T> items, int partitionSize)
  {
    return new PartitionHelper<T>(items, partitionSize);
  }

  private sealed class PartitionHelper<T> : IEnumerable<IEnumerable<T>>
  {
    readonly IEnumerable<T> items;
    readonly int partitionSize;
    bool hasMoreItems;

    internal PartitionHelper(IEnumerable<T> i, int ps)
    {
      items = i;
      partitionSize = ps;
    }

    public IEnumerator<IEnumerable<T>> GetEnumerator()
    {
      using (var enumerator = items.GetEnumerator())
      {
        hasMoreItems = enumerator.MoveNext();
        while (hasMoreItems)
          yield return GetNextBatch(enumerator).ToList();
      }
    }

    IEnumerable<T> GetNextBatch(IEnumerator<T> enumerator)
    {
      for (int i = 0; i < partitionSize; ++i)
      {
        yield return enumerator.Current;
        hasMoreItems = enumerator.MoveNext();
        if (!hasMoreItems)
          yield break;
      }
    }

    IEnumerator IEnumerable.GetEnumerator()
    {
      return GetEnumerator();      
    }
  }
}
13

多分?

public static IEnumerable<IEnumerable<T>> Partition<T>(this IEnumerable<T> items, int partitionSize)
{
    return items.Select((item, inx) => new { item, inx })
                .GroupBy(x => x.inx / partitionSize)
                .Select(g => g.Select(x => x.item));
}

すでに実装されているものもあります:morelinq'sBatch

11
L.B

最もクレイジーなソリューション( Reactive Extensions ):

public static IEnumerable<IList<T>> Partition<T>(this IEnumerable<T> items, int partitionSize)
{
    return items
            .ToObservable() // Converting sequence to observable sequence
            .Buffer(partitionSize) // Splitting it on spececified "partitions"
            .ToEnumerable(); // Converting it back to ordinary sequence
}

署名を変更したことは知っていますが、とにかく、固定サイズのコレクションがまとまっていることはわかっています。

ところで、イテレータブロックを使用する場合は、実装を2つのメソッドに分割して、引数を積極的に検証することを忘れないでください。

7

エレガントなソリューションについては、 MoreLinq.Batch。 もご覧ください。

ソースシーケンスをサイズ設定されたバケットにバッチ処理します。

例:

int[] ints = new int[] {1,2,3,4,5,6};
var batches = ints.Batch(2); // batches -> [0] : 1,2 ; [1]:3,4 ; [2] :5,6
3
Tilak
public static IEnumerable<IEnumerable<T>> Partition<T>(this IEnumerable<T> items, 
                                                       int partitionSize)
{
    int i = 0;
    return items.GroupBy(x => i++ / partitionSize).ToArray();
}
2
JustAnotherUser

オーバーロードEnumerable.GroupBy および整数除算を利用します。

return items.Select((element, index) => new { Element = element, Index = index })
    .GroupBy(obj => obj.Index / partitionSize, (_, partition) => partition);
1
Adam Maras

System.Collections.Concurrent 名前空間のパーティショナークラスはどうですか?

0
Christoffer