Этот вопрос связан с моим предыдущим вопросом
Это мой текущий код
IEnumerable<Shape> Get()
{
while(//get implementation
yield return new Shape(//...
}
void Insert()
{
var actual = Get();
using (var db = new DataClassesDataContext())
{
db.Shapes.InsertAllOnSubmit(actual);
db.SubmitChanges();
}
}
Я получаю переполнение памяти, поскольку IEnumerable слишком велик. Как мне это предотвратить?
Попробуйте использовать InsertOnSubmit вместо InsertAllOnSubmit. А затем совершайте фиксацию через определенные промежутки времени, как сказал Эрих.
Или, если вы хотите сделать это партиями, например, 5 попробуйте Handcraftsman's или dtb для получения IEnumerable от IEnumerable. Например, с чанком dtb:
var actual = Get();
using (var db = new DataClassesDataContext())
{
foreach(var batch in actual.Chunk(5))
{
db.Shapes.InsertAllOnSubmit(batch);
db.SubmitChanges();
}
}
Один из вариантов - разбить его на несколько партий. Создайте временный буфер из Shape объектов, выполняйте итерацию, пока вы не заполните его или не выйдете из счетчика, затем выполните InsertBatchOnSubmit.
Используйте следующий метод расширения, чтобы разбить ввод на подмножества подходящего размера.
public static class IEnumerableExtensions
{
public static IEnumerable<List<T>> InSetsOf<T>(this IEnumerable<T> source, int max)
{
List<T> toReturn = new List<T>();
foreach(var item in source)
{
toReturn.Add(item);
if (toReturn.Count == max)
{
yield return toReturn;
toReturn = new List<T>();
}
}
if (toReturn.Any())
{
yield return toReturn;
}
}
}
затем сохраните подмножества
void Insert()
{
var actual = Get();
using (var db = new DataClassesDataContext())
{
foreach (var set in actual.InSetsOf(5))
{
db.Shapes.InsertAllOnSubmit(set);
db.SubmitChanges();
}
}
}
Вы также можете найти этот MSDN статья о InsertOnSubmit () и InsertAllOnSubmit () будет полезной.
Чтобы получить изящный способ получать партии элементов из IEnumerable, см. Это:
C #: самый простой способ разделить массив строк на N экземпляров длиной N элементов
Обновление: ничего хорошего, это работает с массивами. Если у меня будет время позже и никто ничего не предоставит, я напишу это ...
