Вложение Entity Framework 6 слишком медленное

Question

Во-первых, я очень хорошо знаю, что есть много других статей, посвященных точной теме. Однако эти статьи старые. Например,

Entity Framework is Too Slow. What are my options? это 4 года назад, и я предполагаю, что в рамках этой платформы было выпущено хотя бы одно крупное обновление версии, поэтому я надеюсь, что что-то новое и полезное поможет мне в этой теме.

Так что моя проблема в деталях, как это:

У меня есть источник данных, который я должен разобрать и вставить результаты в SQL Server. Поскольку разбор происходит так быстро, я думаю, что накладные расходы, очевидно, связаны с инфраструктурой сущности.

Мне нужно вставить данные в несколько десятков таблиц, около 80 из них. Каждая таблица имеет 8 столбцов, скажем, в среднем, среди которых есть столбец с автоинкрементным идентификатором. И каждый раз мне нужно вставить несколько тысяч строк в 20 таблиц. Поэтому некоторые таблицы огромные (возможно 100k строк?)

Таблицы имеют отношение между ними, что это просто форма звезды отношение, как это:

 
         table5 table6 
          \ /
      table3-----------\ \//-----------------table4 
     table1 ------------ record table ------------------ table2 

только представьте, основная таблица имеет 80 таблиц, вокруг него , 90% отношения - это 1-ко-многим, некоторые многие ко многим, ограниченные друг к другу.

Способ ввода: я добавляю весь результат в контекст с помощью метода AddRange, и я звоню SaveChanges раз в глобальном масштабе.

Я наблюдал эффективность ввода в текущих настройках, и я нашел в самом начале, вставка занимает несколько секунд, а затем минуты, теперь требуется 30 минут для вставки данных примерно в том же размере.

Итак, мой вопрос в том, что есть ли хороший способ повысить скорость вставки? Мне известно о массовой вставке, но у меня есть отношение наследования, поэтому я ищу любой другой способ, который не нарушит ограничение отношения.

Любые хорошие предложения или рекомендуемые хорошие профилировщики? Или это поможет в этой ситуации, если я определяю хранимую процедуру для обслуживания цели вставки? Извините, но на самом деле я только что узнал об этом в течение нескольких недель и ожидал, что это правильный инструмент для использования в бизнес-логике. Так голый со мной, если есть что-то, что хорошо известно в сообществе.

Answer 1

Вам необходимо обновить свой контекст для каждой партии.

например:

foreach(var batch in batches){ 
    using(var ctx = new MyContext()){ 
     //do a batch 
     ctx.SaveChanges(); 
    } 
} 

Если вы пытаетесь повторно использовать контекст вы все равно будете отслеживания всех предыдущих записей, вставленных. График отслеживания экспоненциально медленнее обрабатывается на основе количества отслеживаемых объектов.