BreezeJS: Получение большого количества записей с помощью executequery() == System.OutOfMemoryException

Question

Является ли System.OutOfMemoryException ожидаемым, если большое количество (например, более 625 000) записей будет возвращено из вызова функции executequery()?

Использование take() работает нормально, например.

var query = breeze.EntityQuery 
    .from("Biography") 
    .select("ENTITY_ID, NAME, NICKNAME") 
    .where("VAL1","==","AL") 
    .orderBy("ENTITY_ID") 
    .take(1000); 

Однако, запрашивая все записи, возникает ошибка System.OutOfMemoryException.

var query = breeze.EntityQuery 
    .from("Biography") 
    .select("ENTITY_ID, NAME, NICKNAME") 
    .where("VAL1","==","AL") 
    .orderBy("ENTITY_ID"); 

Выполнение эквивалентного SQL занимает около 5 секунд для успешного завершения.

Answer 1

Я не удивлен.

Для того чтобы быть ясным, вы пытаетесь переместить более 625 000 записей по проводу, а затем создать объекты из них. Запрос на сервере, скорее всего, очень быстрый, но затем каждая из этих записей должна быть сериализована для json, отправлена ​​по проводу и затем воссоздана как объект. Эти операции могут быть как трудоемкими, так и памятью с большим количеством данных даже с лучшими реализациями.

Итак, у вас есть несколько вариантов уменьшения как объема памяти, так и времени, которое требуется выполнить.

1. Используйте взять (на вашем примере)
2. Используйте EntityQuery.noTracking вариант. Это пропускает шаг преобразования сериализованных записей в «истинные» объекты. Если вам нужны «истинные» сущности, вы можете добавить их выборочно в EntityManager по мере необходимости.