Использование кучи в результате внедрения IBM SAAJ

Question

Нам нужно послать действительно огромные сообщения SOAP (multiparts, MTOM), скажем около 1 или 2 гигабайт. Иногда процесс заканчивается следующим ООМ:

java.lang.OutOfMemoryError: Java Heap Space 
at java.util.Arrays.copyOf(Arrays.java:2479) 
at java.io.ByteArrayOutputStream.toByteArray(ByteArrayOutputStream.java:203) 
at com.ibm.ws.webservices.engine.transport.channel.OutboundOutputStream.toByteArray(OutboundOutputStream.java:100) 
at com.ibm.ws.webservices.engine.transport.http.HttpOutboundChannelConnection.prepareHttpRequestHeaders(HttpOutboundChannelConnection.java:2027) 
at com.ibm.ws.webservices.engine.transport.http.HttpOutboundChannelConnection.sendSOAPRequest(HttpOutboundChannelConnection.java:374) 
at com.ibm.ws.webservices.engine.transport.http.HTTPSender.invoke(HTTPSender.java:745) 
at com.ibm.ws.webservices.engine.PivotHandlerWrapper.invoke(PivotHandlerWrapper.java:264) 
at com.ibm.ws.webservices.engine.PivotHandlerWrapper.invoke(PivotHandlerWrapper.java:264) 
at com.ibm.ws.webservices.engine.WebServicesEngine.invoke(WebServicesEngine.java:336) 
at com.ibm.ws.webservices.engine.client.Connection.invokeEngine(Connection.java:970) 
at com.ibm.ws.webservices.engine.client.Connection.invoke(Connection.java:761) 
at com.ibm.ws.webservices.engine.soap.SOAPConnectionImpl.call(SOAPConnectionImpl.java:223) 
at com.ibm.ws.webservices.engine.soap.SOAPConnectionImpl.call(SOAPConnectionImpl.java:163) 

На моем понимании, эта проблема связана с использованием ByteArrayOutputStream, который выглядит неуместным при работе с очень большими потоками.

Следуя таблице stacktrace, в куче требуется не менее 2 копий всего содержимого сообщения (в виде байтовых массивов).

Итак, вопрос, знает ли кто-нибудь о лучшей реализации SAAJ, посредством кучного потребления? Или может быть обходным путем для этой реализации IBM SAAJ?

Answer 1

Предполагая, что реализация IBM SAAJ не является полностью безумной, я ожидал бы, что она только преобразует сообщение в массив байтов, если HTTP-chunking не включен и ему нужно вычислить длину сообщения перед его отправкой. Поэтому первое, что нужно сделать, - убедиться, что функция chunking включена.

Я не думаю, что SAAJ определяет стандартный способ включения комков, но вы можете попробовать установить соответствующий заголовок HTTP на сообщение:

soapMessage.getMimeHeaders().addHeader("Transfer-Encoding", "chunked"); 

Скорее всего, что реализация SAAJ почтит это.