2016-08-24 3 views
1

Я настраиваю автоматическое задание Cron на связке серверов Linux, что требует вызова некоторых API PUT/POST, предоставляемых IBM WebSphere Application Server (8.5.5). Я написал свой собственный клиент REST в Java, но, как ни странно, иногда выполнение API зависает с меньшим исключением.Ошибка вызова API Java REST с исключением «Исправлена ​​асинхронная операция», когда полезная нагрузка превышает определенный размер

com.ibm.ws.webcontainer.webapp.WebApp logServletError SRVE0293E: [Servlet Error]-[JAX-RS Servlet]: java.net.SocketTimeoutException: Async operation timed out 
    at com.ibm.ws.tcp.channel.impl.AioTCPReadRequestContextImpl.processSyncReadRequest(AioTCPReadRequestContextImpl.java:191) 
    at com.ibm.ws.tcp.channel.impl.TCPReadRequestContextImpl.read(TCPReadRequestContextImpl.java:111) 
    at com.ibm.ws.http.channel.impl.HttpServiceContextImpl.fillABuffer(HttpServiceContextImpl.java:4212) 
    at com.ibm.ws.http.channel.impl.HttpServiceContextImpl.readSingleBlock(HttpServiceContextImpl.java:3440) 
    at com.ibm.ws.http.channel.impl.HttpServiceContextImpl.readBodyBuffer(HttpServiceContextImpl.java:3546) 
    at com.ibm.ws.http.channel.inbound.impl.HttpInboundServiceContextImpl.getRequestBodyBuffer(HttpInboundServiceContextImpl.java:1822) 
    at com.ibm.ws.webcontainer.channel.WCCByteBufferInputStream.bufferIsGood(WCCByteBufferInputStream.java:371) 
    at com.ibm.ws.webcontainer.channel.WCCByteBufferInputStream.read(WCCByteBufferInputStream.java:265) 
    at com.ibm.ws.webcontainer.srt.http.HttpInputStream.read(HttpInputStream.java:322) 
    at sun.nio.cs.StreamDecoder$CharsetSD.readBytes(StreamDecoder.java:464) 
    at sun.nio.cs.StreamDecoder$CharsetSD.implRead(StreamDecoder.java:506) 
    at sun.nio.cs.StreamDecoder.read(StreamDecoder.java:234) 
    at java.io.InputStreamReader.read(InputStreamReader.java:188) 
    at com.ibm.json.java.JSONArray.parse(JSONArray.java:150) 
    at com.ibm.websphere.jaxrs.providers.json4j.JSON4JArrayProvider.readFrom(JSON4JArrayProvider.java:44) 
    at com.ibm.websphere.jaxrs.providers.json4j.JSON4JArrayProvider.readFrom(JSON4JArrayProvider.java:25) 
    at org.apache.wink.server.internal.registry.ServerInjectableFactory$EntityParam.getValue(ServerInjectableFactory.java:197) 
    at org.apache.wink.common.internal.registry.InjectableFactory.instantiate(InjectableFactory.java:68) 
    at org.apache.wink.server.internal.handlers.CreateInvocationParametersHandler.handleRequest(CreateInvocationParametersHandler.java:44) 
    at org.apache.wink.server.handlers.RequestHandlersChain.handle(RequestHandlersChain.java:26) 
    at org.apache.wink.server.handlers.RequestHandlersChain.handle(RequestHandlersChain.java:22) 
    at org.apache.wink.server.handlers.AbstractHandlersChain.doChain(AbstractHandlersChain.java:75) 
    at org.apache.wink.server.internal.handlers.FindResourceMethodHandler.handleSubResourceMethod(FindResourceMethodHandler.java:188) 
    at org.apache.wink.server.internal.handlers.FindResourceMethodHandler.handleRequest(FindResourceMethodHandler.java:110) 
    at org.apache.wink.server.handlers.RequestHandlersChain.handle(RequestHandlersChain.java:26) 
    at org.apache.wink.server.handlers.RequestHandlersChain.handle(RequestHandlersChain.java:22) 
    at org.apache.wink.server.handlers.AbstractHandlersChain.doChain(AbstractHandlersChain.java:75) 
    at org.apache.wink.server.internal.handlers.FindRootResourceHandler.handleRequest(FindRootResourceHandler.java:95) 
    at org.apache.wink.server.handlers.RequestHandlersChain.handle(RequestHandlersChain.java:26) 
    at org.apache.wink.server.handlers.RequestHandlersChain.handle(RequestHandlersChain.java:22) 
    at org.apache.wink.server.handlers.AbstractHandlersChain.doChain(AbstractHandlersChain.java:75) 
    at org.apache.wink.server.internal.handlers.HeadMethodHandler.handleRequest(HeadMethodHandler.java:53) 
    at org.apache.wink.server.handlers.RequestHandlersChain.handle(RequestHandlersChain.java:26) 
    at org.apache.wink.server.handlers.RequestHandlersChain.handle(RequestHandlersChain.java:22) 
    at org.apache.wink.server.handlers.AbstractHandlersChain.doChain(AbstractHandlersChain.java:75) 
    at org.apache.wink.server.internal.handlers.OptionsMethodWADLHandler.handleRequest(OptionsMethodWADLHandler.java:51) 
    at org.apache.wink.server.handlers.RequestHandlersChain.handle(RequestHandlersChain.java:26) 
    at org.apache.wink.server.handlers.RequestHandlersChain.handle(RequestHandlersChain.java:22) 
    at org.apache.wink.server.handlers.AbstractHandlersChain.doChain(AbstractHandlersChain.java:75) 
    at org.apache.wink.server.internal.handlers.SearchResultHandler.handleRequest(SearchResultHandler.java:33) 
    at org.apache.wink.server.handlers.RequestHandlersChain.handle(RequestHandlersChain.java:26) 
    at org.apache.wink.server.handlers.RequestHandlersChain.handle(RequestHandlersChain.java:22) 
    at org.apache.wink.server.handlers.AbstractHandlersChain.doChain(AbstractHandlersChain.java:75) 
    at org.apache.wink.server.internal.log.ResourceInvocation.handleRequest(ResourceInvocation.java:92) 
    at org.apache.wink.server.handlers.RequestHandlersChain.handle(RequestHandlersChain.java:26) 
    at org.apache.wink.server.handlers.RequestHandlersChain.handle(RequestHandlersChain.java:22) 
    at org.apache.wink.server.handlers.AbstractHandlersChain.doChain(AbstractHandlersChain.java:75) 
    at org.apache.wink.server.internal.log.Requests.handleRequest(Requests.java:76) 
    at org.apache.wink.server.handlers.RequestHandlersChain.handle(RequestHandlersChain.java:26) 
    at org.apache.wink.server.handlers.RequestHandlersChain.handle(RequestHandlersChain.java:22) 
    at org.apache.wink.server.handlers.AbstractHandlersChain.doChain(AbstractHandlersChain.java:75) 
    at org.apache.wink.server.handlers.AbstractHandlersChain.run(AbstractHandlersChain.java:60) 
    at org.apache.wink.server.internal.RequestProcessor.handleRequestWithoutFaultBarrier(RequestProcessor.java:207) 
    at org.apache.wink.server.internal.RequestProcessor.handleRequest(RequestProcessor.java:154) 
    at org.apache.wink.server.internal.servlet.RestServlet.service(RestServlet.java:124) 
    at javax.servlet.http.HttpServlet.service(HttpServlet.java:668) 
    at com.ibm.ws.webcontainer.servlet.ServletWrapper.service(ServletWrapper.java:1230) 
    at com.ibm.ws.webcontainer.servlet.ServletWrapper.handleRequest(ServletWrapper.java:779) 
    at com.ibm.ws.webcontainer.servlet.ServletWrapper.handleRequest(ServletWrapper.java:478) 
    at com.ibm.ws.webcontainer.servlet.ServletWrapperImpl.handleRequest(ServletWrapperImpl.java:178) 
    at com.ibm.ws.webcontainer.filter.WebAppFilterManager.invokeFilters(WebAppFilterManager.java:1071) 
    at com.ibm.ws.webcontainer.servlet.CacheServletWrapper.handleRequest(CacheServletWrapper.java:87) 
    at com.ibm.ws.webcontainer.WebContainer.handleRequest(WebContainer.java:909) 
    at com.ibm.ws.webcontainer.WSWebContainer.handleRequest(WSWebContainer.java:1662) 
    at com.ibm.ws.webcontainer.channel.WCChannelLink.ready(WCChannelLink.java:200) 
    at com.ibm.ws.http.channel.inbound.impl.HttpInboundLink.handleDiscrimination(HttpInboundLink.java:459) 
    at com.ibm.ws.http.channel.inbound.impl.HttpInboundLink.handleNewRequest(HttpInboundLink.java:526) 
    at com.ibm.ws.http.channel.inbound.impl.HttpInboundLink.processRequest(HttpInboundLink.java:312) 
    at com.ibm.ws.http.channel.inbound.impl.HttpInboundLink.ready(HttpInboundLink.java:283) 
    at com.ibm.ws.tcp.channel.impl.NewConnectionInitialReadCallback.sendToDiscriminators(NewConnectionInitialReadCallback.java:214) 
    at com.ibm.ws.tcp.channel.impl.NewConnectionInitialReadCallback.complete(NewConnectionInitialReadCallback.java:113) 
    at com.ibm.ws.tcp.channel.impl.AioReadCompletionListener.futureCompleted(AioReadCompletionListener.java:175) 
    at com.ibm.io.async.AbstractAsyncFuture.invokeCallback(AbstractAsyncFuture.java:217) 
    at com.ibm.io.async.AsyncChannelFuture.fireCompletionActions(AsyncChannelFuture.java:161) 
    at com.ibm.io.async.AsyncFuture.completed(AsyncFuture.java:138) 
    at com.ibm.io.async.ResultHandler.complete(ResultHandler.java:204) 
    at com.ibm.io.async.ResultHandler.runEventProcessingLoop(ResultHandler.java:775) 
    at com.ibm.io.async.ResultHandler$2.run(ResultHandler.java:905) 
    at com.ibm.ws.util.ThreadPool$Worker.run(ThreadPool.java:1862) 
Caused by: com.ibm.io.async.AsyncTimeoutException(Async operation timed out, [Timeout, rc=0]) 
    at com.ibm.io.async.AbstractAsyncFuture.waitForCompletion(AbstractAsyncFuture.java:359) 
    at com.ibm.io.async.AsyncFuture.getByteCount(AsyncFuture.java:218) 
    at com.ibm.ws.tcp.channel.impl.AioSocketIOChannel.readAIOSync(AioSocketIOChannel.java:215) 
    at com.ibm.ws.tcp.channel.impl.AioTCPReadRequestContextImpl.processSyncReadRequest(AioTCPReadRequestContextImpl.java:184) 
    ... 78 more 

Это произошло только на некоторых серверах Linux, и это было отлично, когда я его разработал на своей рабочей станции Windows. Поэтому это не должно быть проблемой с настройками тайм-аута на сервере WAS. Я пытался отладить с помощью завиток, как показано ниже

curl -vX PUT http://<was_server_ip>:9081/RTCWebClient/v0.1/api/testResult/syncTestSuites?testCategory=Kitchen -d @test.json --header "Content-Type: application/json" 

и выяснили, когда нагрузка превышает 1306 байт (см Content-Length в завиток выходе ниже), то API начинает висеть и дает вышеупомянутое исключение.

> PUT /RTCWebClient/v0.1/api/testResult/syncTestSuites?testCategory=Kitchen 
HTTP/1.1 
> User-Agent: curl/7.19.7 (x86_64-redhat-linux-gnu) libcurl/7.19.7 NSS/3.19.1 Basic ECC zlib/1.2.3 libidn/1.18 libssh2/1.4.2 
> Host: 9.51.163.190:9081 
> Accept: */* 
> Content-Type: application/json 
> Content-Length: 1307 
> Expect: 100-continue 
> 
< HTTP/1.1 100 Continue 
< Content-Length: 0 
< Date: Wed, 24 Aug 2016 07:35:23 GMT 
< HTTP/1.1 500 Internal Server Error 
< Date: Wed, 24 Aug 2016 07:35:23 GMT 
< X-Powered-By: Servlet/3.0 
< Content-Type: text/html;charset=ISO-8859-1 
< $WSEP: 
< Content-Language: en-US 
< Content-Length: 102 
< Connection: Close 
< 
Error 500: javax.servlet.ServletException: java.net.SocketTimeoutException: Async operation timed out 
* Closing connection #0 

Когда полезная нагрузка меньше 1307 байт, API запускается надлежащим образом.

> PUT /RTCWebClient/v0.1/api/testResult/syncTestSuites?testCategory=Kitchen HTTP/1.1 
> User-Agent: curl/7.19.7 (x86_64-redhat-linux-gnu) libcurl/7.19.7 NSS/3.19.1 Basic ECC zlib/1.2.3 libidn/1.18 libssh2/1.4.2 
> Host: 9.51.163.190:9081 
> Accept: */* 
> Content-Type: application/json 
> Content-Length: 1306 
> Expect: 100-continue 
> 
< HTTP/1.1 100 Continue 
< Content-Length: 0 
< Date: Wed, 24 Aug 2016 07:37:51 GMT 
< HTTP/1.1 200 OK 
< Date: Wed, 24 Aug 2016 07:37:51 GMT 
< X-Powered-By: Servlet/3.0 
< Content-Type: application/json 
< Access-Control-Allow-Headers: application/json 
< Access-Control-Allow-Methods: GET, POST, PUT, DELETE 
< Access-Control-Allow-Origin: * 
< Content-Language: en-US 
< Transfer-Encoding: chunked 
< 
* Connection #0 to host 9.51.163.190 left intact 
* Closing connection #0 
{"Identifier":"syncTestSuites completed","Result":{"Newly Added Test Suites":[]}} 

Мне нужно проверить со своими администраторами, какие настройки могут вызвать это на этих проблемных машинах Linux. Но также я размещаю его здесь, чтобы узнать, сможет ли кто-нибудь задуматься над этим вопросом.

+0

Некоторые связанные вопросы о стеке еще не ответили. 1. [Асинхронная операция завершена] (http://stackoverflow.com/questions/35476406/async-operation-timed-out) 2. [Запрос не отправляется должным образом] (http://stackoverflow.com/questions/ 36810130/request-is-not-getting-submitted-proper-ww-getexception-java-net-sockett) –

+1

Я подозреваю, что время ожидания Async - это способ WebSphere: «Я не получил ответа». Но странно, что это зависит от размера сообщения, это не значит, что вы отправляете мегабайты. Может потребоваться использование pcap или wirehark, чтобы узнать, что происходит с сообщениями, чтобы разобраться в этом. –

ответ

0

Проблема была решена давно, но забыла обновить ее здесь.

После того, как размер MTU сервера приложений WAS был снижен с 1500 бит до 1320, проблема не исчезла. По словам администратора сети, это сделало сегмент данных сервера немного меньшим, что позволило некоторым приложениям лучше обрабатывать данные.

Вот очень хорошая статья в блоге о блоке максимальной передачи https://craigocon.wordpress.com/2012/10/03/whats-mtu-and-how-do-i-change-it-in-windows-2008-r2/.

Я совершенно не знаком с сетевыми знаниями, поэтому я рад, что получил поддержку от нашей сетевой команды.