Tomcat gzip mientras problema fragmentado

Question

Estoy expirando algún problema con uno de mis servicios de fuente de datos. Como dice en los encabezados de respuesta HTTP que se ejecuta en Apache-Coyote/1.1. servidor da respuestas con Transfer-Encoding: fragmentada, aquí respuestas de ejemplo:

HTTP/1.1 200 OK 
Server: Apache-Coyote/1.1 
Content-Type: text/xml;charset=utf-8 
Transfer-Encoding: chunked 
Content-Encoding: gzip 
Date: Tue, 30 Mar 2010 06:13:52 GMT 

Y es un problema cuando estoy solicitando servidor para enviar solicitud gzipped a menudo no envía respuesta completa. Recibo una respuesta, veo el último fragmento recibido, pero luego, al desacoplarlo, veo que la respuesta es parcial. Nunca he visto ese comportamiento con gzip desactivado en los encabezados de solicitud.

Así que mi pregunta es: ¿es el problema común de Tomcat? tal vez uno de ellos es mod que está haciendo compresión? ¿O tal vez sea algún tipo de problema de proxy? No puedo hablar sobre versiones de Tomcat o qué mod de gzip usan, pero no dudes en preguntar, intentaré preguntarle a mi proveedor de servicios.

Gracias.

Answer 1

Dado que la duración del contenido de una respuesta comprimida es impredecible y es potencialmente cara y lenta para comprimirla completamente en la memoria primero, calcule la longitud y luego transmita la respuesta comprimida de la memoria, el servidor web promedio los enviará en fragmentos utilizando Transfer-Encoding:chunkedsin a Content-Length encabezado.

Dado que es un cliente HTTP de cosecha propia, parece que no maneja las solicitudes fragmentadas correctamente. Debe determinar el encabezado de respuesta Transfer-Encoding y si es igual a chunked, entonces debe analizarlo como una secuencia fragmentada.

Puede aprender de los enlaces de especificación HTTP antes mencionados y de Wikipedia cómo analizar una secuencia en bloque. Cada fragmento consta de un encabezado que indica la longitud del fragmento en hexadecimal, luego un CRLF, luego el contenido real del fragmento y luego un CRLF. Esto se repite hasta que un fragmento con un encabezado denota la longitud del fragmento de 0. Necesita separar los trozos por separado y luego pegarlos.

Para guardar todo el tedioso trabajo de codificación (probablemente también para el remanente de su propio cliente HTTP), le recomiendo echar un vistazo a Apache HttpComponents Client.