有一个关于带有大文件的 RestTemplate 的问题。是否有最大内容长度和/或尽管已明确设置,但它是否会自动更改?
我有一个 5GB 的文件,我想通过 HTTP PUT 命令发送到我的 CDN (Akamai)。我已经将其设置如下(以避免 java 堆空间错误),但是我注意到执行命令时 Content-Length 会发生变化。
@Autowired
@Qualifier("restTemplateUpload")
public void setRestTemplateUpload(RestTemplate restTemplateUpload)
{
this.restTemplateUpload = restTemplateUpload;
SimpleClientHttpRequestFactory requestFactory = new SimpleClientHttpRequestFactory();
requestFactory.setBufferRequestBody(false);
restTemplateUpload.setRequestFactory(requestFactory);
}
以及发送文件的调用:
Resource resource = new FileSystemResource(localFile);
HttpHeaders headers = new HttpHeaders();
Map<String, String> headerValues = new HashMap<String, String>();
headerValues.put("X-Akamai...", value); //There are more headers, but you can assume this is correctly done as I've been able to transmit smaller files
headerValues.put("Host", host);
headers.setAll(headerValues);
headers.setContentType(MediaType.MULTIPART_FORM_DATA);
//I've tried using this and not using this but the result is
//the same, the request sent changes the value to 1469622184
headers.setContentLength(resource.contentLength());
System.out.println(headers.getContentLength()); //Result is: 5764589480
HttpEntity<Resource> uploadRequest = new HttpEntity<Resource>(resource, headers);
response = restTemplateUpload.exchange(hostPath, HttpMethod.PUT, uploadRequest, String.class);
Charles Proxy 报告 Content-Length 1469622184 并且当请求达到该长度时连接被终止。
Java 报错:
org.springframework.web.client.ResourceAccessException: I/O error on PUT request for "http://hidden.com/path/largefile.txt": too many bytes written;"
编辑:
当我像这样对 Content-Length 进行硬编码时,还有一些观察结果: headerValues.put("Content-Length", "3764589480"); Content-Length 字段实际上没有被发送,而是标题 Transfer-Encoding: chunked 被发送。
所以我进行了更多测试,结果如下:
硬编码内容长度:结果为 Charles
“1064589480”:发送内容长度:1064589480
“2064589480”:发送内容长度:2064589480
“3064589480”:删除内容长度,添加传输编码:分块
“3764589480”:删除内容长度,添加传输编码:分块
“4294967295”:删除内容长度,添加传输编码:分块
“4294967296”:发送内容长度:“0”,立即崩溃,写入的字节太多
“4764589480”:发送内容长度:“469622184”
“5764589480”:发送内容长度:“1469622184”
据我推断,在一定数量下,RestTemplate 将从 Content-Length 切换到 Transfer-Encoding。一旦它通过 4294967295,它开始再次将 Content-Length 传递回 0。对此我最好的解决方案是永远不要指定高于 4294967295 的值。如果它高于该阈值,则只需将其设置为 4294967295,RestTemplate 会将其更改为 Transfer -编码:无论如何都分块。是否存在某种溢出/精度点问题?