Apache flink Flink群集-无此类文件或目录java.io.FileNotFoundException:/tmp/Flink io

我们正在运行flink cluster 3节点，S3作为状态后端。我们注意到，在运行两周后，其中一个作业开始失败，检查点失败。此时，我们还松开了集群的“WebUI”控制台，这样我们就可以取消失败的作业并通过UI控制台重新启动它。当Web UI Rest调用为/jars端点抛出500个错误时。此时，我们需要重新启动集群并重新提交作业以从错误中恢复。对此的任何见解都会有所帮助。Flink版本是1.3.1

以下是来自的错误列表

org.apache.http.NoHttpResponseException:mybucket.s3.amazonaws.com:443未能响应
org.apache.http.NoHttpResponseException:mybucket.s3.amazonaws.com:443未能响应
org.apache.http.NoHttpResponseException:mybucket.s3.amazonaws.com:443未能响应
异常：异步函数调用因异常而终止。AsyncWaitOperator失败。
原因：java.util.concurrent.ExecutionException:java.util.concurrent.TimeoutException:异步函数调用已超时。
原因：java.util.concurrent.TimeoutException:异步函数调用已超时。
异常：异步函数调用因异常而终止。AsyncWaitOperator失败。
原因：java.util.concurrent.ExecutionException:java.util.concurrent.TimeoutException:异步函数调用已超时。
原因：java.util.concurrent.TimeoutException:异步函数调用已超时。
java.io.FileNotFoundException:/tmp/flink-io-7c72ca50-3b57-4a11-9940-f88a52b25407/361DC29A5660BF46F335C98CC55A000DAB0B6B23EB0505CD42791F54127EC3C5.0.buffer（无此类文件或目录）
java.io.FileNotFoundException:/tmp/flink-io-7c72ca50-3b57-4a11-9940-f88a52b25407/c235988e4448b0649b609261fff311be685205cc7394eb9a0cb66c958198ca6c.0.buffer（无此类文件或目录）
java.io.FileNotFoundException:/tmp/flink-io-7c72ca50-3b57-4a11-9940-f88a52b25407/361DC29A5660BF46F335C98CC55A000DAB0B6B23EB0505CD42791F54127EC3C5.0.buffer（无此类文件或目录）
java.io.FileNotFoundException:/tmp/flink-io-9d166a0f-82d7-4fd0-b0de-55c06efbe9e2/8fd69bc697889096d9d7f5595144dcb655c3d0f72f729870fe32d21c8f4c59b6.0.buffer（无此类文件或目录）
java.io.FileNotFoundException:/tmp/flink-io-9d166a0f-82d7-4fd0-b0de-55c06efbe9e2/8fd69bc697889096d9d7f5595144dcb655c3d0f72f729870fe32d21c8f4c59b6.0.buffer（无此类文件或目录）
java.io.FileNotFoundException:/tmp/flink-io-e85870d4-9214-4d52-bdfd-0a00fc08d459/6851aa013bdf007587e023a880d799ab11a10feee5a2cb12cc411f94132c7114b.0.buffer（无此类文件或目录）
java.io.FileNotFoundException:/tmp/flink-io-e85870d4-9214-4d52-bdfd-0a00fc08d459/dc36c57d88c098e78733a2d376c6599b18ef47d12575bdfd3ece47908f6bb8d3.0.buffer（没有这样的文件或目录）
java.io.FileNotFoundException:/tmp/flink-io-e85870d4-9214-4d52-bdfd-0a00fc08d459/6851aa013bdf007587e023a880d799ab11a10feee5a2cb12cc411f94132c7114b.0.buffer（无此类文件或目录）
java.io.FileNotFoundException:/tmp/flink-io-7c72ca50-3b57-4a11-9940-f88a52b25407/a92bffa6cc199b7ba29ebfcac5db914cc83291da3edf53ff3d59cdd0abf66e4b.0.buffer（无此类文件或目录）
java.io.FileNotFoundException:/tmp/flink-io-7c72ca50-3b57-4a11-9940-f88a52b25407/a92bffa6cc199b7ba29ebfcac5db914cc83291da3edf53ff3d59cdd0abf66e4b.0.buffer（无此类文件或目录）
java.io.FileNotFoundException:/tmp/flink-io-9d166a0f-82d7-4fd0-b0de-55c06efbe9e2/53327713f638a37dd59cc0a4e72e763229e91e050d1767af8608fb0418f2fb39.0.buffer（无此类文件或目录）
java.io.FileNotFoundException:/tmp/flink-io-9d166a0f-82d7-4fd0-b0de-55c06efbe9e2/53327713f638a37dd59cc0a4e72e763229e91e050d1767af8608fb0418f2fb39.0.buffer（无此类文件或目录）
java.io.FileNotFoundException:/tmp/flink-io-9d166a0f-82d7-4fd0-b0de-55c06efbe9e2/0e9ca7e5a82fce473fb6ffb698a59e05fea25e97bc0b67c226b893f25c56a176.0.buffer（无此类文件或目录）
java.io.FileNotFoundException:/tmp/flink-io-e85870d4-9214-4d52-bdfd-0a00fc08d459/6c7cbdd10df09fc93793d94d6b1aeb7c3cd21f2839b92c380796aaf27d56f02f.0.buffer（无此类文件或目录）
java.io.FileNotFoundException:/tmp/flink-io-e85870d4-9214-4d52-bdfd-0a00fc08d459/6c7cbdd10df09fc93793d94d6b1aeb7c3cd21f2839b92c380796aaf27d56f02f.0.buffer（无此类文件或目录）
java.io.FileNotFoundException:/tmp/flink-io-7c72ca50-3b57-4a11-9940-f88a52b25407/cb4062b597c2b31aa1e57b51e1ce993fca80aff6dc41ed4164a61f9f86171c96.0.buffer（无此类文件或目录）
java.io.FileNotFoundException:/tmp/flink-io-7c72ca50-3b57-4a11-9940-f88a52b25407/cb4062b597c2b31aa1e57b51e1ce993fca80aff6dc41ed4164a61f9f86171c96.0.buffer（无此类文件或目录）
java.io.FileNotFoundException:/tmp/flink-io-9d166a0f-82d7-4fd0-b0de-55c06efbe9e2/704e543afb61a45f1e5d0fb919422514ee6634feef72224803b6213d4bad30e1.0.buffer（无此类文件或目录）
java.io.FileNotFoundException:/tmp/flink-io-9d166a0f-82d7-4fd0-b0de-55c06efbe9e2/704e543afb61a45f1e5d0fb919422514ee6634feef72224803b6213d4bad30e1.0.buffer（无此类文件或目录）
java.io.FileNotFoundException:/tmp/flink-io-e85870d4-9214-4d52-bdfd-0a00fc08d459/5DE242870CA414F84C0A172CEAE717CA3A018EC707E9EA36B510C6BCAFA05B6.0.buffer（无此类文件或目录）
java.io.FileNotFoundException:/tmp/flink-io-e85870d4-9214-4d52-bdfd-0a00fc08d459/5DE242870CA414F84C0A172CEAE717CA3A018EC707E9EA36B510C6BCAFA05B6.0.buffer（无此类文件或目录）
java.io.FileNotFoundException:/tmp/flink-io-7c72ca50-3b57-4a11-9940-f88a52b25407/f8e8def8cf4fe3486136672eb2c06aff2e1f666522b031d80d80d09e7c944aa5f3c.0.buffer（没有这样的文件或目录）
java.io.FileNotFoundException:/tmp/flink-io-7c72ca50-3b57-4a11-9940-f88a52b25407/f8e8def8cf4fe3486136672eb2c06aff2e1f666522b031d80d80d09e7c944aa5f3c.0.buffer（没有这样的文件或目录）
java.io.FileNotFoundException:/tmp/flink-io-9d166a0f-82d7-4fd0-b0de-55c06ef