使用flask（或烧瓶或类似容器）上传流文件

Question

我有一个使用Python / Bottle编写的REST前端，用于处理文件上传，通常是大型文件上传。API的编写方式如下：

客户端发送带有文件作为有效负载的PUT。除其他外，它发送日期和授权标头。这是一种针对重放攻击的安全措施-
使用目标URL，日期和其他几项，使用临时密钥对请求进行分割

现在的问题。如果提供的日期在15分钟的给定datetime窗口中，则服务器接受请求。如果上传花费的时间足够长，它将比允许的时间增量更长。现在，使用瓶视图方法上的装饰器完成请求授权处理。但是，除非上载完成，否则Bottle不会启动分发过程，因此对于较长的上载，验证将失败。

我的问题是：是否有一种方法可以解释瓶子还是WSGI，以立即处理请求并随流传输上传内容？由于其他原因，这对我也很有用。或其他解决方案？在撰写本文时，我想到了WSGI中间件，但我仍然希望获得外部见解。

我愿意切换到Flask或其他Python框架，因为REST前端非常轻巧。

谢谢

Answer 1

我建议在前端将传入文件拆分为较小的块。我这样做是为了在Flask应用程序中为大型文件上传实现暂停/恢复功能。

使用Sebastian Tschan的jquery插件，您可以通过maxChunkSize在初始化插件时指定a来实现分块，如下所示：

$('#file-select').fileupload({
    url: '/uploads/',
    sequentialUploads: true,
    done: function (e, data) {
        console.log("uploaded: " + data.files[0].name)
    },
    maxChunkSize: 1000000 // 1 MB
});

现在，客户端在上传大文件时将发送多个请求。您的服务器端代码可以使用Content- Range标头将原始大文件重新修补在一起。对于Flask应用程序，视图可能类似于：

# Upload files
@app.route('/uploads/', methods=['POST'])
def results():

    files = request.files

    # assuming only one file is passed in the request
    key = files.keys()[0]
    value = files[key] # this is a Werkzeug FileStorage object
    filename = value.filename

    if 'Content-Range' in request.headers:
        # extract starting byte from Content-Range header string
        range_str = request.headers['Content-Range']
        start_bytes = int(range_str.split(' ')[1].split('-')[0])

        # append chunk to the file on disk, or create new
        with open(filename, 'a') as f:
            f.seek(start_bytes)
            f.write(value.stream.read())

    else:
        # this is not a chunked request, so just save the whole file
        value.save(filename)

    # send response with appropriate mime type header
    return jsonify({"name": value.filename,
                    "size": os.path.getsize(filename),
                    "url": 'uploads/' + value.filename,
                    "thumbnail_url": None,
                    "delete_url": None,
                    "delete_type": None,})

对于您的特定应用程序，您只需确保仍随每个请求发送正确的auth标头。

希望这可以帮助！我在这个问题上挣扎了一段时间;）