分块上传 GCS 用于 Go SDK 中的方法

目前golang学习网上已经有很多关于Golang的文章了，自己在初次阅读这些文章中，也见识到了很多学习思路；那么本文《分块上传 GCS 用于 Go SDK 中的方法》，也希望能帮助到大家，如果阅读完后真的对你学习Golang有帮助，欢迎动动手指，评论留言并分享~

我正在尝试使用 gcs writer 上传大文件：

bucketHandle := m.Client.Bucket(bucket)
    objectHandle := bucketHandle.Object(path)
    writer := objectHandle.NewWriter(context.Background())

然后对于大小为 n 的块，我调用 writer.write(mybuffer)。我在集群上看到一些内存不足的异常，并想知道这是否实际上只是将整个文件缓冲到内存中。这个操作的语义是什么，我是否误解了什么？

正确答案

是的，在代码中的每次 Write 调用之后，数据都会刷新到 GCS。 Write 方法返回写入的字节数、遇到的任何错误以及实际写入底层连接的字节数。每个块写入后，数据都会刷新到 GCS，因此客户端消耗的内存量应限制在缓冲区的大小内，在您的实例中，如果您将输入数据分块为 5 MB，则缓冲区的大小为 5 MB块并在循环中使用 Write。

好了，本文到此结束，带大家了解了《分块上传 GCS 用于 Go SDK 中的方法》，希望本文对你有所帮助！关注golang学习网公众号，给大家分享更多Golang知识！