首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >如何从云端函数在google存储桶中以二进制模式打开文件?

如何从云端函数在google存储桶中以二进制模式打开文件?
EN

Stack Overflow用户
提问于 2020-10-19 02:41:10
回答 2查看 815关注 0票数 0

在我的云功能中,我需要在云存储中获取一个文件,并通过HTTP请求将文件发送到API。我尝试了以下代码:

代码语言:javascript
复制
storage_client = storage.Client()
bucket = storage_client.bucket(BUCKET_NAME)
source_blob_name = "/compressed_data/file_to_send.7z"
blob = bucket.blob(source_blob_name)

url = UPLOADER_BACKEND_URL
files = {'upload_file': blob}
values = {'id': '1', 'ouid': OUID}
r = requests.post(url, files=files, data=values)

它错误地说:

代码语言:javascript
复制
Traceback (most recent call last): File "/env/local/lib/python3.7/site-packages/google/cloud/functions/worker_v2.py", ... 
 \ line 90, in encode_multipart_formdata body.write(data) TypeError: a bytes-like object is required, not 'Blob'

如果这段代码要在实际的VM上运行,下面的代码就可以运行了:

代码语言:javascript
复制
url = UPLOADER_BACKEND_URL
files = {'upload_file': open('/tmp/file_to_send.7z','rb')}
values = {'id': '1', 'name': 'John'}
r = requests.post(url, files=files, data=values)

所以问题是:在云函数中,如何从云存储加载文件,使其具有与python open(filename, 'rb')函数相同的输出?

我知道我可以做blob.download_to_file(),然后open()文件,但我想知道是否有更快的方法。

EN

回答 2

Stack Overflow用户

回答已采纳

发布于 2020-10-19 07:35:58

在云函数引用中,不向API调用提供Blob内容,而只提供Blob引用(文件路径+桶名)。

您确实可以在内存文件系统/tmp目录中本地下载该文件。然后将此tmp文件作为任意文件处理。别忘了在上传后删除它!!

您还可以尝试使用the gcsfs library,在那里您可以以python惯用的方式处理文件。当我调用API时,我从未尝试过这样做,但是它应该能工作。

票数 2
EN

Stack Overflow用户

发布于 2022-08-04 16:34:26

我试着用

代码语言:javascript
复制
with blob.open("rb") as f:

更多信息:

How to transfer data from Google Cloud Storage to SFTP using Python without writing to the file system

票数 0
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/64420446

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档