Virtual-Machines

使用 gsutil 將文件從Google云儲存桶複製到 VM 實例的嘗試在達到大小限制後下降

  • November 24, 2020

我有一個文件大小大於 11 GB 的儲存桶。我注意到我可以從標準的Google云控制台訪問所有儲存桶的數據。不幸的是,這個控制台的配置非常有限,因為我相信它主要被認為是在Google云中管理文件和小型操作的工具。

為了更好地分析我的數據,我創建了一個具有 32 GB RAM 的 VM 實例。問題是:一旦進入 VM 實例,我就無法再訪問儲存桶中的數據。經過一番研究,我發現我可以使用以下方法將文件從儲存桶複製到我的實例:

gsutil -m cp -r gs://<my-bucket>/* .

我以為我找到了解決方案,但是達到 39% 後停止執行:

- [1/2 files][  4.4 GiB/ 11.2 GiB]  39% Done     0.0 B/s 

我不知道我的虛擬機必須具備什麼配置才能成功完成此操作,或者問題是否完全出在虛擬機上。

現在,我剛剛開始使用Google云,但我不確定我在這裡做的事情是正確的。這是在 VM 實例中使用儲存桶數據的標準程序嗎?如何將大文件從儲存桶複製到我的 VM 實例?

問題是:一旦我進入虛擬機實例,我就無法再訪問我的儲存桶中的數據

也許您在某些儲存桶文件夾中設置了訪問控制列表。

您可以通過gcloud auth login.

引用自:https://serverfault.com/questions/1043667