Google-Cloud-Storage
Google Cloud Storage 中的並行下載
有沒有人有使用Google云儲存的經驗?是否有潛在的 10K 並行請求來下載 10-70mb 文件?還是需要CDN?
https://cloud.google.com/storage/quotas
對對象的讀取沒有限制。儲存桶最初支持每秒大約 5000 次讀取,然後根據需要進行擴展。
如果您頻繁地從零到 10k 並行請求(假設它們真的是並行的,而不是說,“在相同的幾分鐘內”),您可能會遇到麻煩:
當儲存桶接近其 IO 容量限制時,Cloud Storage 通常需要幾分鐘的時間來檢測並相應地在更多伺服器之間重新分配負載。因此,如果您的儲存桶上的請求率增長得快於 Cloud Storage 執行此重新分配的速度,您可能會遇到臨時限制,特別是更高的延遲和錯誤率。如下所述,逐漸提高您的儲存桶的請求率可以避免此類延遲和錯誤。