Commvault 和 AWS S3 性能

我們正在嘗試使用 Commvault 將 150TB 上傳到 S3。然而，我們每天只能使用 1.5Gbs 的專線上傳大約 0.5 TB。我們還啟用了以下建議：

• 最佳實踐
• 性能調整

我們還能做些什麼來提高 S3 的攝取率？

因此，在向 Commvault 開票並進行了幾個小時的故障排除後，我們發現問題出在本地 SAN 上的熱點和儲存備份並發送到 S3 的慢速 SATA 磁碟上。一旦解決了這個問題，網際網路管道就成了瓶頸。

最重要的是，我們能夠從每天 500GB 擴展到每天 10TB+。隨著從 Commvault 端添加更多流，S3 能夠相當線性地擴展。

閱讀這篇文章。延遲會對 S3 上傳性能產生重大影響。您對 S3 的 ping 時間是多少？你的平均物體大小是多少？你用了多少執行緒？

S3 傳輸加速使用 CloudFront 進行上傳，這可能會使其更快一些。我讀過報告說它並不總是帶來太多好處。

您可以上傳到離您較近的 S3 區域，然後複製數據。那可能會花費更多。

您還可以使用AWS import export發送物理磁碟。

引用自：https://serverfault.com/questions/993500