Amazon-Ec2

S3fs 性能改進還是替代方案?

  • May 8, 2021

我一直在嘗試在 EC2 伺服器上使用 s3fs,但它真的很慢。我花了最後 5 個小時上傳了 100MB 的小文件。

我可以做些什麼來提高性能還是與 S3fs 相關?如果沒有,我可以使用什麼替代方案?

對於大量較小的文件,S3FS 可能不是最佳選擇。S3FS 的成本也相當高。我建議使用類似S3Curl

您甚至可以進行並行傳輸。請記住,它永遠不會像 EBS / 本地儲存那樣快。

如果您需要將其作為“可安裝”儲存,我所知道的 S3FS 的唯一替代品是S3Backers3ql

我剛剛發布了https://github.com/kahing/goofys的 v0.0.1,部分原因是 s3fs 中的性能問題。文件創建速度提高了 3-6 倍,第一個字節的時間縮短了 58 倍。歡迎回饋!

引用自:https://serverfault.com/questions/396100