Linux

zstd拼花解壓

  • October 7, 2020

我有 zstd 壓縮的鑲木地板文件。有可能以某種方式解壓嗎?我嘗試使用 zstd 命令,但沒有任何運氣:

[x@xyz tmp]# zstd -d part-00016-303a375a-e443-4f86-a59e-b5d82d15bd26.c000.zstd.parquet -o test.parquet
zstd: part-00016-303a375a-e443-4f86-a59e-b5d82d15bd26.c000.zstd.parquet: unsupported format

可以通過支持 zstd parquet 讀取的機器上的 spark-shell。

spark.read.option("compression", "zstd").parquet("/tmp/parquet-folder").write.option("compression", "none").mode("overwrite").parquet("/tmp/parquet-folder-no-compression")

引用自:https://serverfault.com/questions/1034900