hadoop - 检索使用hadoop distcp复制的数据的大小

我正在运行hadoop distcp命令,如下所示:

hadoop distcp src-loc target-loc

我想知道通过运行此命令复制的数据的大小。
我打算在Qubole上运行命令。

任何帮助表示赞赏

最佳答案

运行以下命令

hadoop dfs -dus -h target-loc

225.2 G目标位置

它将打印目标位置的人类可读摘要。

https://stackoverflow.com/questions/56177869/

相关文章:

amazon-web-services - Amazon EB中的Dockerfile

docker - 尝试推送到注册表时的HTTP响应403

java - 使用docker文件在Oracle初始化期间初始化架构

hadoop - hdfs:现有文件上的 “No such file or directory”

hadoop - 向我现有的集群添加自动故障转移?

hadoop - 如何修复用于计算一列并按另一列分组的配置单元代码?

apache-spark - 找不到pyspark.zip,应用程序application_1558

apache-spark - 多次运行时在同一组数据上不同的Pyspark代码输出

logging - 如何在Postfix(3)中更改(syslog)日志目标以用于Docker

hadoop - hbase completebulkload长时间运行