查找目录分支中某些文件的总大小

假设有一个映像存储目录，例如，./photos/john_doe其中有多个子目录，其中驻留了许多特定文件（例如*.jpg）。如何计算john_doe分支下面这些文件的摘要大小？

我试过了du -hs ./photos/john_doe/*/*.jpg，但这只显示单个文件。此外，此操作仅跟踪john_doe目录的第一个嵌套级别，例如john_doe/june/，但会跳过john_doe/june/outrageous/。

那么，如何遍历整个分支，求和某些文件的大小呢？

find ./photos/john_doe -type f -name '*.jpg' -exec du -ch {} + | grep total$

如果du由于文件列表很长而需要多次调用，那么将报告多个总计，并且需要对其进行汇总。

du -ch public_html/images/*.jpg | grep total
20M total

给我.jpg该目录中文件的总使用量。

要处理多个目录，您可能必须以find某种方式将其组合。

您可能会发现du命令示例很有用（还包括find）

首先，您需要两件事：

• 的-c选项du，告诉它产生总计；
• 任一**（激活指令）或find（例如）或遍历子目录。

du -ch -- **/*.jpg | tail -n 1

最终答案是：

{ find <DIR> -type f -name "*.<EXT>" -printf "%s+"; echo 0; } | bc

甚至更快的版本，不受RAM的限制，但这需要具有bignum支持的GNU AWK：

find <DIR> -type f -name "*.<EXT>" -printf "%s\n" | gawk -M '{t+=$1}END{print t}'

此版本具有以下功能：

• find指定所需文件的所有功能
• 支持数百万个文件
  • 这里的其他答案受参数列表的最大长度限制
• 仅生成3个简单过程，并以最小的管道吞吐量
  • 这里有许多答案会生成C + N进程，其中C是一些常数，而N是文件数
• 不用理会字符串操作
  • 这个版本没有做任何grepping或正则表达式
  • 好，find对文件名进行简单的通配符匹配
• 任选地格式化的总和为人类可读的形式（例如5.5K，176.7M，...）
  • 做那个附加 | numfmt --to=si

到现在为止给出的答案都没有考虑到从find到du传递的文件列表可能很长，以至于find会自动将列表拆分成多个块，从而导致多次出现total。

您可以grep total手动（locale！）进行总结，也可以使用其他命令。AFAIK只有两种方法可以找到由find找到的所有文件的总和（以千字节为单位）：
find . -type f -iname '*.jpg' -print0 | xargs -r0 du -a| awk '{sum+=$1} END {print sum}'

说明
find . -type f -iname '*.jpg' -print0：查找所有带有jpg扩展名的文件，而不管大小写如何（例如* .jpg，*。JPG，*。Jpg ...）并输出（以Null结尾）。
xargs -r0 du -a：-r：即使没有传递任何参数，Xargs也会调用该命令，这-r可以防止。-0表示以null终止的字符串（不以换行符终止）。
awk '{sum+=$1} END {print sum}'：总结上一条命令输出的文件大小

作为参考，另一种方式是
find . -type f -iname '*.jpg' -print0 | du -c --files0-from=-

如果文件列表太大而不能传递给du -cGNU系统上的单个调用，则可以执行以下操作：

find . -iname '*.jpg' -type f -printf '%b\t%D:%i\n' |
  sort -u | cut -f1 | paste -sd+ - | bc

（大小以512字节块的数量表示）。像du它只计算一次硬链接。如果您不关心硬链接，则可以将其简化为：

(printf 0; find . -iname '*.jpg' -type f -printf +%b) | bc

如果要使用大小而不是磁盘使用量，请替换%b为%s。大小将以字节表示。

到目前为止提到的解决方案效率低下（exec成本很高），并且如果文件列表很长或者它们不能在Mac OS X上运行，则需要进行额外的手动工作才能总结。以下解决方案非常快，可以在任何系统上使用，并且产生以GB为单位的总答案（如果要以MB为单位，则删除/ 1024）： find . -iname "*.jpg" -ls |perl -lane '$t += $F[6]; print $t/1024/1024/1024 . " GB"'

像Zbyszek在他的评论中已经指出的那样，改进SHW的好答案以使其能够与任何语言环境一起使用。

LC_ALL=C find ./photos/john_doe -type f -name '*.jpg' -exec du -ch {} + | grep total$

du自然会遍历目录层次结构，而awk可以执行过滤，因此如下所示就足够了：

du -ak | awk 'BEGIN {sum=0} /\.jpg$/ {sum+=$1} END {print sum}'

这在没有GNU的情况下有效。