我有一个包含很多行的md5sum文件。我想使用GNU parallel来加速md5sum检查过程。在md5sum中,当没有文件输入时,它将从stdin中获取md5字符串。我尝试了这个:cat checksums.md5 | parallel md5sum -c {}
但是得到这个错误:md5sum 445350b414a8031d9dd6b1e68a6f2367 testing.gz: No such file or directory
如何并行进行md5sum检查?
最佳答案
假设checksums.md5的格式为:
d41d8cd98f00b204e9800998ecf8427e My file name
运行:
cat checksums.md5 | parallel --pipe -N1 md5sum -c
如果文件很小:-N100
如果那不能加快您的处理速度,请确保您的磁盘足够快:md5sum可以处理500 MB/s。
iostat -dkx 1
可以告诉您磁盘是否是瓶颈。关于bash - 并行检查md5文件,我们在Stack Overflow上找到一个类似的问题:https://stackoverflow.com/questions/34082325/