有一个文件要和很多文件比较内容，看是否相同，如果文件大小相同，一个一个字节地比较内容，速度很慢，可以根据文件的内容各自生成MD5，然后对比文件的MD5值就可以快速排除不相同的文件。MD5值相同，极大概率就是相同的文件，不放心的话可以再遍历字节对比一下。 文件越多，效率越明显。增加文件时就可以存储对应的MD5值，改动文件时更新MD5值。 MD5：https://blog.csdn.net/u012611878/article/details/54000607 例如计算某个url的md5值 echo -n "https://www.toutiao.com/amos_land_page/?topic_id=7056654219297685518" | md5sum | cut -d " " -f1 7abb72ac5f9eccccc3150d65ae6ada23 echo -n : 不打印换行符。(注意: echo -n 后面的-n参数必须加上, 这样算出的字符串的md

md5sum – 计算检验MD5效验码md5sum命令采用MD5报文摘要算法（128位）计算和检查文件的校验和。 一般来说，安装了Linux后，就会有md5sum这个工具，直接在命令行终端直接运行。 linux中每个文件都会有1个md5值。当两个文件的md5值相同，表示这两个文件完全相同。md5值常用于大型文件的完整性检查，即给予方给出文件的同时给出md5值，接收方收到文件后再次计算md5值，如果两个md5值相同，说明文件在传输过程中没有损坏。...

md5sum命令用于生成文件的md5数字摘要，并可以验证文件内容是否发生了改变，间接地还可以检验两个文件内容是否完全相同。因为md5sum是读取文件内容来计算校验码的，因此只能验证文件内容，而无法验证文件属性。 [root@xuexi ~]# cp -a /etc/fstab /tmp/fstab [root@xuexi ~]# cp -a /etc/fstab /tmp/fstab1 生成文件的md5值。 [root@xuexi ~]# md5sum /tmp/fstab /tmp/fstab