利用python怎么生成一个MD5并实现去重

介绍

本篇文章给大家分享的是有关利用python怎么生成一个MD5并实现去重,小编觉得挺实用的,因此分享给大家学习,希望大家阅读完这篇文章后可以有所收获,话不多说,跟着小编一起来看看吧。

给每个文件生成一个MD5值,来对文件进行加密,是常用的文件校验方法,但是MD5的缺陷就是不能防止碰撞,

所以不同文件生成的MD5可能是相同的,因此就需要进行去重操作。

为方便演示,我用txt文件代替文件夹,用txt文件中的字符串代替文件夹中文件来生成MD5值并进行去重操作。

利用python怎么生成一个MD5并实现去重

每个txt文件中有字符串,用于生成MD5值:

利用python怎么生成一个MD5并实现去重

然后用代码生成MD5值并输出为文件,打印了一下字符串的数量和MD5的数量,两者是相同的:

利用python怎么生成一个MD5并实现去重

生成的MD5文件内容就是128位的MD5值,每个值一行:

利用python怎么生成一个MD5并实现去重

接下来对这些MD5进行去重操作,运行程序,会自动生成一个txt文件并将去重后的MD5写入。

利用python怎么生成一个MD5并实现去重

以上就是利用python怎么生成一个MD5并实现去重,小编相信有部分知识点可能是我们日常工作会见到或用到的。希望你能通过这篇文章学到更多知识。更多详情敬请关注行业资讯频道。

利用python怎么生成一个MD5并实现去重