大量数据去重哈希函数算法，求帮助解决方法
日期：2014-05-20 浏览次数：20923 次
大量数据去重哈希函数算法，求帮助
需求是 在内存中有上亿条数据 里面很多重复的数据 现在决定用bloom filter 映射到哈希表里，但是用什么哈希算法 不知道 求解答
这个数据是一个通过md5 16位加密后的串 然后又拼接了一个字符串，字符串长度在30左右，
------解决方案--------------------
什么哈希算法？你不是说了用MD5了吗，
这个是java写的MD5例子http://www.bitscn.com/plus/view.php?aid=21188
需求是 在内存中有上亿条数据 里面很多重复的数据 现在决定用bloom filter 映射到哈希表里，但是用什么哈希算法 不知道 求解答
这个数据是一个通过md5 16位加密后的串 然后又拼接了一个字符串，字符串长度在30左右，
------解决方案--------------------
什么哈希算法？你不是说了用MD5了吗，
这个是java写的MD5例子http://www.bitscn.com/plus/view.php?aid=21188
免责声明： 本文仅代表作者个人观点，与爱易网无关。其原创性以及文中陈述文字和内容未经本站证实，对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺，请读者仅作参考，并请自行核实相关内容。
