高性能重复数据检测与删除技术研究 这里介绍一些零碎的有关数据重删的东西，以前总结的，放上可以和大家交流交流。 1 数据量的爆炸增长对现有存储系统的容量、吞吐性能、可扩展性、可靠性、安全 ...

近期做1功能，Gis地图 基于百度地图api , 会遇到的问题的， 如后台接口给的数据很多，大几千上万的，如果拿了数据直接渲染dom ，这滋味爽爽的。 再遇上 客户端浏览器悲催的，这卡顿就来了.. ...

使用数据库建立关键字段（一个或者多个）建立索引进行去重 根据url地址进行去重 使用场景：url地址对应的数据不会变的情况，url地址能够唯一判别一条数据的情况 思路： 　　url存在Redi ...