背景 最近工作中遇到了一个问题：如何对大规模题库去重？公司经过多年的积累，有着近亿道题目的题库，但是由于题目来源不一导致题库中有很多重复的题目，这些重复的题目在检索时，除了增加搜索引擎的计算量外，并 ...

首先在处理之前需要明确一个事情，在当前场景下List或者普通数组中的元素如果是自定义对象那么就需要重写对象的equals方法和hashCode方法。 对于List的处理 方法1，通过Set实现类包 ...