大数据的list去除重复项

对于list里面的数据，假定是int，然后量比较大，如果使用双层的循环来去除重复项，性能不佳。

一个比较好的方法，就是将list的数据添加到set里，set会自动除去重复的数据项，也就是重复的数据只能添加一次。操作之后set的数据就是list里去除重复后的数据。