相关疑难解决方法(0)

在大文件中查找重复项

我有一个大约1500万条目的大文件.文件中的每一行都包含一个字符串(称之为键).

我需要使用java在文件中找到重复的条目.我尝试使用散列图并检测重复的条目.显然这种方法给我一个"java.lang.OutOfMemoryError:Java堆空间"错误.

我怎么解决这个问题?

我想我可以增加堆空间并尝试它,但我想知道是否有更好的有效解决方案而不必调整堆空间.

algorithm data-structures

12
推荐指数
3
解决办法
2万
查看次数

标签 统计

algorithm ×1

data-structures ×1