如何合并单词列表(删除重复项)?

如何合并单词列表(删除重复项)?

我正在一个文本文件中编辑一长串唯一单词(每行一个单词)。

我使用 Notepad++ 和 TextFXTools 合并单词列表,效果不错。我会在列表底部添加新单词,并使用 FXTools 删除重复词。这种方法一直有效,直到列表变得很大,有几百万个单词。Notepad++ 经常会在列表这么大时崩溃。

我需要一种方法来将新单词列表添加到一个大列表中,删除重复项并仅保留唯一单词。我该如何实现这一点?

答案1

您可以通过 HTML5 浏览器使用此工具: http://textmechanic.com/Big-File-Tool-Remove-Duplicate-Lines.html

答案2

  1. 打开 Excel 并转到 A1 单元格,输入标题
  2. 将您的记录粘贴在 A2、A3、A4..... 单元格上
  3. 选择 A1 单元格并转到Data-> Advance->OK出现提示时单击
  4. 点击Unique Data Only并点击OK
  5. 现在列表应该没有重复数据

相关内容