有没有办法自动从文本中删除不连续的重复单词？

Question

有没有办法自动删除非连续的（以及连续的）来自文本的重复单词？

这只是一篇简单的文本。最终结果应该是每个单词（由空格和/或标点符号分隔的字母块，包括连字符）只出现一次的文本。所以，我对含义不感兴趣，只关心字数和不重复。谢谢。