比如一堆词中有艾玛电动车
电动车艾玛      
艾玛的电动车
电动车艾玛
这类的词语义是差不多的，所以在生产内容的时候产出的内容大致都是差不多，这类词需要做下去重。

我参照了seo前线莫山的做法，对关键词分词，然后以分词为基点过滤重复。我用c#写了个小程序在处理，开了十几个线程速度还是非常慢，而且很吃内存。。。  你们有没有什么更好的方法来从语义上去重？



这个帖子查看人数在涨。。就是没人回帖。。
为了以表真诚，我把我用的代码附上。



有没有做过类似的进来分享下方法