elasticsearch-hamming-plugin icon indicating copy to clipboard operation
elasticsearch-hamming-plugin copied to clipboard

Published 20 hours ago • verified publisher icon joway

可否利用这个方法查重

Open JasonBike opened this issue 7 years ago • 2 comments
trafficstars

如何输入一段文字然后搜索全库找出是否有相似度十分高的文档

JasonBike avatar Sep 30 '18 02:09 JasonBike

只要你的 hash 算法恰当就能够利用它来查重的。但是建议用于句子查重，大文本不太适用这种方式的查重。

@JasonBike

joway avatar Oct 05 '18 09:10 joway

只要你的 hash 算法恰当就能够利用它来查重的。但是建议用于句子查重，大文本不太适用这种方式的查重。

@JasonBike

大文本，有啥推荐的吗？我们这边的场景是题目的题干这种查重。一般几百个文字（中文，英文，字符）

NingerJohn avatar Jun 21 '23 09:06 NingerJohn