我正在进行一个项目,许多零售商独立上传他们的产品信息,换句话说,同一产品可能会有不同的名称。例如,新iPad,或iPad,或超棒的iPad等…
我想为用户提供一个直观的界面,以便当他搜索iPad或iPads时,搜索结果中会显示一个iPad,并列出所有价格。或者可能是两个搜索结果,第一个是旧款iPad,显示来自不同零售商的所有价格,另一个搜索结果是iPad 2,同样显示并列的价格。
具体示例:数据库包含:新iPad 1,iPad 1,超棒的iPad 1,新iPad 2,iPad 2,超棒的iPad 2当用户搜索iPad时,他会得到:
- iPad1:零售商1的价格=100美元,零售商2的价格=120美元等…
- iPad2:零售商2的价格=100美元,零售商2的价格=120美元等…
这主要是一个搜索特定问题吗?还是机器学习,自动标记问题?
还有人知道在Rails3中是否有类似的实现吗?
谢谢
回答:
这是去重问题。地图和目录都在处理这个问题。解决这个问题的方法有很多,成功程度各不相同。最简单的方法是识别同义词和无用词(如“超棒”、“有趣”等),并使用这些信息进行项目匹配。对于一些不明确的情况,应发送给人工审核。
例如“新Apple iPad”与“超棒的iPad”=去除无用词=>“Apple iPad”与“iPad”=通过子字符串/太模糊=>相等