我正在用某些API ()收集有关当前正在发生的特定事件的数据(文本)。我正在接收的数据基于传递给API的关键字的默认列表。API还收集除默认关键字之外的文本中出现的关键字,然后将它们添加到我的默认列表中,以便API也可以使用这些关键字搜索数据。这就是问题发生的地方,因为一些新添加的关键字与事件无关。我不想只在默认列表中限制数据搜索,因为我不能涵盖文本中使用的所有关键字。
到目前为止,我的解决方案是尝试对每1000个接收到的数据进行点-双线相关系数,但我不确定这是否是正确的方法,以及如何做到。
如果有人能就如何处理这个问题给我一个建议或任何解决办法,我会非常感激。
发布于 2016-09-14 13:30:09
您可以处理关键字集合使用术语共现,应该提供一个更好的相关性,您的默认列表。这是一个例子,但您可以显著改进该算法。
https://stackoverflow.com/questions/39499745
复制相似问题