文章/答案/技术大牛

发布

社区首页 >问答首页 >如何确定字符串中是否存在语义概念

问如何确定字符串中是否存在语义概念
EN

Data Science用户

提问于 2021-01-11 22:46:25

回答 1查看 37关注 0票数 1

我需要找到一种方法来检测一个大字符串是否包含一个特定的子字符串。

假设我在Python程序中将一个完整的契约页面转换为string。我想要做的是，在转换为字符串的页面中，是否存在一个特定的术语(比整个页面字符串更小的字符串)。匹配必须在语义上完成。

举个例子，在下面的例子中，我希望查询1有好的分数，查询2有不好的分数。注意，我的查询有可能有不止一个句子。

查询1

供应商将在一周内完成产品的交付

查询2

“我喜欢菲尔·科林斯”

页面文本

他说：“供应商每年七月将获发货款。

产品将在一周内交货。

.“

你将如何完成这项任务？

python

text-mining

semantic-similarity

回答 1

Data Science用户

回答已采纳

发布于 2021-01-14 22:20:40

这本质上是信息检索:通常有一个文档集合，目标是查找与给定查询最相似的文档(您称之为“语义概念”)。

传统的方法是将文档集合转换为向量，通常使用过渡联邦国防军权重，但是有许多选项(我假设最近的方法更倾向于使用字(或文档)嵌入))。然后使用相似度度量(例如余弦)来度量每个文档与查询之间的相似性，并选择最相似的文档。因为在这种情况下只有一个文档，所以您可以使用相似性级别上的阈值来回答是或否(概念找到与否)。

票数 1

页面原文内容由Data Science提供。腾讯云小微IT领域专用引擎提供翻译支持

原文链接：

https://datascience.stackexchange.com/questions/87825

复制

相似问题

问如何确定字符串中是否存在语义概念
EN

查询1

查询2

页面文本

回答 1

Data Science用户

社区

活动

圈层

关于

腾讯云开发者

热门产品

热门推荐

更多推荐

问如何确定字符串中是否存在语义概念EN

查询1

查询2

页面文本

回答 1

Data Science用户

社区

活动

圈层

关于

腾讯云开发者

热门产品

热门推荐

更多推荐

问如何确定字符串中是否存在语义概念
EN