使用Java实现关键词匹配

原创

Java king

发布于 2023-03-15 11:15:02

2.3K3

发布于 2023-03-15 11:15:02

文章被收录于专栏：后端Java后端Java

谁若想在困厄时得到援助，就应在平日待人以宽。一萨迪

概述：

在计算机科学领域中，关键词匹配指的是在一个文本或数据集中查找特定的单词或短语。关键词匹配可以应用于多个场景中，例如搜索引擎、垃圾邮件过滤、内容审查等。

理念：

在关键词匹配中，我们需要将关键词和待匹配的文本进行比较。最简单的方式是使用字符串匹配算法，例如暴力匹配算法和KMP算法。但是这些算法在处理大量文本时效率较低，因此我们需要使用更高效的算法。

场景：

例如：公众号关键词回复，在很多时候我们只要定义好大概的关键词内容，用户输入的内容携带关键词，就会返回相应的内容，大大减少了我们运营的时间，用户体验也会更好，及时的响应，只有特殊的问题需要人工处理，只要关键词匹配的够多够好，就可以替代人工的回复。

实现：

在Java中，我们可以使用正则表达式来实现关键词匹配。正则表达式是一种强大的文本处理工具，它可以用于描述字符串的模式，例如特定的字符序列、数字、空格等。Java中的正则表达式使用java.util.regex包进行支持。

  //初始化数据
  private static final List<XwxKeyWordResp> wordRespList = new ArrayList<>();

    static {
        XwxKeyWordResp xwxKeyWordResp3 = new XwxKeyWordResp();
        xwxKeyWordResp3.setKeyWord("查看问卷报酬,问卷报酬,微信提现,提现,红包,领红包,奖励,领取奖励,领奖,报酬,查看报酬,查看问卷奖励,问卷奖励,红包提现,数据报酬,查看数据报酬,领取报酬,领取红包,奖金,怎么领取,如何提现");
        wordRespList.add(xwxKeyWordResp3);
    }

    /**
     * 根据用户输入内容匹配关键词
     *
     * @param xwxKeyWordResp：关键词内容类
     * @param text                  ：用户输入内容
     * @return boolean
     * @author king<fsyvip666 @ gmail.com>
     * @date 2023/3/15 11:02
     */
    public static boolean textMatching(XwxKeyWordResp xwxKeyWordResp, String text) {
        AtomicBoolean isOk = new AtomicBoolean(false);
        List<String> keywordList = Arrays.stream(xwxKeyWordResp.getKeyWord().split(",")).collect(Collectors.toList());
        keywordList.forEach(keyword -> {
            Pattern pattern = Pattern.compile(".*" + keyword + ".*");
            Matcher matcher = pattern.matcher(text);
            if (matcher.matches()) {
                isOk.set(true);
            }
        });
        return isOk.get();
    }

    @Test
    void streamTextMatching() {
        //初始时间
        long startTime = System.currentTimeMillis();
        String text = "我怎么进行提现，才是最快的速度？";
        List<XwxKeyWordResp> filterList = wordRespList.stream().filter(item -> textMatching(item, text)).collect(Collectors.toList());
        filterList.forEach(System.out::println);
        //结束时间
        long endTime = System.currentTimeMillis();
        //打印
        System.out.println("程序运行时间：" + (endTime - startTime) + "ms");
    }

测试用例：

XwxKeyWordResp{keyWord='查看问卷报酬,问卷报酬,微信提现,提现,红包,领红包,奖励,领取奖励,领奖,报酬,查看报酬,查看问卷奖励,问卷奖励,红包提现,数据报酬,查看数据报酬,领取报酬,领取红包,奖金,怎么领取,如何提现', keyWordType=null, status=null, respType=null, title='null', description='null', url='null', imgUrl='null', content='null'}
程序运行时间：3ms