如何用"like"运算符查询lucene？ - 腾讯云开发者社区 - 腾讯云

开发者社区

文档建议反馈控制台

文章/答案/技术大牛

发布

一步一步学lucene——（第一步：概念篇）

你可以把站内新闻都索引了，做个资料库；你可以把一个数据库表的若干个字段索引起来，那就不用再担心因为“%like%”而锁表了；你也可以写个自己的搜索引擎…… 应用程序和lucene之间的关系 lucene...同时对其进行了扩展，提供了比Lucene更为丰富的查询语言，同时实现了可配置、可扩展并对查询性能进行了优化，并且提供了一个完善的功能管理界面，是一款非常优秀的全文搜索引擎。...它是hibernate对著名的全文检索系统Lucene的一个集成方案，作用在于对数据表中某些内容庞大的字段（如声明为text的字段）建立全文索引，这样通过hibernate search就可以对这些字段进行全文检索后获得相应的...POJO，从而加快了对内容庞大字段进行模糊搜索的速度（sql语句中like匹配）。...图：baidu搜索界面 2、建立查询根据提交过来的搜索请求，将查询的条件组合起来并且交给lucene的查询解析器中，并且对查询的内容进行分析处理的过程。

1.7K8 0

Solr搜索引擎 — 查询命令和两种中文分词使用

已经和mysql建立好了关联，可以查询和更新mysql的数据量，接下来就是进阶的使用方式了附上: 喵了个咪的博客：http://w-blog.cn Solr官网：http://lucene.apache.org...version 查询语法的版本，建议不使用它，由服务器指定默认值。检索运算符　　“:” 指定字段查指定值，如返回所有值*:* 　　“?”...符号）　　“~” 表示模糊检索，如检索拼写类似于”roam”的项这样写：roam~将找到形如foam和roams的单词；roam~0.8，检索返回相似度在0.8以上的记录。　　...、-（排除操作符不能单独与项使用构成查询）　　“+” 存在操作符，要求符号”+”后的项必须在文档相应的域中存在² 　　( ) 用于构成子查询　　[] 包含范围检索，如检索某时间段记录，包含头尾，date...三、Solr自带中文分词自带中文分词 > cp contrib/analysis-extras/lucene-libs/lucene-analyzers-smartcn-7.7.1.jar server

2K1 0

您找到你想要的搜索结果了吗？

是的

没有找到

全文检索原理

Lucene实现方案根据用户输入的关键词(java), 应用服务器通过Lucene提供的API查询索引库, 索引库返回搜索结果给应用服务器, 服务器再将查询到的结果返回给用户特点: 解决数据量大、用户量大...、业务系统对查询速度要求高的业务需求(如实时查询). ?...以Lucene为例建立倒排索引: 文件一(编号是1): we like java java java 文件二(编号是2): we like Lucene Lucene Lucene term (doc,...freq) (pos) we (1, 1) (2, 1) (0) (0) like (1, 1) (2, 1) (1) (1) java (1, 3) (2, 3, 4) Lucene (2, 3)...反向索引查询示例比如说，我们要寻找既包含字符串“lucene”又包含字符串“solr”的文档，我们只需要以下几步：取出包含字符串“lucene”的文档链表。

3.1K4 0

Elastic Search

如：电商系统中查询商品数据 - select * from products where name like ‘%关键字%’ and price bewteen xxx and yyy and …。...不同的用户提供的查询条件不同，需要提供的动态SQL过于复杂。关键字索引不全面，搜索结果不符合要求。如：电商系统中查询商品数据，条件为商品名包含’笔记本电脑’。...对应的查询语法应该为 - select * from products where name like ‘%笔记本%’ or name like ‘%电脑%’ … 效率问题。...（如果处理时长过长，如：1小时，则成为离线批处理【batch-processing，如：在电信营业厅登记查询最近3年的通话记录，需要3天后再取结果】） 4 ES常见使用场景维基百科，全文检索，高亮显示...8.10 查询Document 8.10.1 GET查询 GET /index_name/type_name/id 如： GET /test_index/my_type/1 结果 { "_index

1.9K4 0

Lucene 入门教程

普通的数据库搜索类似：select * from 表名 where 字段名 like ‘%关键字%’ 例如：select * from article where content like ’%here...普通的数据库搜索的缺陷类似：select * from 表名 where 字段名 like ‘%关键字%’ 例如：select * from article where content like ’%...非结构化数据：指不定长或无固定格式的数据，如邮件，word文档等磁盘上的文件. 非结构化数据是数据结构不规则或不完整，没有预定义的数据模型，不方便用数据库二维逻辑表来表现的数据。...如利用windows的搜索也可以搜索文件内容，只是相当的慢。...2）创建查询用户输入查询关键字执行搜索之前需要先构建一个查询对象，查询对象中可以指定查询要搜索的Field文档域、查询关键字等，查询对象会生成具体的查询语法，例如：　　语法 “fileName:lucene

1.1K2 0

Lucene：基于Java的全文检索引擎的简介

数据的索引不是为全文索引设计的，所以在sql中使用like %进行模糊查询时，数据库的索引是不起作用的，对于需要对外提供高效服务的服务的服务器来说，这是个致命的危害。...检索过程就是把模糊查询变成多个可以利用索引的精确查询的逻辑组合的过程，从而大大的提高了关键词查询到的效率，所以全文检索问题归结到第就是一个排序问题。...Lucene最核心的特征是通过特殊的索引结构实现了传统数据库不擅长的全文索引机制。 3、Lucene与数据库的模糊查询的简单比较：索引：Lucene将数据源中的数据通过全文索引一一建立反向索引。...数据库对于like模糊查询而言，在数据检索时索引根本用不了的。结果输出：Lucene通过特别的算法，将匹配度最高的前100条结果集输出，结果集是缓冲式的小批量读取。...从上面可以总结出：Lucene和database最大的不同的在于让与用户查询的数据匹配的前100条结果满足98%以上用户的需求。

1.1K2 0

为了检索打分，Elasticsearch 在索引时存储了哪些统计信息？

（字段级）索引中文档总数全局（段级）所有文档的平均长度全局（字段级）✅关键结论：文档级数据（如）需随文档存储；全局统计量（如）需在索引级别维护。...存储位置：TermDictionary（词典）示例："人工智能"→docFreq=10,000表示全索引中有1万篇文档包含“人工智能”；查询时用于计算IDF：)✅Lucene不预存IDF值本身，而是存n_t...，IDF在查询时动态计算，以支持实时更新。...4.全局统计量（N,\text{avgdl}）→存入SegmentMetadata每个Lucene段（Segment）维护以下字段级/段级元数据：统计量说明如何用于BM25numDocs本段中文档总数（...段检查工具（如Luke）查看。

1871 0

Lucene全文检索

bbs的关键字搜索：如百度贴吧。商品网站的搜索：如淘宝、京东、中关村在线等。文件管理系统：对文件的搜索功能。Window的文件搜索等。 2. 垂直搜索 a) 是针对某个行业的搜索引擎。...数据库的搜索类似：select * from 表名 where 字段名 like ‘%关键字%’。...例如：select * from article where content like’%here%’。结果: where here shere。缺点： 1) 搜索效果比较差。...2) 因为全文检索是采用引索的方式，所以在速度上肯定比数据库方式like要快。 3) 所以数据库不能代替全文检索。全文检索只是一个概念，而具体实现有很多框架，Lucene是其中的一种。...3) 当用户数据要查询的关键字，返回的页面首先是从索引库中得到的。 4) 点击每一个搜索出来的内容进行相关网页查找，这个时候才找的是互联网中的网页。 Lucene的大致结构框图 ?

1.8K2 0

百度谷歌搜索引擎常用搜索技巧有哪些_可以用谷歌搜索的软件

北京 time/sunrise/sundown: 查询城市当前时间、日出时间、日落时间 time:guangzhou //得是英文 stocks: 股票查询 stocks:恒大 map: 地图查询...intitle:三体 intitle:刘慈欣 related: 搜索所有与某网页相似的网页 related:https://baidu.com +、-、[space]、AND、OR、|、()等逻辑运算符都可以使用...号可表示只检索完全含有这串字符的网页《》号可只检索含有这串字符的电影、小说等『』号可只检索含这串字符的论坛版块 2008…2010可搜索指定年份段内结果可以直接输入数学公式，点击搜索搜索引擎自动为你计算可以输入like...以上技巧有些只满足Google搜索、有些只满足Baidu搜索，但是大多数都是双方都能用的参考网址谷歌、百度的搜索技巧如何用好 Google 等搜索引擎版权声明：本文内容由互联网用户自发贡献，该文观点仅代表作者本人...如发现本站有涉嫌侵权/违法违规的内容，请发送邮件至举报，一经查实，本站将立刻删除。

1.2K2 0

Lucene&Solr&ElasticSearch-面试题

同时对其进行了扩展，提供了比Lucene更为丰富的查询语言，同时实现了可配置、可扩展并对查询性能进行了优化，并且提供了一个完善的功能管理界面，是一款非常优秀的全文搜索引擎。...2.支持添加多种格式的索引，如：HTML、PDF、微软 Office 系列软件格式以及 JSON、XML、CSV 等纯文本格式。 3.Solr比较成熟、稳定。...3.StackOverflow将全文搜索与地理位置和相关信息进行结合，以提供more-like-this相关问题的展现。 4.GitHub使用Elasticsearch来检索超过1300亿行代码。...，在查询时设置 Solr原理 Solr是基于Lucene开发的全文检索服务器，而Lucene就是一套实现了全文检索的api，其本质就是一个全文检索的过程。...而数据库中并不是所有的字段都建立的索引，更何况如果使用like查询时很大的可能是不使用索引，所以使用solr查询时要比查数据库快 solr索引库个别数据索引丢失怎么办首先Solr是不会丢失个别数据的。

2.5K0 0

Access通配符和字符串运算符

大家好，上节介绍比较运算符和逻辑运算符，本节主要介绍字符串运算符和通配符，(有的书中将like是作为特殊运算符，这里不细究，重要的是了解用法。）...在Access数据库中有两种字符串运算符，文本连接符&和文本比较运算符Like。文本接连接符&在Excel函数中非常常用，是可以将文本和字符串连接。...Like主要用于模糊查询时，通常Like与通配符搭？和*搭配使用，表示比如Like “孙*”就表示类似“孙*”形式的数据。三、示例下面通过示例来介绍通配符和字符串运算符的用法。...点击运行，得到查询结果保存即可。 ? 2、示例二查询图书中，作者姓氏为“司马”的图书的名称和单价。这个查询问题就是模糊查询，在条件中设置like "司马*"为查询条件。...这个问题就涉及多个模糊查询，在设置查询条件时可以设置为Llike "司马*"or like "曹*" or Like "罗*"，三个条件是"或"的关系。

3.2K3 0

Java进阶学习路线图「建议收藏」

面向对象编程理解对象的本质，以及面向对象，类与对象之间的关系，如何用面向对象的思想分析和解决显示生活中的问题，并java程序的手段编写出来。...常用设计模式如单利、模版等模式。什么是异常异常的捕捉和抛出异常捕捉的原则 finally的使用，package的应用 import关键字。...SQL语句数据库的创建，表的创建，修改，删除，查询，索引的创建，主从表的建立，数据控制授权和回收，事务控制，查询语句以及运算符的详解，sql中的函数使用。...多表连接和子查询等值和非等值连接，外连接，自连接；交叉连接，自然连接，using子句连接，完全外连接和左右外连接，子查询使用以及注意事项。...lucene搜索引擎了解全文搜索原理、全文搜索引擎、什么是OSEM、OSEM框架Compass、基于使用Lucene使用Compass实现全文增量型索引创建和搜索、探索Lucene 3.0以及API。

1.2K3 0

Java学习路线图分析

面向对象编程理解对象的本质，以及面向对象，类与对象之间的关系，如何用面向对象的思想分析和解决显示生活中的问题，并java程序的手段编写出来。...常用设计模式如单利、模版等模式。什么是异常异常的捕捉和抛出异常捕捉的原则 finally的使用，package的应用 import关键字。...SQL语句数据库的创建，表的创建，修改，删除，查询，索引的创建，主从表的建立，数据控制授权和回收，事务控制，查询语句以及运算符的详解，sql中的函数使用。...多表连接和子查询等值和非等值连接，外连接，自连接；交叉连接，自然连接，using子句连接，完全外连接和左右外连接，子查询使用以及注意事项。...lucene搜索引擎了解全文搜索原理、全文搜索引擎、什么是OSEM、OSEM框架Compass、基于使用Lucene使用Compass实现全文增量型索引创建和搜索、探索Lucene 3.0以及API。

1.4K3 0

Java学习路线图分析

面向对象编程理解对象的本质，以及面向对象，类与对象之间的关系，如何用面向对象的思想分析和解决显示生活中的问题，并java程序的手段编写出来。...常用设计模式如单利、模版等模式。什么是异常异常的捕捉和抛出异常捕捉的原则 finally的使用，package的应用 import关键字。...SQL语句数据库的创建，表的创建，修改，删除，查询，索引的创建，主从表的建立，数据控制授权和回收，事务控制，查询语句以及运算符的详解，sql中的函数使用。...多表连接和子查询等值和非等值连接，外连接，自连接；交叉连接，自然连接，using子句连接，完全外连接和左右外连接，子查询使用以及注意事项。...lucene搜索引擎了解全文搜索原理、全文搜索引擎、什么是OSEM、OSEM框架Compass、基于使用Lucene使用Compass实现全文增量型索引创建和搜索、探索Lucene 3.0以及API。

1.7K10 1

【ES三周年】ElasticSearch数据库简单介绍

elasticSearch的使用场景1、为用户提供按关键字查询的全文搜索功能。2、实现企业海量数据的处理分析的解决方案。...大数据领域的重要一份子，如著名的ELK框架(ElasticSearch,Logstash,Kibana)。...在实际运算过程中，每个查询任务提交到某一个节点，该节点必须负责将数据进行整理汇聚，再返回给客户端，也就是一个简单的节点上进行Map计算，在一个固定的节点上进行Reduces得到最终结果向客户端返回。...传统关系性数据库弊端：1、对于传统的关系性数据库对于关键词的查询，只能逐字逐行的匹配，性能非常差。2、匹配方式不合理，比如搜索“小密手机” ，如果用like进行匹配，根本匹配不到。...lucene与elasticsearch的关系咱们之前讲的处理分词，构建倒排索引，等等，都是这个叫lucene的做的。那么能不能说这个lucene就是搜索引擎呢？还不能。

8758 4

ElasticSearch数据库（ES数据库）简介

1 elasticSearch的使用场景 1、为用户提供按关键字查询的全文搜索功能。 2、实现企业海量数据的处理分析的解决方案。...大数据领域的重要一份子，如著名的ELK框架(ElasticSearch,Logstash,Kibana)，。...在实际运算过程中，每个查询任务提交到某一个节点，该节点必须负责将数据进行整理汇聚，再返回给客户端，也就是一个简单的节点上进行Map计算，在一个固定的节点上进行Reduces得到最终结果向客户端返回。...传统关系性数据库弊端： 1、对于传统的关系性数据库对于关键词的查询，只能逐字逐行的匹配，性能非常差。 2、匹配方式不合理，比如搜索“小密手机” ，如果用like进行匹配，根本匹配不到。...4 lucene与elasticsearch的关系咱们之前讲的处理分词，构建倒排索引，等等，都是这个叫lucene的做的。那么能不能说这个lucene就是搜索引擎呢？还不能。

4.2K3 0

Lucene全文检索学习笔记

在使用数据库的项目中，不使用数据库进行检索的原因主要是：数据库在非精确查询的时候使用查询语言“like %keyword%”，对数据库进行查询是对所有记录遍历，并对字段进行“%keyword%”匹配，在数据库的数据庞大以及某个字段存储的数据量庞大的时候...，这种遍历是致命的，它需要对所有的记录进行匹配查询。...二、建立索引 a) 步骤：创建索引的javaBean类文件，如Article.java 创建全文检索库，Directory directory = FSDirectory.open...在Lucene中每次查询都是全部检索，所以可以通过这个方法获取总记录数，然后用每页显示的条件将其进行分开。...int count = topDocs.totalHits;// 总的记录数如：每页显示5条，索引从0开始，现在要查询第二页，那就是从第5开始到第9条数据。

1.2K7 0

Elasticsearch 倒排索引的秘密

如果用像 MySQL 这样的 RDBMS 来存储古诗的话，我们应该会去使用这样的 SQL 去查询 select name from poems where content like "%前%"; 这种我们称为顺序扫描法...如果你了解 ES 应该知道，ES 可以说是对 Lucene 的一个封装，里面关于倒排索引的实现就是通过 lucene 这个 jar 包提供的 API 实现的，所以下面讲的关于倒排索引的内容实际上都是 lucene...（怎么样，像不像我们查英文字典，我们定位 S 开头的第一个单词，或者定位到 Sh 开头的第一个单词，然后再往后顺序查询） lucene 在这里还做了两点优化，一是 term dictionary 在磁盘上面是分...它经常被作为索引用在数据库、查询引擎和搜索引擎中，并且位操作（如 and 求交集、or 求并集）之间可以并行，效率更好。...这篇文章讲的虽是 Lucene 如何实现倒排索引，如何精打细算每一块内存、磁盘空间、如何用诡谲的位运算加快处理速度，但往高处思考，再类比一下 MySQL，你就会发现，虽然都是索引，但是实现起来，截然不同

6903 0

Elasticsearch如何检索数据

只能通过like模糊查询来实现，先不说性能低，这对于一个搜索引擎是远远不够的。...为什么谈到Lucene，因为Lucene本身只是一个全文检索工具包，它不具备企业级的一些特性，如分布式，副本，扩展等而Elasticsearch和Solr都是基于Lucene开发和扩展的企业级框架，所以了解...Lucene对学习Elasticsearch和Solr会有很大帮助。...（2）可以直接把索引加载到FileSystem Cache停留在cache中，因为它不会被修改并且FileSystem Cache有足够大的空间，这样以来直接在内存中查询代替在磁盘上，对搜索性能大大提升...（3）其他的缓存如filter cache在整个index的生命周期内都是有效的，他们不会被重建，因为索引是不可变的。

1.5K9 0

SQL 优化

SQL 优化负向查询不能使用索引 select name from user where id not in (1,3,4); 应该修改为: select name from user where id...in (2,5,6); 前导模糊查询不能使用索引如: select name from user where name like '%zhangsan' 非前导则可以: select name from...user where name like 'zhangsan%' 建议可以考虑使用 Lucene 等全文索引工具来代替频繁的模糊查询。...数据区分不明显的不建议创建索引如 user 表中的性别字段，可以明显区分的才建议创建索引，如身份证等字段。字段的默认值不要为 null 这样会带来和预期不一致的查询结果。

7344 0

点击加载更多

相关资讯

热门标签

活动推荐

运营活动

活动名称

广告关闭