为什么推荐你用Elasticsearch做搜索系统?

系统
搜索是一个非常常见的功能,大家肯定都使用过,例如:百度搜索、Google 搜索、电商商品搜索、美团商家/食品搜索等等。

搜索是一个非常常见的功能,大家肯定都使用过,例如:百度搜索、Google 搜索、电商商品搜索、美团商家/食品搜索等等。

[[388762]]

图片来自 Pexels

随着互联网信息爆炸性地飞速增长,网民需要更有效的个性化搜索服务。所以互联网应用几乎没有不开发搜索功能的,既然这个功能这么重要,身为一名合格的程序员必须搞清楚其背后的实现原理。安排!

本文将通过 Spring Boot+Elasticsearch+Vue 实现一个简易版的电商搜索系统,方便大家理解背后的原理。

案例分析

根据上图可以得知,搜索的业务逻辑其实蛮简单的,用户输入要搜索的商品关键词提交以后,将搜索关键词、页码信息等传往后台,后台查询后将结果集进行处理并返回。

需要关注的无非以下几点:

  • 查询速度要快
  • 数据匹配度要高
  • 方便排序
  • 返回结果高亮

MySQL

核心表(goods)如下:

MySQL 商品表的字段是非常多的,而商城搜索页面所需要的数据无非就是商品ID、商品名称、商品价格、商品评论数和商品原始图等(根据自己实际开发情况而定,这里根据本文案例前端样式进行分析)。

一般商品表还会添加商品关键词字段专门方便搜索引擎使用,所以一条单表 SQL 查询相信应该难不倒各位。

我们先不考虑数据库性能方面的问题,就单纯为了实现这个功能来看看都需要做什么:

  • 假设搜索条件是华为手机平板电脑,要求是只要满足了其中任意一个词语组合的数据都要查询出来,SQL 怎么写?换句话说你打算写多少条 SQL?
  • 假设上一步你做完了,拿到那么多的结果集你是不是要考虑去重排序一下?
  • 前两步你都实现了,现在我的要求是返回前端时必须将刚才搜索条件中的词语组合进行高亮处理

WTF,接到这样的需求如果让你用关系型数据库去实现,的确有点强人所难。怎么办?往下看。

Elasticsearch

随着互联网信息爆炸性地飞速增长,传统的查询方法已无法为网民提供有效的搜索服务。

如果我们做的只是用户量很少的内网项目,并且搜索的字段都是一些内容很简短的字段,比如姓名,编号之类的,那完全可以用数据库 like 语句。

但是,数据库 like 查询性能非常低,如果搜索的请求过多,或者需要搜索的是大文本类型的内容(全文搜索),那么这种搜索的方案也是不可取的。

互联网的飞速发展迫切地需求一种快速、全面、准确且稳定可靠的信息查询方法。

既然我们要做性能高的全文搜索,这个需求又不能依赖数据库,只能由我们自己来实现了。

但是令我们很受打击的是全文搜索是很难实现的,我们不仅希望能全文搜索,还希望它足够稳定足够快,且搜索结果有关键字高亮,还能按各种匹配分数来排序,希望它能切换不同的分词算法来满足各种分词需求。

综上所述,如果我们想要做一个功能完善,性能强大的全文搜索其实并非易事,而全文搜索又是一个常见的需求,在这种环境下,市面上出现了一些开源的解决方案。

这些解决方案开源出来后,获得了大量的社区开发者支持,不断为其开发插件,使其不断优化和完善,这就成了我们所说的搜索引擎了。而它们中最有名气的就是 Elasticsearch 和 Solr。

  • Elasticsearch 是一个基于 Apache Lucene 的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎,基于 RESTful web 接口。
  • Elasticsearch 是用 Java 开发的,并作为 Apache 许可条款下的开放源码发布,是当前流行的企业级搜索引擎。设计用于云计算中,能够达到实时搜索,稳定,可靠,快速,安装使用方便。
  • Elasticsearch 是最受欢迎的企业搜索引擎,其次是 Apache Solr,也是基于 Lucene。
  • 如果使用 Elasticsearch 来做这件事,刚才的问题都会迎刃而解:
  • Elasticsearch 易于安装和配置,学习和使用成本较低,开箱即用。
  • Elasticsearch 支持单机也支持分布式,内置分布式协调管理功能,天生集群。
  • Elasticsearch 提供了分片和副本机制,一个索引可以分成多个分片,一个分片可以设置多个复制分片,提高效率和高可用。
  • Elasticsearch 注重于核心功能实现,高级功能多有第三方插件提供,例如图形化界面 Kibana 的支撑。
  • Elasticsearch 建立索引快,实时性查询快,适用于新兴的实时搜索应用,面对海量数据也毫不逊色,速度快,负载强。
  • Elasticseach 有强大的文本分析功能(分词)和倒排索引机制,进一步提升搜索速度。

①分词

刚才我们提到的问题中,假设搜索条件是华为手机平板电脑,要求是只要满足了其中任意一个词语组合的数据都要查询出来。

借助 Elasticseach 的文本分析功能可以轻松将搜索条件进行分词处理,再结合倒排索引实现快速检索。

Elasticseach 提供了三种分词方法:

  • 单字分词
  • 二分法分词
  • 词库分词

单字分词:

  • 如:“华为手机平板电脑”
  • 效果:“华”、“为”、“手”、“机”、“平”、“板”、“电”、“脑”

二分法分词:

  • 按两个字进行切分。
  • 如:“华为手机平板电脑”
  • 效果:“华为”、“为手”、“手机”、“机平”、“平板”、“板电”、“电脑”。

词库分词:按某种算法构造词,然后去匹配已建好的词库集合,如果匹配到就切分出来成为词语。

通常词库分词被认为是最理想的中文分词算法。而词库分词最常用的就是 IK 分词。

IK 分词器提供两种分词模式:

  • ik_max_word:会将文本做最细粒度的拆分,比如会将“中华人民共和国国歌”拆分为“中华人民共和国,中华人民,中华,华人,人民共和国,人民,人,民,共和国,共和,和,国国,国歌”,会穷尽各种可能的组合,适合 Term Query。
  • ik_smart:会将文本做最粗粒度的拆分,比如会将“中华人民共和国国歌”拆分为“中华人民共和国,国歌”,适合 Phrase Query。

②倒排索引

对于搜索引擎来讲:

  • 正排索引是文档 ID 到文档内容、单词的关联关系。也就是说通过 ID 获取文档的内容。
  • 倒排索引是单词到文档 ID 的关联关系。也就是说通过单词搜索到文档 ID。

倒排索引的查询流程是:首先根据关键字搜索到对应的文档 ID,然后根据正排索引查询文档 ID 的完整内容,最后返回给用户想要的结果。

③组成部分

倒排索引是搜索引擎的核心,主要包含两个部分:

  • 单词词典(Trem Dictionary):记录所有的文档分词后的结果。一般采用 B+Tree 的方式,来保证高效。
  • 倒排列表(Posting List):记录单词对应的文档的集合,由倒排索引项(Posting)组成。

倒排索引项(Posting)主要包含如下的信息:

  • 文档 ID,用于获取原始文档的信息。
  • 单词频率(TF,Term Frequency),记录该单词在该文档中出现的次数,用于后续相关性算分。
  • 位置(Position),记录单词在文档中的分词位置(多个),用于做词语搜索。
  • 偏移(Offset),记录单词在文档的开始和结束位置,用于高亮显示。

④案例

倒排索引参考文献:《这就是搜索引擎:核心技术详解》张俊林著。

假设文档集合包含五个文档,每个文档内容如下图所示。在图中最左端一栏是每个文档对应的文档编号。我们的任务就是对这个文档集合建立倒排索引。

首先用分词系统将文档自动切分成单词序列。为了系统后续处理方便,需要对每个不同的单词赋予唯一的单词编号,同时记录哪些文档中包含这个单词,在如此处理结束后,我们可以得到最简单的倒排索引,如下图所示。

在图中,“单词 ID”一栏记录了每个单词的单词编号,第二栏是对应的单词,第三栏即每个单词对应的倒排列表。比如单词 谷歌,其单词编号为 1,倒排列表为 1,2,3,4,5,说明文档集合中每个文档都包含了这个单词。

为了方便大家理解,上图只是一个简单的倒排索引,只记录了哪些文档包含哪些单词。而事实上,索引系统还可以记录除此之外的更多信息。

下图则是一个相对复杂的倒排索引,在单词对应的倒排列表中不仅记录了文档编号,还记录了单词频率信息(TF),即这个单词在某个文档中出现的次数。

之所以要记录这个信息,是因为词频信息在搜索结果排序时,计算查询和文档相似度是很重要的一个计算因子,所以将其记录在倒排列表中,以方便后续排序时进行分值计算。

图中单词 创始人 的单词编号为 7,对应的倒排列表内容为 (3;1),其中 3 代表文档编号为 3 的文档包含这个单词,数字 1 代表词频信息,即这个单词在 3 号文档中只出现过 1 次。

实用的倒排索引还可以记录更多的信息,如下图所示索引系统除了记录文档编号和单词频率信息外,额外记载了两类信息,即每个单词对应的“文档频率信息”以及在倒排列表中记录单词在某个文档出现的位置信息(POS)。

有了这个索引系统,搜索引擎可以很方便地响应用户的查询,比如用户输入查询词“Facebook”,搜索系统查找倒排索引,从中读取包含这个单词的文档,这些文档就是提供给用户的搜索结果。

利用单词频率信息、文档频率信息可以对这些候选搜索结果进行排序,计算文档和查询的相似性,按照相似性的得分由高到低排序输出。

综上所述,你懂的,废话不多说,下面进入实战环节。

准备工作

环境:

  • Elasticsearch:7.9.3
  • Spring Boot:2.4.3
  • JDK:11.0.7
  • 前端:仿京东商城模板+Vue,文中配有详细代码
  • IDE:IntelliJ IDEA

Elasticsearch

安装流程这里不过多赘述,本文使用 Elasticsearch 集群环境,已安装好 IK 中文分词器。

下图为 elasticsearch-head 插件(浏览器可以直接安装该插件进行连接)显示的集群信息。

Spring Boot

①创建项目

使用 Spring Initializr 初始化 Spring Boot 项目,添加 Spring Web,Spring Data Elasticsearch,MySQL,MyBatis,Lombok。

②配置文件

application.yml 配置 MySQL、Elasticsearch、MyBatis 相关信息。

  1. spring: 
  2.   # 数据源 
  3.   datasource: 
  4.     driver-class-name: com.mysql.cj.jdbc.Driver 
  5.     url: jdbc:mysql://localhost:3306/example?serverTimezone=Asia/Shanghai&useUnicode=true&characterEncoding=utf8&useSSL=false 
  6.     username: root 
  7.     password: 123456 
  8.   # elasticsearch 
  9.   elasticsearch: 
  10.     rest: 
  11.       uris: 192.168.10.10:9200,192.168.10.11:9200,192.168.10.12:9200 
  12.  
  13. mybatis: 
  14.   configuration: 
  15.     map-underscore-to-camel-casetrue # 开启驼峰映射 

③启动类

启动类添加 Mapper 接口扫描。

  1. package com.example; 
  2.  
  3. import org.mybatis.spring.annotation.MapperScan; 
  4. import org.springframework.boot.SpringApplication; 
  5. import org.springframework.boot.autoconfigure.SpringBootApplication; 
  6.  
  7. @MapperScan("com.example.mapper") // Mapper 接口扫描 
  8. @SpringBootApplication 
  9. public class SearchDemoApplication { 
  10.  
  11.     public static void main(String[] args) { 
  12.         SpringApplication.run(SearchDemoApplication.class, args); 
  13.     } 
  14.  

前端

将我为大家准备好的前端资源文件添加至项目 resources 目录下的 static 目录中。

在 list.html 中使用 CDN 添加 Vue 和 Axios 免去下载文件的过程。

  1. <script src="https://cdn.jsdelivr.net/npm/vue@2.6.12/dist/vue.min.js"></script> 
  2. <script src="https://cdn.jsdelivr.net/npm/axios@0.21.1/dist/axios.min.js"></script> 

 

 

启动

访问:http://localhost:8080/list.html,效果如下:

功能开发

创建索引

①需求说明

该功能主要用于将 MySQL 商品信息导入 Elasticseach。

如果贵司搭建了 ELK 系统,可以使用 Logstash 将 MySQL 商品信息导入 Elasticseach。这部分内容后期我也会更新,敬请期待,今天我们不聊这部分。

既然没有 Logstash 那我们就通过代码将 MySQL 数据导入 Elasticseach。

MySQL 商品表的字段是非常多的,而商城搜索页面所需要的数据无非就是商品ID、商品名称、商品价格、商品评论数和商品原始图等(根据自己实际开发情况而定,这里根据本文案例前端样式进行分析)。

一般商品表还会添加商品关键词字段专门方便搜索引擎使用,所以一条单表 SQL 查询相信应该难不倒各位。

②实体类

创建实体类 Goods.java,添加 @Document 注解用于映射 Elasticsearch 索引库:

  • indexName:索引库名称
  • shards:分片数
  • replicas:副本数
  • createIndex:是否创建索引库
  • @Id:主键
  • @Field:设置索引规则

设置索引规则:

  • type = FieldType.Text:文本,默认分词
  • analyzer = "ik_max_word":指定分词规则,ik_max_word 会将文本最细粒度进行拆分
  • type = FieldType.Double:双精度浮点型,并作为一个整体不可分
  • type = FieldType.Short:短整型,并作为一个整体不可分
  • type = FieldType.Keyword:文本,并作为一个整体不可分
  1. package com.example.pojo; 
  2.  
  3. import lombok.Data; 
  4. import lombok.NoArgsConstructor; 
  5. import org.springframework.data.annotation.Id; 
  6. import org.springframework.data.elasticsearch.annotations.Document; 
  7. import org.springframework.data.elasticsearch.annotations.Field; 
  8. import org.springframework.data.elasticsearch.annotations.FieldType; 
  9.  
  10. import java.io.Serializable
  11. import java.math.BigDecimal; 
  12.  
  13. @Data 
  14. @NoArgsConstructor 
  15. /** 
  16.  * @Document 映射 Elasticsearch 索引库所需要的注解 
  17.  *  indexName:索引库名称 
  18.  *  shards:分片数 
  19.  *  replicas:副本数 
  20.  *  createIndex:是否创建索引库 
  21.  */ 
  22. @Document(indexName = "goods", shards = 5, replicas = 1, createIndex = true
  23. public class Goods implements Serializable { 
  24.  
  25.     private static final long serialVersionUID = -1989082640160920658L; 
  26.     @Id 
  27.     private Integer goodsId; // 商品ID 
  28.     @Field(type = FieldType.Text, analyzer = "ik_max_word") // 分词 
  29.     private String goodsName; // 商品名称 
  30.     @Field(type = FieldType.Text, analyzer = "ik_max_word") // 分词 
  31.     private String keywords; // 商品关键词 
  32.     @Field(type = FieldType.Double
  33.     private BigDecimal marketPrice; // 市场价 
  34.     @Field(type = FieldType.Short) 
  35.     private Short commentCount; // 商品评论数 
  36.     @Field(type = FieldType.Keyword) 
  37.     private String originalImg; // 商品原始图地址 
  38.     private String goodsRemark; // 商品简单描述 
  39.     private String goodsContent; // 商品详细描述,存储商品详情图地址 
  40.     private Integer catId; // 分类ID 
  41.     private Integer extendCatId; // 扩展分类ID 
  42.     private String goodsNo; // 商品编号 
  43.     private Integer clickCount; // 点击数 
  44.     private Short brandId; // 品牌ID 
  45.     private Short storeCount; // 库存数量 
  46.     private Integer weight; // 商品重量,单位:克 
  47.     private BigDecimal shopPrice; // 本店价 
  48.     private BigDecimal costPrice; // 商品成本价 
  49.     private Byte isReal; // 是否为实物 
  50.     private Byte isOnSale; // 是否上架 
  51.     private Byte isFreeShipping; // 是否包邮 0 否, 1 是 
  52.     private Integer onTime; // 商品上架时间 
  53.     private Short sort; // 商品排序 
  54.     private Byte isRecommend; // 是否推荐 
  55.     private Byte isNew; // 是否新品 
  56.     private Byte isHot; // 是否热卖 
  57.     private Integer lastUpdate; // 最后更新时间 
  58.     private Short goodsType; // 商品所属类型ID 
  59.     private Short specType; // 商品规格类型 
  60.     private Integer giveIntegral; // 购买商品赠送积分 
  61.     private Integer exchangeIntegral; // 积分兑换:0 不参与积分兑换 
  62.     private Short suppliersId; // 供货商ID 
  63.     private Integer salesSum; // 商品销量 
  64.     private Byte promType; // 0 普通订单,1 限时抢购, 2 团购, 3 促销优惠 
  65.     private Integer promId; // 优惠活动ID 
  66.     private BigDecimal commission; // 佣金用于分销分成 
  67.     private String spu; // SPU 
  68.     private String sku; // SKU 
  69.  

③GoodsMapper.java

从 MySQL 查询 goods 商品表:商品ID、商品名称、商品关键词、市场价、商品评论数、商品原始图地址。这些字段用于搜索引擎使用。

  1. package com.example.mapper; 
  2.  
  3. import com.example.pojo.Goods; 
  4. import org.apache.ibatis.annotations.Select
  5.  
  6. import java.util.List; 
  7.  
  8. /** 
  9.  * @author 哈喽沃德先生 
  10.  * @微信公众号 哈喽沃德先生 
  11.  * @website https://mrhelloworld.com 
  12.  * @wechat 124059770 
  13.  */ 
  14. public interface GoodsMapper { 
  15.  
  16.     /** 
  17.      * 查询商品ID、商品名称、商品关键词、市场价、商品评论数、商品原始图地址 
  18.      * 
  19.      * @return 商品列表 
  20.      */ 
  21.     @Select("select goods_id, goods_name, keywords, market_price, comment_count, original_img from goods"
  22.     List<Goods> selectGoodsList(); 
  23.  

④GoodsRepository.java

application.yml 配置文件添加一个自定义配置,用于控制创建索引和设置映射的开关。

  1. # 自定义配置 
  2. search: 
  3.   index
  4.     enabled: true # 是否需要创建索引和设置映射。默认为 false 

GoodsRepository.java 注入 ElasticsearchRestTemplate,编写创建索引和设置映射相关代码。

  1. package com.example.repository; 
  2.  
  3. import com.example.pojo.Goods; 
  4. import org.springframework.beans.factory.annotation.Value; 
  5. import org.springframework.data.elasticsearch.core.ElasticsearchRestTemplate; 
  6. import org.springframework.data.elasticsearch.core.IndexOperations; 
  7. import org.springframework.data.elasticsearch.core.document.Document; 
  8. import org.springframework.stereotype.Repository; 
  9.  
  10. import javax.annotation.Resource; 
  11. import java.util.Arrays; 
  12. import java.util.List; 
  13.  
  14. /** 
  15.  * @author 哈喽沃德先生 
  16.  * @微信公众号 哈喽沃德先生 
  17.  * @website https://mrhelloworld.com 
  18.  * @wechat 124059770 
  19.  */ 
  20. @Repository 
  21. public class GoodsRepository { 
  22.  
  23.     @Resource 
  24.     private ElasticsearchRestTemplate elasticsearchRestTemplate; 
  25.  
  26.     // 是否需要创建索引和设置映射。默认为 false 
  27.     @Value("${search.index.enabled}"
  28.     private boolean indexEnabled; 
  29.  
  30.     /** 
  31.      * 批量新增商品信息至 Elasticsearch 
  32.      * 
  33.      * @param goodsList 
  34.      */ 
  35.     public void save(List<Goods> goodsList) { 
  36.         // 是否需要创建索引和设置映射 
  37.         if (indexEnabled) { 
  38.             createIndexAndPutMapping(); 
  39.         } 
  40.         // 批量新增 
  41.         elasticsearchRestTemplate.save(goodsList); 
  42.     } 
  43.  
  44.     /** 
  45.      * 新增单个商品信息至 Elasticsearch 
  46.      * 
  47.      * @param goods 
  48.      */ 
  49.     public void save(Goods goods) { 
  50.         save(Arrays.asList(goods)); 
  51.     } 
  52.  
  53.     /** 
  54.      * 创建索引和设置映射 
  55.      */ 
  56.     private void createIndexAndPutMapping() { 
  57.         // 设置索引信息(实体类) 
  58.         IndexOperations indexOperations = elasticsearchRestTemplate.indexOps(Goods.class); 
  59.         // 创建索引 
  60.         indexOperations.create(); 
  61.         // 创建映射 
  62.         Document mapping = indexOperations.createMapping(); 
  63.         // 将映射写入索引 
  64.         indexOperations.putMapping(mapping); 
  65.     } 
  66.  

⑤SearchService.java

SearchService.java 注入 GoodsMapper 和 GoodsRepository,实现将 MySQL 商品信息导入 Elasticsearch。

  1. package com.example.service; 
  2.  
  3. import com.example.mapper.GoodsMapper; 
  4. import com.example.repository.GoodsRepository; 
  5. import org.springframework.stereotype.Service; 
  6.  
  7. import javax.annotation.Resource; 
  8.  
  9. /** 
  10.  * @author 哈喽沃德先生 
  11.  * @微信公众号 哈喽沃德先生 
  12.  * @website https://mrhelloworld.com 
  13.  * @wechat 124059770 
  14.  */ 
  15. @Service 
  16. public class SearchService { 
  17.  
  18.     @Resource 
  19.     private GoodsMapper goodsMapper; 
  20.     @Resource 
  21.     private GoodsRepository goodsRepository; 
  22.  
  23.     /** 
  24.      * 将 MySQL 商品信息导入 Elasticsearch 
  25.      */ 
  26.     public void importGoods() { 
  27.         goodsRepository.save(goodsMapper.selectGoodsList()); 
  28.     } 
  29.  

⑥单元测试

对于当前案例而言,这部分功能没必要暴露一个接口去调用,直接内部编写单元测试完成即可。

  1. package com.example.service; 
  2.  
  3. import com.example.SearchDemoApplication; 
  4. import org.junit.jupiter.api.Test; 
  5. import org.springframework.boot.test.context.SpringBootTest; 
  6.  
  7. import javax.annotation.Resource; 
  8.  
  9. @SpringBootTest(classes = SearchDemoApplication.class) 
  10. public class SearchServiceTest { 
  11.  
  12.     @Resource 
  13.     private SearchService searchService; 
  14.  
  15.     @Test 
  16.     public void testImportGoods() { 
  17.         searchService.importGoods(); 
  18.     } 
  19.  

执行单元测试以后,刷新 elasticsearch-head 插件页面,结果如下:

查看一下 goods 索引库的映射信息。

MySQL 的 goods 表:

Elasticsearch 的 goods 索引库:

看到以上结果,说明 MySQL 商品信息已全部导入 Elasticsearch。

搜索

接下来就要进入今天的主题了,搜索功能的实现。要做就做全套,我们使用仿京东商城模板 + Vue 实现一个真正的电商搜索功能。

搜索的业务逻辑其实蛮简单的,用户输入要搜索的商品关键词提交以后,将搜索关键词、页码信息等传往后台,再配合 Spring Data Elasticseach 即可轻松搞定。

①GoodsRepository.java

按照国际惯例,DAO 层只负责数据处理,一行代码搞定。

  1. /** 
  2.  * 分页、高亮查询 
  3.  * 
  4.  * @param query 
  5.  * @return 
  6.  */ 
  7. public SearchHits<Goods> selectGoodsListForPage(NativeSearchQuery query) { 
  8.     return elasticsearchRestTemplate.search(query, Goods.class); 

②PageInfo.java

这种功能肯定都是需要搭配分页处理的,封装一个分页对象方便使用。

  1. package com.example.result; 
  2.  
  3. import lombok.Data; 
  4. import lombok.NoArgsConstructor; 
  5.  
  6. import java.io.Serializable
  7. import java.util.List; 
  8.  
  9. /** 
  10.  * @author 哈喽沃德先生 
  11.  * @微信公众号 哈喽沃德先生 
  12.  * @website https://mrhelloworld.com 
  13.  * @wechat 124059770 
  14.  */ 
  15. @Data 
  16. @NoArgsConstructor 
  17. public class PageInfo<T> implements Serializable { 
  18.  
  19.     private static final long serialVersionUID = 6260163970867016563L; 
  20.     private int currentPage; // 当前页 
  21.     private int pageSize; // 每页显示条数 
  22.     private int total; // 总记录数 
  23.     private int totalPage; // 总页数 
  24.     private int prePage; // 上一页 
  25.     private int nextPage; // 下一页 
  26.     private boolean hasPre; // 是否有上一页 
  27.     private boolean hasNext; // 是否有下一页 
  28.     private List<T> result; // 返回结果集 
  29.  
  30.     public PageInfo(int currentPage, int pageSize) { 
  31.         // 当前页 
  32.         this.currentPage = currentPage < 1 ? 1 : currentPage; 
  33.         // 每页显示条数 
  34.         this.pageSize = pageSize; 
  35.         // 是否有上一页 
  36.         this.hasPre = currentPage == 1 ? false : true
  37.         // 是否有下一页 
  38.         this.hasNext = currentPage == totalPage ? false : true
  39.         // 上一页 
  40.         if (hasPre) { 
  41.             this.prePage = currentPage - 1; 
  42.         } 
  43.         // 下一页 
  44.         if (hasNext) { 
  45.             this.nextPage = currentPage + 1; 
  46.         } 
  47.     } 
  48.  
  49.     public PageInfo(int currentPage, int pageSize, int total) { 
  50.         // 当前页 
  51.         this.currentPage = currentPage < 1 ? 1 : currentPage; 
  52.         // 每页显示条数 
  53.         this.pageSize = pageSize; 
  54.         // 总记录数 
  55.         this.total = total; 
  56.         // 计算总页数 
  57.         if (total == 0) { 
  58.             this.totalPage = 0; 
  59.         } else { 
  60.             this.totalPage = (total - 1) / pageSize + 1; 
  61.         } 
  62.         // 是否有上一页 
  63.         this.hasPre = currentPage == 1 ? false : true
  64.         // 是否有下一页 
  65.         this.hasNext = currentPage == totalPage ? false : true
  66.         // 上一页 
  67.         if (hasPre) { 
  68.             this.prePage = currentPage - 1; 
  69.         } 
  70.         // 下一页 
  71.         if (hasNext) { 
  72.             this.nextPage = currentPage + 1; 
  73.         } 
  74.     } 
  75.  

③SearchService.java

Service 业务逻辑层主要关注以下细节:

  • 设置高亮格式
  • 构建搜索条件对象:设置搜索条件 goodsName 和 keywords;设置高亮;设置分页
  • 调用 DAO 完成搜索
  • 处理搜索结果集构建分页对象并返回
  1. /** 
  2.  * 搜索 
  3.  * 
  4.  * @param searchStr 搜索条件 
  5.  * @param pageNum   第几页 
  6.  * @param pageSize  每页显示条数 
  7.  * @return 
  8.  */ 
  9. public PageInfo<GoodsVo> doSearch(String searchStr, Integer pageNum, Integer pageSize) { 
  10.     // 设置高亮格式 <span style='color:red;'></span> 
  11.     HighlightBuilder.Field field = new HighlightBuilder.Field("goodsName"); 
  12.     field.preTags("<span style='color:red;'>"); 
  13.     field.postTags("</span>"); 
  14.     // 构建搜索条件对象 
  15.     BoolQueryBuilder boolQueryBuilder = QueryBuilders.boolQuery(); 
  16.     // 设置搜索条件 goodsName 和 keywords 
  17.     boolQueryBuilder.must(QueryBuilders.multiMatchQuery(searchStr, "goodsName""keywords")); 
  18.     // 构建搜索对象 
  19.     NativeSearchQuery query = new NativeSearchQueryBuilder() 
  20.             .withQuery(boolQueryBuilder) // 搜索条件 
  21.             .withHighlightFields(field) // 高亮 
  22.             .withPageable(PageRequest.of(pageNum - 1, pageSize)) // 分页,当前页从 0 开始 
  23.             .build(); 
  24.     // 搜索 
  25.     SearchHits<Goods> searchHits = goodsRepository.selectGoodsListForPage(query); 
  26.     // 总条数 
  27.     Long total = searchHits.getTotalHits(); 
  28.     if (0 > total) { 
  29.         return new PageInfo<>(pageNum, pageSize, 0); 
  30.     } 
  31.     // 初始化返回结果集 
  32.     List<GoodsVo> goodsVoList = new ArrayList<>(); 
  33.     // 处理搜索结果集 
  34.     for (SearchHit<Goods> searchHit : searchHits) { 
  35.         // 初始化返回结果对象 
  36.         GoodsVo goodsVo = new GoodsVo(); 
  37.         // 获取结果对象 
  38.         Goods goods = searchHit.getContent(); 
  39.         // 拷贝属性 
  40.         BeanUtils.copyProperties(goods, goodsVo); 
  41.         // 处理高亮信息 
  42.         Map<String, List<String>> highlightFields = searchHit.getHighlightFields(); 
  43.         // 是否有高亮信息 
  44.         if (highlightFields.containsKey("goodsName")) { 
  45.             String goodsNameHl = highlightFields.get("goodsName").get(0); 
  46.             goodsVo.setGoodsNameHl(goodsNameHl); 
  47.         } else { 
  48.             goodsVo.setGoodsNameHl(goods.getGoodsName()); 
  49.         } 
  50.         goodsVoList.add(goodsVo); 
  51.     } 
  52.     // 初始化分页对象 
  53.     PageInfo<GoodsVo> pageInfo = new PageInfo<GoodsVo>(pageNum, pageSize, total.intValue()); 
  54.     pageInfo.setResult(goodsVoList); 
  55.     return pageInfo; 

④SearchController.java

控制层提供一个 /search 的 GET 接口。

  1. package com.example.controller; 
  2.  
  3. import com.example.result.PageInfo; 
  4. import com.example.service.SearchService; 
  5. import com.example.vo.GoodsVo; 
  6. import org.springframework.web.bind.annotation.GetMapping; 
  7. import org.springframework.web.bind.annotation.RequestMapping; 
  8. import org.springframework.web.bind.annotation.RestController; 
  9.  
  10. import javax.annotation.Resource; 
  11.  
  12. /** 
  13.  * @author 哈喽沃德先生 
  14.  * @微信公众号 哈喽沃德先生 
  15.  * @website https://mrhelloworld.com 
  16.  * @wechat 124059770 
  17.  */ 
  18. @RestController 
  19. @RequestMapping("search"
  20. public class SearchController { 
  21.  
  22.     @Resource 
  23.     private SearchService searchService; 
  24.  
  25.     /** 
  26.      * 搜索 
  27.      * 
  28.      * @param searchStr 搜索条件 
  29.      * @param pageNum   第几页 
  30.      * @param pageSize  每页显示条数 
  31.      * @return 
  32.      */ 
  33.     @GetMapping 
  34.     public PageInfo<GoodsVo> doSearch(String searchStr, Integer pageNum, Integer pageSize) { 
  35.         return searchService.doSearch(searchStr, pageNum, pageSize); 
  36.     } 
  37.  

⑤list.html

在 list.html 中使用 CDN 添加 Vue 和 Axios 免去下载文件的过程。

  1. <script src="https://cdn.jsdelivr.net/npm/vue@2.6.12/dist/vue.min.js"></script> 
  2. <script src="https://cdn.jsdelivr.net/npm/axios@0.21.1/dist/axios.min.js"></script> 

⑥页面处理

修改头部搜索(善于利用 Ctrl+F)的表单部分:

  • 商品关键字的 <input/> 添加 id="searchStr"
  • 添加两个 hidden 类型的 <input/> 用于存放页码信息
  1. <form action="" name="search" method="get" class="fl" onsubmit="return false;"
  2.     <input id="searchStr" type="text" class="txt" value="请输入商品关键字"/> 
  3.     <input type="submit" class="btn" value="搜索"/> 
  4.     <input id="pageNum" type="hidden" value="1"/> 
  5.     <input id="pageSize" type="hidden" value="12"/> 
  6. </form> 

修改商品列表(善于利用 Ctrl+F),只留下一个 <li></li>:

  1. <!-- 商品列表 start--> 
  2. <div id="goodsList" class="goodslist mt10"
  3.     <ul> 
  4.         <li> 
  5.             <dl> 
  6.                 <dt><a href=""><img src="images/goods1.jpg" alt=""/></a></dt> 
  7.                 <dd><a href=""><p class="beyondHidden">清华同方精锐X2 台式电脑(双核E3500 2G 500G DVD 键鼠)带20英寸显示器</p></a></dd> 
  8.                 <dd><strong>¥2399.00</strong></dd> 
  9.                 <dd><a href=""><em>已有10人评价</em></a></dd> 
  10.             </dl> 
  11.         </li> 
  12.     </ul> 
  13. </div> 
  14. <!-- 商品列表 end--> 

修改分页信息(善于利用 Ctrl+F):

  1. <!-- 分页信息 start --> 
  2. <div id="page" class="page mt20"
  3.     <a href="">首页</a> 
  4.     <a href="">上一页</a> 
  5.     <a href="" class="cur">3</a> 
  6.     <a href="">下一页</a> 
  7.     <a href="">尾页</a>&nbsp;&nbsp; 
  8.     <span> 
  9.         <em>共8页&nbsp;&nbsp;到第<input type="text" id="num" class="page_num"/>页</em> 
  10.         <a href="" class="skipsearch">确定</a> 
  11.     </span> 
  12. </div> 
  13. <!-- 分页信息 end --> 

⑦Vue and Axios

首先全局添加一个 div,设置 id="app"。

然后初始化 Vue 对象,绑定元素,定义组件数据和组件方法。

  1. <script> 
  2.   var app = new Vue({ 
  3.     // element 的简写,挂载元素,绑定 id 为 app 的 html 代码片段 
  4.     el: '#app'
  5.     // 定义组件数据 
  6.     data: { 
  7.       goodsList: [], 
  8.       page: [] 
  9.     }, 
  10.     // 定义组件方法 
  11.     methods: { 
  12.       // 搜索 
  13.       doSearch() { 
  14.         axios({ 
  15.           url: "http://localhost:8080/search"
  16.           method: "GET"
  17.           params: { 
  18.             searchStr: $("#searchStr").val(), 
  19.             pageNum: $("#pageNum").val(), 
  20.             pageSize: $("#pageSize").val() 
  21.           } 
  22.         }).then(response => { // 返回结果 
  23.           $("#pageNum").val(1);// 重置当前页 
  24.           if (response.data.total <= 0) { 
  25.             $('#goodsList').append('<strong>对不起,没有找到与“' + $("#searchStr").val() + '”相关的商品,请确认搜索关键词是否正确。</strong>'); 
  26.           } 
  27.           this.goodsList = response.data.result; 
  28.           this.page = response.data; 
  29.         }).catch(error => {// 异常捕获 
  30.           alert('系统正在升级中,请稍后再试!'); 
  31.         }); 
  32.       }, 
  33.       // 上一页 
  34.       prePage() { 
  35.         // 获取当前页的值并减一,然后重新赋值给当前页 
  36.         let page = parseInt($("#pageNum").val()) - 1; 
  37.         $("#pageNum").val(page); 
  38.         // 调用搜索函数 
  39.         this.doSearch(); 
  40.       }, 
  41.       // 下一页 
  42.       nextPage() { 
  43.         // 获取当前页的值并加一,然后重新赋值给当前页 
  44.         let page = parseInt($("#pageNum").val()) + 1; 
  45.         $("#pageNum").val(page); 
  46.         // 调用搜索函数 
  47.         this.doSearch(); 
  48.       }, 
  49.       // 第几页 
  50.       whichPage(num) { 
  51.         // 获取点击的按钮(首页、1、2...尾页)值,然后重新赋值给当前页 
  52.         $("#pageNum").val(num); 
  53.         // 调用搜索函数 
  54.         this.doSearch(); 
  55.       }, 
  56.       // 到第几页 
  57.       goToPage() { 
  58.         // 获取输入的页码值,然后重新赋值给当前页 
  59.         $("#pageNum").val($("#num").val()); 
  60.         // 调用搜索函数 
  61.         this.doSearch(); 
  62.       } 
  63.     } 
  64.   }); 
  65. </script> 

⑧绑定元素

修改头部搜索(善于利用 Ctrl+F)的表单部分:添加 v-on:click="doSearch"(简写方式 @click="doSearch")到搜索按钮上。

  1. <form action="" name="search" method="get" class="fl" onsubmit="return false;"
  2.     <input id="searchStr" type="text" class="txt" value="请输入商品关键字"/> 
  3.     <input v-on:click="doSearch" type="submit" class="btn" value="搜索"/> 
  4.     <input id="pageNum" type="hidden" value="1"/> 
  5.     <input id="pageSize" type="hidden" value="12"/> 
  6. </form> 

修改商品列表(善于利用 Ctrl+F):

  • 列表渲染:<li></li> 添加 v-for="(goods, index) in goodsList"
  • 商品图片:<img/> 添加 v-bind:src="goods.originalImg"(简写方式 :src="goods.originalImg")
  • 商品名称并高亮:<p></p> 添加 v-html="goods.goodsNameHl"
  • 商品价格:添加 {{ goods.marketPrice }}
  • 商品评论:添加 {{ goods.commentCount }}
  1. <!-- 商品列表 start--> 
  2. <div id="goodsList" class="goodslist mt10"
  3.     <ul> 
  4.         <li v-for="(goods, index) in goodsList"
  5.             <dl> 
  6.                 <dt><a href=""><img v-bind:src="goods.originalImg" alt=""/></a></dt> 
  7.                 <dd><a href=""><p class="beyondHidden" v-html="goods.goodsNameHl"></p></a></dd> 
  8.                 <dd><strong>¥{{ goods.marketPrice }}</strong></dd> 
  9.                 <dd><a href=""><em>已有{{ goods.commentCount }}人评价</em></a></dd> 
  10.             </dl> 
  11.         </li> 
  12.     </ul> 
  13. </div> 
  14. <!-- 商品列表 end--> 

修改分页信息(善于利用 Ctrl+F):

  • 首页:v-on:click="whichPage(1)"
  • 尾页:v-on:click="whichPage(page.totalPage)"
  • 上一页:v-if="page.hasPre" v-on:click="prePage"
  • 下一页:v-if="page.hasNext" v-on:click="nextPage"
  • 某一页:循环渲染:v-for="i in page.totalPage";某一页:v-on:click="whichPage(i)";当前页样式处理:v-bind:class="{ cur:i == page.currentPage }"
  • 共多少页:{{ page.totalPage }}
  • 到第几页:v-on:click="goToPage"
  1. <!-- 分页信息 start --> 
  2. <div id="page" class="page mt20"
  3.     <a v-on:click="whichPage(1)" href="javascript:void(0);">首页</a> 
  4.     <a v-if="page.hasPre" v-on:click="prePage" href="javascript:void(0);">上一页</a> 
  5.     <a v-for="i in page.totalPage" 
  6.        v-on:click="whichPage(i)" 
  7.        v-bind:class="{ cur:i == page.currentPage }" 
  8.        href="javascript:void(0);">{{ i }}</a> 
  9.     <a v-if="page.hasNext" v-on:click="nextPage" href="javascript:void(0);">下一页</a> 
  10.     <a v-on:click="whichPage(page.totalPage)" href="javascript:void(0);">尾页</a>&nbsp;&nbsp; 
  11.     <span> 
  12.         <em>共{{ page.totalPage }}页&nbsp;&nbsp;到第<input type="text" id="num" class="page_num"/>页</em> 
  13.         <a v-on:click="goToPage" href="javascript:void(0);" class="skipsearch">确定</a> 
  14.     </span> 
  15. </div> 
  16. <!-- 分页信息 end --> 

测试

访问:http://localhost:8080/list.html 随便输入什么测试一下吧。

结语

至此 Elasticsearch 的实战小项目《电商搜索系统》就完成啦,本文讲解了 Spring Boot 整合 Elasticsearch 的使用,顺便结合前端 Vue 实现了页面效果。

作为一款非常热门的搜索引擎,大家非常有必要进行更深入的学习,最后祝大家加薪!加薪!加薪!

想要一步到位直接获取代码的同学:

  1. 链接:https://pan.baidu.com/s/1VfRjcHCtTFo1-y-nwhmLvQ 
  2. 提取码:abcd 

参考资料:

  • 《这就是搜索引擎:核心技术详解》张俊林著
  • https://docs.spring.io/spring-data/elasticsearch/docs/4.1.5/reference/html/#reference
  • https://cn.vuejs.org/v2/guide/index.html
  • https://github.com/axios/axios

作者:哈喽沃德先生

编辑:陶家龙

出处:转载自公众号哈喽沃德先生(ID:imrhelloworld) 

 

责任编辑:武晓燕 来源: 哈喽沃德先生
相关推荐

2022-05-17 14:28:42

编程语言Julia代码

2024-04-03 09:23:31

ES索引分析器

2021-04-28 14:50:07

ElasticSearMySQL数据库

2021-02-19 08:17:07

MySQL ElasticSea搜索

2024-10-22 11:34:34

数据分析统计学

2022-09-05 11:28:07

数据分析活动分析

2021-12-13 01:40:29

ElasticSear倒排索引

2021-06-25 11:19:04

LinuxWindows操作系统

2021-06-03 10:58:16

logbacklog4jJava

2021-06-05 18:00:18

数据分析运营

2023-03-26 19:18:27

2022-08-29 11:59:29

监控数据DAU

2024-07-30 14:05:00

2016-12-27 15:13:12

系统

2020-10-15 09:19:36

Elasticsear查询速度

2020-04-20 08:08:23

MongoDBElasticsear数据库

2021-11-05 07:18:15

分布式事务业务

2023-01-24 16:13:22

编程语言JavaIT

2021-07-04 14:19:03

RabbitMQ消息转换

2024-07-16 11:51:54

数据复盘报告
点赞
收藏

51CTO技术栈公众号