devbox
weixin_40725706
这个屌丝很懒，什么也没留下！
关注作者
热门标签
热门文章
当前位置:   article > 正文

新黑马头条项目经验（黑马）_黑马头条项目亮点与难点

作者：weixin_40725706 | 2024-08-16 11:49:39

赞

踩

黑马头条项目亮点与难点

 

 

swagger

(1)简介

Swagger 是一个规范和完整的框架，用于生成、描述、调用和可视化 RESTful 风格的 Web 服务(API Documentation & Design Tools for Teams | Swagger)。 它的主要作用是：

  1. 使得前后端分离开发更加方便，有利于团队协作

  2. 接口的文档在线自动生成，降低后端开发人员编写接口文档的负担

  3. 功能测试

    Spring已经将Swagger纳入自身的标准，建立了Spring-swagger项目，现在叫Springfox。通过在项目中引入Springfox ，即可非常简单快捷的使用Swagger。

(2)SpringBoot集成Swagger

  • 引入依赖,在heima-leadnews-model和heima-leadnews-common模块中引入该依赖

    1. <dependency>
    2.     <groupId>io.springfox</groupId>
    3.     <artifactId>springfox-swagger2</artifactId>
    4. </dependency>
    5. <dependency>
    6.     <groupId>io.springfox</groupId>
    7.     <artifactId>springfox-swagger-ui</artifactId>
    8. </dependency>

只需要在heima-leadnews-common中进行配置即可，因为其他微服务工程都直接或间接依赖即可。

  • 在heima-leadnews-common工程中添加一个配置类

新增：com.heima.common.swagger.SwaggerConfiguration

  1. package com.heima.common.swagger;
  2. ​
  3. import org.springframework.context.annotation.Bean;
  4. import org.springframework.context.annotation.Configuration;
  5. import springfox.documentation.builders.ApiInfoBuilder;
  6. import springfox.documentation.builders.PathSelectors;
  7. import springfox.documentation.builders.RequestHandlerSelectors;
  8. import springfox.documentation.service.ApiInfo;
  9. import springfox.documentation.service.Contact;
  10. import springfox.documentation.spi.DocumentationType;
  11. import springfox.documentation.spring.web.plugins.Docket;
  12. import springfox.documentation.swagger2.annotations.EnableSwagger2;
  13. ​
  14. @Configuration
  15. @EnableSwagger2
  16. public class SwaggerConfiguration {
  17. ​
  18.    @Bean
  19.    public Docket buildDocket() {
  20.       return new Docket(DocumentationType.SWAGGER_2)
  21.               .apiInfo(buildApiInfo())
  22.               .select()
  23.               // 要扫描的API(Controller)基础包
  24.               .apis(RequestHandlerSelectors.basePackage("com.heima"))
  25.               .paths(PathSelectors.any())
  26.               .build();
  27.    }
  28. ​
  29.    private ApiInfo buildApiInfo() {
  30.       Contact contact = new Contact("黑马程序员","","");
  31.       return new ApiInfoBuilder()
  32.               .title("黑马头条-平台管理API文档")
  33.               .description("黑马头条后台api")
  34.               .contact(contact)
  35.               .version("1.0.0").build();
  36.    }
  37. }

在heima-leadnews-common模块中的resources目录中新增以下目录和文件

文件：resources/META-INF/Spring.factories

  1. org.springframework.boot.autoconfigure.EnableAutoConfiguration=\
  2.   com.heima.common.swagger.SwaggerConfiguration

（3）Swagger常用注解

在Java类中添加Swagger的注解即可生成Swagger接口文档，常用Swagger注解如下：

@Api：修饰整个类，描述Controller的作用

@ApiOperation：描述一个类的一个方法，或者说一个接口

@ApiParam：单个参数的描述信息

@ApiModel：用对象来接收参数

@ApiModelProperty：用对象接收参数时，描述对象的一个字段

@ApiResponse：HTTP响应其中1个描述

@ApiResponses：HTTP响应整体描述

@ApiIgnore：使用该注解忽略这个API

@ApiError ：发生错误返回的信息

@ApiImplicitParam：一个请求参数

@ApiImplicitParams：多个请求参数的描述信息

@ApiImplicitParam属性：

属性取值作用
paramType查询参数类型
path以地址的形式提交数据
query直接跟参数完成自动映射赋值
body以流的形式提交 仅支持POST
header参数在request headers 里边提交
form以form表单的形式提交 仅支持POST
dataType参数的数据类型 只作为标志说明，并没有实际验证
Long
String
name接收参数名
value接收参数的意义描述
required参数是否必填
true必填
false非必填
defaultValue默认值

我们在ApUserLoginController中添加Swagger注解，代码如下所示：

  1. @RestController
  2. @RequestMapping("/api/v1/login")
  3. @Api(value = "app端用户登录", tags = "ap_user", description = "app端用户登录API")
  4. public class ApUserLoginController {
  5. ​
  6.     @Autowired
  7.     private ApUserService apUserService;
  8. ​
  9.     @PostMapping("/login_auth")
  10.     @ApiOperation("用户登录")
  11.     public ResponseResult login(@RequestBody LoginDto dto){
  12.         return apUserService.login(dto);
  13.     }
  14. }

LoginDto

  1. @Data
  2. public class LoginDto {
  3. ​
  4.     /**
  5.      * 手机号
  6.      */
  7.     @ApiModelProperty(value="手机号",required = true)
  8.     private String phone;
  9. ​
  10.     /**
  11.      * 密码
  12.      */
  13.     @ApiModelProperty(value="密码",required = true)
  14.     private String password;
  15. }

启动user微服务，访问地址：http://localhost:51801/swagger-ui.html

knife4j

(1)简介

knife4j是为Java MVC框架集成Swagger生成Api文档的增强解决方案,前身是swagger-bootstrap-ui,取名kni4j是希望它能像一把匕首一样小巧,轻量,并且功能强悍!

gitee地址：knife4j: Knife4j是一个集Swagger2 和 OpenAPI3为一体的增强解决方案

官方文档：Knife4j · 集Swagger2及OpenAPI3为一体的增强解决方案. | Knife4j

效果演示：http://knife4j.xiaominfo.com/doc.html

(2)核心功能

该UI增强包主要包括两大核心功能：文档说明 和 在线调试

  • 文档说明：根据Swagger的规范说明，详细列出接口文档的说明，包括接口地址、类型、请求示例、请求参数、响应示例、响应参数、响应码等信息，使用swagger-bootstrap-ui能根据该文档说明，对该接口的使用情况一目了然。

  • 在线调试：提供在线接口联调的强大功能，自动解析当前接口参数,同时包含表单验证，调用参数可返回接口响应内容、headers、Curl请求命令实例、响应时间、响应状态码等信息，帮助开发者在线调试，而不必通过其他测试工具测试接口是否正确,简介、强大。

  • 个性化配置：通过个性化ui配置项，可自定义UI的相关显示信息

  • 离线文档：根据标准规范，生成的在线markdown离线文档，开发者可以进行拷贝生成markdown接口文档，通过其他第三方markdown转换工具转换成html或pdf，这样也可以放弃swagger2markdown组件

  • 接口排序：自1.8.5后，ui支持了接口排序功能，例如一个注册功能主要包含了多个步骤,可以根据swagger-bootstrap-ui提供的接口排序规则实现接口的排序，step化接口操作，方便其他开发者进行接口对接

(3)快速集成

  • 在heima-leadnews-common模块中的pom.xml文件中引入knife4j的依赖,如下：

  1. <dependency>
  2.      <groupId>com.github.xiaoymin</groupId>
  3.      <artifactId>knife4j-spring-boot-starter</artifactId>
  4. </dependency>

  • 创建Swagger配置文件

在heima-leadnews-common模块中新建配置类

新建Swagger的配置文件SwaggerConfiguration.java文件,创建springfox提供的Docket分组对象,代码如下：

  1. package com.heima.common.knife4j;
  2. ​
  3. import com.github.xiaoymin.knife4j.spring.annotations.EnableKnife4j;
  4. import org.springframework.context.annotation.Bean;
  5. import org.springframework.context.annotation.Configuration;
  6. import org.springframework.context.annotation.Import;
  7. import springfox.bean.validators.configuration.BeanValidatorPluginsConfiguration;
  8. import springfox.documentation.builders.ApiInfoBuilder;
  9. import springfox.documentation.builders.PathSelectors;
  10. import springfox.documentation.builders.RequestHandlerSelectors;
  11. import springfox.documentation.service.ApiInfo;
  12. import springfox.documentation.spi.DocumentationType;
  13. import springfox.documentation.spring.web.plugins.Docket;
  14. import springfox.documentation.swagger2.annotations.EnableSwagger2;
  15. ​
  16. @Configuration
  17. @EnableSwagger2
  18. @EnableKnife4j
  19. @Import(BeanValidatorPluginsConfiguration.class)
  20. public class Swagger2Configuration {
  21. ​
  22.     @Bean(value = "defaultApi2")
  23.     public Docket defaultApi2() {
  24.         Docket docket=new Docket(DocumentationType.SWAGGER_2)
  25.                 .apiInfo(apiInfo())
  26.                 //分组名称
  27.                 .groupName("1.0")
  28.                 .select()
  29.                 //这里指定Controller扫描包路径
  30.                 .apis(RequestHandlerSelectors.basePackage("com.heima"))
  31.                 .paths(PathSelectors.any())
  32.                 .build();
  33.         return docket;
  34.     }
  35.     private ApiInfo apiInfo() {
  36.         return new ApiInfoBuilder()
  37.                 .title("黑马头条API文档")
  38.                 .description("黑马头条API文档")
  39.                 .version("1.0")
  40.                 .build();
  41.     }
  42. }

以上有两个注解需要特别说明，如下表：

注解说明
@EnableSwagger2该注解是Springfox-swagger框架提供的使用Swagger注解，该注解必须加
@EnableKnife4j该注解是knife4j提供的增强注解,Ui提供了例如动态参数、参数过滤、接口排序等增强功能,如果你想使用这些增强功能就必须加该注解，否则可以不用加

  • 添加配置

在Spring.factories中新增配置

  1. org.springframework.boot.autoconfigure.EnableAutoConfiguration=\
  2.   com.heima.common.swagger.Swagger2Configuration, \
  3.   com.heima.common.swagger.SwaggerConfiguration

  • 访问

在浏览器输入地址：http://host:port/doc.html

 

 

 

 

 

 

 

 

 

 

 

 HelloController

  1. @Controller
  2. public class HelloController {
  3.     @GetMapping("/basic")
  4.     public String hello(Model model){
  5.         //name
  6.         //model.addAttribute("name","freemarker");
  7.         //stu
  8.         Student student = new Student();
  9.         student.setName("小明");
  10.         student.setAge(18);
  11.         model.addAttribute("stu",student);
  12.         return "01-basic";
  13.     }
  14.  
  15.     @GetMapping("/list")
  16.     public String list(Model model){
  17.  
  18.         //------------------------------------
  19.         Student stu1 = new Student();
  20.         stu1.setName("小强");
  21.         stu1.setAge(18);
  22.         stu1.setMoney(1000.86f);
  23.         stu1.setBirthday(new Date());
  24.  
  25.         //小红对象模型数据
  26.         Student stu2 = new Student();
  27.         stu2.setName("小红");
  28.         stu2.setMoney(200.1f);
  29.         stu2.setAge(19);
  30.  
  31.         //将两个对象模型数据存放到List集合中
  32.         List<Student> stus = new ArrayList<>();
  33.         stus.add(stu1);
  34.         stus.add(stu2);
  35.  
  36.         //向model中存放List集合数据
  37.         model.addAttribute("stus",stus);
  38.  
  39.         //------------------------------------
  40.  
  41.         //创建Map数据
  42.         HashMap<String,Student> stuMap = new HashMap<>();
  43.         stuMap.put("stu1",stu1);
  44.         stuMap.put("stu2",stu2);
  45.         // 3.1 向model中存放Map数据
  46.         model.addAttribute("stuMap", stuMap);
  47.         //日期
  48.         model.addAttribute("today",new Date());
  49.         //长数值
  50.         model.addAttribute("point",323213123132312L);
  51.  
  52.         return "02-list";
  53.     }
  54. }

01-basic.ftl 

  1. <!DOCTYPE html>
  2. <html>
  3. <head>
  4.     <meta charset="utf-8">
  5.     <title>Hello World!</title>
  6. </head>
  7. <body>
  8. <b>普通文本 String 展示：</b><br><br>
  9. Hello ${name!''} <br>
  10. <hr>
  11. <b>对象Student中的数据展示：</b><br/>
  12. 姓名：${stu.name}<br/>
  13. 年龄：${stu.age}
  14. <hr>
  15. </body>
  16. </html>

 02-list.ftl 

  1. <!DOCTYPE html>
  2. <html>
  3. <head>
  4.     <meta charset="utf-8">
  5.     <title>Hello World!</title>
  6. </head>
  7. <body>
  8.  
  9. <#-- list 数据的展示 -->
  10. <b>展示list中的stu数据:</b>
  11. <br>
  12. <br>
  13. <table>
  14.     <tr>
  15.         <td>序号</td>
  16.         <td>姓名</td>
  17.         <td>年龄</td>
  18.         <td>钱包</td>
  19.     </tr>
  20.     <#if stus??>
  21.         <#list stus as stu>
  22.             <#if stu.name='小红'>
  23.                 <tr style="color: red">
  24.                     <td>${stu_index+1}</td>
  25.                     <td>${stu.name}</td>
  26.                     <td>${stu.age}</td>
  27.                     <td>${stu.money}</td>
  28.                 </tr>
  29.             <#else>
  30.                 <tr>
  31.                     <td>${stu_index+1}</td>
  32.                     <td>${stu.name}</td>
  33.                     <td>${stu.age}</td>
  34.                     <td>${stu.money}</td>
  35.                 </tr>
  36.             </#if>
  37.         </#list>
  38.     </#if>
  39.     stu集合的大小：${stus?size}<br/>
  40. </table>
  41.  
  42. <hr>
  43. <#-- Map 数据的展示 -->
  44. <b>map数据的展示：</b>
  45. <br/><br/>
  46. <a href="###">方式一：通过map['keyname'].property</a><br/>
  47. 输出stu1的学生信息：<br/>
  48. 姓名：${stuMap['stu1'].name}<br/>
  49. 年龄：${stuMap['stu1'].age}<br/>
  50. <br/>
  51. <a href="###">方式二：通过map.keyname.property</a><br/>
  52. 输出stu2的学生信息：<br/>
  53. 姓名：${stuMap.stu2.name}<br/>
  54. 年龄：${stuMap.stu2.age}<br/>
  55.  
  56. <br/>
  57. <a href="###">遍历map中两个学生信息：</a><br/>
  58. <table>
  59.     <tr>
  60.         <td>序号</td>
  61.         <td>姓名</td>
  62.         <td>年龄</td>
  63.         <td>钱包</td>
  64.     </tr>
  65.     <#list stuMap?keys as key >
  66.         <tr>
  67.             <td>${key_index+1}</td>
  68.             <td>${stuMap[key].name}</td>
  69.             <td>${stuMap[key].age}</td>
  70.             <td>${stuMap[key].money}</td>
  71.         </tr>
  72.     </#list>
  73. </table>
  74. <hr>
  75. 当前的日期为：${today?datetime}<br/>
  76. 当前的日期为：${today?string("yyyy年MM月")}
  77. --------------------------<br>
  78. ${point?c}
  79. </body>
  80. </html>

  1. @SpringBootTest(classes = FreemarkerDemoApplication.class)
  2. @RunWith(SpringRunner.class)
  3. public class FreemarkerTest {
  4.  
  5.     @Autowired
  6.     private Configuration configuration;
  7.  
  8.     @Test
  9.     public void test() throws IOException, TemplateException {
  10.         Template template = configuration.getTemplate("02-list.ftl");
  11.         /**
  12.          * 合成方法
  13.          * 两个参数
  14.          * 第一个参数：模型参数
  15.          * 第二个参数：输出流
  16.          */
  17.         template.process(getData(),new FileWriter("c:/list.html"));
  18.     }
  19.  
  20.     private Map getData(){
  21.  
  22.         Map<String, Object> map = new HashMap();
  23.  
  24.         Student stu1 = new Student();
  25.         stu1.setName("小强");
  26.         stu1.setAge(18);
  27.         stu1.setMoney(1000.86f);
  28.         stu1.setBirthday(new Date());
  29.  
  30.         //小红对象模型数据
  31.         Student stu2 = new Student();
  32.         stu2.setName("小红");
  33.         stu2.setMoney(200.1f);
  34.         stu2.setAge(19);
  35.  
  36.         //将两个对象模型数据存放到List集合中
  37.         List<Student> stus = new ArrayList<>();
  38.         stus.add(stu1);
  39.         stus.add(stu2);
  40.  
  41.         //向model中存放List集合数据
  42.         map.put("stus",stus);
  43.         //model.addAttribute("stus",stus);
  44.  
  45.         //------------------------------------
  46.  
  47.         //创建Map数据
  48.         HashMap<String,Student> stuMap = new HashMap<>();
  49.         stuMap.put("stu1",stu1);
  50.         stuMap.put("stu2",stu2);
  51.         // 3.1 向model中存放Map数据
  52.         map.put("stuMap", stuMap);
  53.         //model.addAttribute("stuMap", stuMap);
  54.         //日期
  55.         map.put("today",new Date());
  56.         //model.addAttribute("today",new Date());
  57.         //长数值
  58.         map.put("point",323213123132312L);
  59.         //model.addAttribute("point",323213123132312L);
  60.  
  61.         return map;
  62.     }
  63. }

 

 新版本MinlO用以下方式启动：

docker run -d \-p 9000:9000 \-p 9001:9001 \--name minio1 \-v /home/minio/data:/data \-e "MINIO_ROOT_USER=minio" \-e "MINIO_ROOT_PASSWORD=minio123" \minio/minio server /data --console-address ":9001"

假设我们的服务器地址为http://192.168.200.130:9000，我们在地址栏输入：http://http://192.168.200.130:9000/ 即可进入登录界面。

 Access Key为minio Secret_key 为minio123 进入系统后可以看到主界面

 点击右下角的“+”号 ，点击下面的图标，创建一个桶

 创建minio-demo,对应pom如下

  1. <?xml version="1.0" encoding="UTF-8"?>
  2. <project xmlns="http://maven.apache.org/POM/4.0.0"
  3.          xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
  4.          xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
  5.     <parent>
  6.         <artifactId>heima-leadnews-test</artifactId>
  7.         <groupId>com.heima</groupId>
  8.         <version>1.0-SNAPSHOT</version>
  9.     </parent>
  10.     <modelVersion>4.0.0</modelVersion>
  11.  
  12.     <artifactId>minio-demo</artifactId>
  13.  
  14.     <properties>
  15.         <maven.compiler.source>8</maven.compiler.source>
  16.         <maven.compiler.target>8</maven.compiler.target>
  17.     </properties>
  18.  
  19.     <dependencies>
  20.  
  21.         <dependency>
  22.             <groupId>io.minio</groupId>
  23.             <artifactId>minio</artifactId>
  24.             <version>7.1.0</version>
  25.         </dependency>
  26.         <dependency>
  27.             <groupId>org.springframework.boot</groupId>
  28.             <artifactId>spring-boot-starter-web</artifactId>
  29.         </dependency>
  30.  
  31.         <dependency>
  32.             <groupId>org.springframework.boot</groupId>
  33.             <artifactId>spring-boot-starter-test</artifactId>
  34.         </dependency>
  35.     </dependencies>
  36.  
  37. </project>

引导类：

  1. package com.heima.minio;
  2.  
  3. import org.springframework.boot.SpringApplication;
  4. import org.springframework.boot.autoconfigure.SpringBootApplication;
  5.  
  6.  
  7. @SpringBootApplication
  8. public class MinIOApplication {
  9.  
  10.     public static void main(String[] args) {
  11.         SpringApplication.run(MinIOApplication.class,args);
  12.     }
  13. }

创建测试类，上传html文件

  1. package com.heima.minio.test;
  2.  
  3. import io.minio.MinioClient;
  4. import io.minio.PutObjectArgs;
  5.  
  6. import java.io.FileInputStream;
  7.  
  8. public class MinIOTest {
  9.  
  10.  
  11.     public static void main(String[] args) {
  12.  
  13.         FileInputStream fileInputStream = null;
  14.         try {
  15.  
  16.             fileInputStream =  new FileInputStream("D:\\list.html");;//文件读取的位置
  17.  
  18.             //1.创建minio链接客户端
  19.             MinioClient minioClient = MinioClient.builder().credentials("minio", "minio123").endpoint("http://192.168.200.130:9000").build();
  20.             //2.上传
  21.             PutObjectArgs putObjectArgs = PutObjectArgs.builder()
  22.                     .object("list.html")//文件名
  23.                     .contentType("text/html")//文件类型
  24.                     .bucket("leadnews")//桶名词  与minio创建的名词一致
  25.                     .stream(fileInputStream, fileInputStream.available(), -1) //文件流,-1上传所有的文件
  26.                     .build();
  27.             minioClient.putObject(putObjectArgs);
  28.  
  29.             System.out.println("http://192.168.200.130:9000/leadnews/ak47.jpg");
  30.  
  31.         } catch (Exception ex) {
  32.             ex.printStackTrace();
  33.         }
  34.     }
  35.  
  36. }

 

  1. @SpringBootTest(classes = ArticleApplication.class)
  2. @RunWith(SpringRunner.class)
  3. public class ArticleFreemarkerTest {
  4.  
  5.     @Autowired
  6.     private ApArticleContentMapper apArticleContentMapper;
  7.  
  8.     @Autowired
  9.     private ApArticleService apArticleService;
  10.  
  11.     @Autowired
  12.     private Configuration configuration;
  13.  
  14.     @Autowired
  15.     private FileStorageService fileStorageService;
  16.  
  17.     @Test
  18.     public void createStaticUrlTest() throws Exception {
  19.         //1.获取文章内容
  20.         //已知文章的id
  21.         ApArticleContent apArticleContent = apArticleContentMapper.selectOne(Wrappers.<ApArticleContent>lambdaQuery().eq(ApArticleContent::getArticleId,1302862387124125698L));
  22.         if(apArticleContent !=null && StringUtils.isNotBlank(apArticleContent.getContent())){
  23.             //2.文章内容通过freemarker生成html文件
  24.             Template template = configuration.getTemplate("article.ftl");
  25.             //数据模型
  26.             Map content = new HashMap();
  27.             content.put("content", JSONArray.parseArray(apArticleContent.getContent()));
  28.             StringWriter out = new StringWriter();
  29.             //合成
  30.             template.process(content,out);
  31.             //3.把html文件上传到minio中
  32.             InputStream in = new ByteArrayInputStream(out.toString().getBytes());
  33.             String path = fileStorageService.uploadHtmlFile("",apArticleContent.getArticleId()+".html",in);
  34.             //4.修改ap_article表，保存static_utl字段
  35.             apArticleService.update(Wrappers.<ApArticle>lambdaUpdate().eq(ApArticle::getId,apArticleContent.getArticleId())
  36.                     .set(ApArticle::getStaticUrl,path));
  37.         }
  38.  
  39.     }
  40. }

网关，token解析为用户存入header 

  1. Claims claimsBody = AppJwtUtil.getClaimsBody(token);
  2.             //是否是过期
  3.             int result = AppJwtUtil.verifyToken(claimsBody);
  4.             if(result == 1 || result  == 2){
  5.                 response.setStatusCode(HttpStatus.UNAUTHORIZED);
  6.                 return response.setComplete();
  7.             }
  8.             //获取用户信息
  9.             Object userId = claimsBody.get("id");
  10.             //存入header中
  11.             ServerHttpRequest serverHttpRequest = request.mutate().headers(httpHeaders -> {
  12.                 httpHeaders.add("userId",userId+"");
  13.             }).build();
  14.             //重置请求
  15.             exchange.mutate().request(serverHttpRequest);

拦截器

  1. public class WmTokenInterceptor implements HandlerInterceptor {
  2.     /**
  3.      * 得到header中的用户信息，并且存入到当前线程中
  4.      * @param request
  5.      * @param response
  6.      * @param handler
  7.      * @return
  8.      * @throws Exception
  9.      */
  10.     @Override
  11.     public boolean preHandle(HttpServletRequest request, HttpServletResponse response, Object handler) throws Exception {
  12.         String userId = request.getHeader("userId");
  13.         if(userId != null){
  14.             WmUser wmUser = new WmUser();
  15.             wmUser.setApUserId(Integer.valueOf(userId));
  16.             //存入到当前线程中
  17.             WmThreadLocalUtil.setUser(wmUser);
  18.         }
  19.         return true;
  20.     }
  21.  
  22.     /**
  23.      * 清理线程中的数据
  24.      * @param request
  25.      * @param response
  26.      * @param handler
  27.      * @param modelAndView
  28.      * @throws Exception
  29.      */
  30.     @Override
  31.     public void postHandle(HttpServletRequest request, HttpServletResponse response, Object handler, ModelAndView modelAndView) throws Exception {
  32.         WmThreadLocalUtil.clear();
  33.     }
  34. }

注册拦截器

  1. @Configuration
  2. public class WebMvcConfig implements WebMvcConfigurer {
  3.     @Override
  4.     public void addInterceptors(InterceptorRegistry registry) {
  5.         registry.addInterceptor(new WmTokenInterceptor()).addPathPatterns("/**");
  6.     }
  7. }

 

 mybatis-plus已经集成了雪花算法，完成以下两步即可在项目中集成雪花算法

第一：在实体类中的id上加入如下配置，指定类型为id_worker

  1. @TableId(value = "id",type = IdType.ID_WORKER)
  2. private Long id;

第二：在application.yml文件中配置数据中心id和机器id

  1. mybatis-plus:
  2.   mapper-locations: classpath*:mapper/*.xml
  3.   # 设置别名包扫描路径，通过该属性可以给包中的类注册别名
  4.   type-aliases-package: com.heima.model.article.pojos
  5.   global-config:
  6.     datacenter-id: 1
  7.     workerId: 1

feign基本使用

①：在heima-leadnews-feign-api中新增接口

先导入feign的依赖(在feign模块中导入)

  1. <dependency>
  2.     <groupId>org.springframework.cloud</groupId>
  3.     <artifactId>spring-cloud-starter-openfeign</artifactId>
  4. </dependency>

定义文章端的接口(在feign模块中定义接口)

  1. package com.heima.apis.article;
  2. ​
  3. import com.heima.model.article.dtos.ArticleDto;
  4. import com.heima.model.common.dtos.ResponseResult;
  5. import org.springframework.cloud.openfeign.FeignClient;
  6. import org.springframework.web.bind.annotation.PostMapping;
  7. import org.springframework.web.bind.annotation.RequestBody;
  8. ​
  9. import java.io.IOException;
  10. ​
  11. ​
  12. @FeignClient(value = "leadnews-article")//服务提供者的服务名称
  13. public interface IArticleClient {
  14. ​
  15.     @PostMapping("/api/v1/article/save")//服务提供者的请求路径
  16.     public ResponseResult saveArticle(@RequestBody ArticleDto dto) ;
  17. }
  1. @RestController
  2. public class ArticleClient implements IArticleClient {
  3.     @PostMapping("/api/v1/article/save")
  4.     @Override
  5.     public ResponseResult saveArticle(@RequestBody ArticleDto dto) {
  6.         return null;
  7.     }
  8. }

 在heima-leadnews-wemedia服务(服务消费者)中已经依赖了heima-leadnews-feign-apis(feign模块)工程，只需要在自媒体的引导类中开启feign的远程调用即可

  1. <dependency>
  2.      <groupId>com.heima</groupId>
  3.      <artifactId>heima-leadnews-feign-api</artifactId>
  4. </dependency>

注解为：@EnableFeignClients(basePackages = "com.heima.apis") 需要指向apis这个包

  1. @SpringBootApplication
  2. @EnableDiscoveryClient
  3. @MapperScan("com.heima.wemedia.mapper")
  4. @EnableFeignClients(basePackages = "com.heima.apis")
  5. public class WemediaApplication {
  6.  
  7.     public static void main(String[] args) {
  8.         SpringApplication.run(WemediaApplication.class,args);
  9.     }
  10.  
  11.     @Bean
  12.     public MybatisPlusInterceptor mybatisPlusInterceptor() {
  13.         MybatisPlusInterceptor interceptor = new MybatisPlusInterceptor();
  14.         interceptor.addInnerInterceptor(new PaginationInnerInterceptor(DbType.MYSQL));
  15.         return interceptor;
  16.     }
  17. }

 然后直接注入即可使用

  1. @Autowired
  2. private IArticleClient iArticleClient;

 ​​​​​​

实现步骤：

①：在heima-leadnews-feign-api编写降级逻辑

  1. package com.heima.apis.article.fallback;
  2. ​
  3. import com.heima.apis.article.IArticleClient;
  4. import com.heima.model.article.dtos.ArticleDto;
  5. import com.heima.model.common.dtos.ResponseResult;
  6. import com.heima.model.common.enums.AppHttpCodeEnum;
  7. import org.springframework.stereotype.Component;
  8. ​
  9. /**
  10.  * feign失败配置
  11.  * @author itheima
  12.  */
  13. @Component
  14. public class IArticleClientFallback implements IArticleClient {
  15.     @Override
  16.     public ResponseResult saveArticle(ArticleDto dto)  {
  17.         return ResponseResult.errorResult(AppHttpCodeEnum.SERVER_ERROR,"获取数据失败");
  18.     }
  19. }

在自媒体微服务中添加类，扫描降级代码类的包

  1. package com.heima.wemedia.config;
  2. ​
  3. import org.springframework.context.annotation.ComponentScan;
  4. import org.springframework.context.annotation.Configuration;
  5. ​
  6. @Configuration
  7. @ComponentScan("com.heima.apis.article.fallback")
  8. public class InitConfig {
  9. }

②：远程接口中指向降级代码

  1. package com.heima.apis.article;
  2. ​
  3. import com.heima.apis.article.fallback.IArticleClientFallback;
  4. import com.heima.model.article.dtos.ArticleDto;
  5. import com.heima.model.common.dtos.ResponseResult;
  6. import org.springframework.cloud.openfeign.FeignClient;
  7. import org.springframework.web.bind.annotation.PostMapping;
  8. import org.springframework.web.bind.annotation.RequestBody;
  9. ​
  10. @FeignClient(value = "leadnews-article",fallback = IArticleClientFallback.class)
  11. public interface IArticleClient {
  12. ​
  13.     @PostMapping("/api/v1/article/save")
  14.     public ResponseResult saveArticle(@RequestBody ArticleDto dto);
  15. }

③：客户端开启降级heima-leadnews-wemedia

在wemedia的nacos配置中心里添加如下内容，开启服务降级，也可以指定服务响应的超时的时间

hystrix 可以在服务器端配置降级，也可以在客户端配置降级

  1. feign:
  2.   # 开启feign对hystrix熔断降级的支持
  3.   hystrix:
  4.     enabled: true
  5.   # 修改调用超时时间
  6.   client:
  7.     config:
  8.       default:
  9.         connectTimeout: 2000
  10.         readTimeout: 2000

 目前的降级逻辑并未生效，还需要在heima-wemedia中开启包的扫描，使得该降级逻辑生效

  1. @Configuration
  2. @ComponentScan("com.heima.apis.article.fallback")
  3. public class InitConfig {
  4. }

④：测试

在ApArticleServiceImpl类中saveArticle方法添加代码

  1. try {
  2.     Thread.sleep(3000);
  3. } catch (InterruptedException e) {
  4.     e.printStackTrace();
  5. }

在自媒体端进行审核测试，会出现服务降级的现象。

  1. /**
  2.      * 自媒体文章审核
  3.      * @param id 自媒体文章id
  4.      */
  5.     @Override
  6.     @Async //标明当前方法是一个异步方法
  7.     public void autoScanWmNews(Integer id) {......}
  1. /**
  2.      * 自媒体发布，修改，保存草稿
  3.      * @param dto
  4.      * @return
  5.      */
  6.     @Override
  7.     public ResponseResult submit(WmNewsDto dto) {
  8.         //0.条件判断
  9.         if(dto == null || dto.getContent() == null){
  10.             return ResponseResult.errorResult(AppHttpCodeEnum.PARAM_INVALID);
  11.         }
  12.         //1.保存或修改文章
  13.         WmNews wmNews = new WmNews();
  14.         //属性拷贝 属性名称和类型相同才能拷贝
  15.         BeanUtils.copyProperties(dto,wmNews);
  16.         //封面图片 list ---> string
  17.         if(dto.getImages() != null && dto.getImages().size() > 0){
  18.             //[1.jpg,2.jpg]-->1.jpg,2.jpg
  19.             String imagStr = StringUtils.join(dto.getImages(),",");
  20.             wmNews.setImages(imagStr);
  21.         }
  22.         //如果当前封面类型为自动 -1
  23.         if(dto.getType().equals(WemediaConstants.WM_NEWS_TYPE_AUTO)){
  24.             wmNews.setType(null);
  25.         }
  26.         saveOrUpdateWmNews(wmNews);
  27.         //2.判断是否为草稿
  28.         if(dto.getStatus().equals(WmNews.Status.NORMAL.getCode())){
  29.             return ResponseResult.okResult(AppHttpCodeEnum.SUCCESS);
  30.         }
  31.         //3.不是草稿，保存文章内容图片与素材的关系
  32.         //获取到文章内容中的图片信息
  33.         List<String> materials = extractUrlInfo(dto.getContent());
  34.         saveRelativeInfoForContent(materials,wmNews.getId());
  35.         //4.不是草稿，保存文章封面图片与素材的关系,如果当前布局是自动，需要匹配封面图片
  36.         saveRelativeInfoForCover(dto,wmNews,materials);
  37.  
  38.         //审核文章
  39.         wmNewsAutoScanService.autoScanWmNews(wmNews.getId());
  40.  
  41.         return ResponseResult.okResult(AppHttpCodeEnum.SUCCESS);
  42.     }
  1. @SpringBootApplication
  2. @EnableDiscoveryClient
  3. @MapperScan("com.heima.wemedia.mapper")
  4. @EnableFeignClients(basePackages = "com.heima.apis")
  5. @EnableAsync //开启异步调用
  6. public class WemediaApplication {
  7.  
  8.     public static void main(String[] args) {
  9.         SpringApplication.run(WemediaApplication.class,args);
  10.     }
  11.  
  12.     @Bean
  13.     public MybatisPlusInterceptor mybatisPlusInterceptor() {
  14.         MybatisPlusInterceptor interceptor = new MybatisPlusInterceptor();
  15.         interceptor.addInnerInterceptor(new PaginationInnerInterceptor(DbType.MYSQL));
  16.         return interceptor;
  17.     }
  18. }

 

 

  1. package com.heima.utils.common;
  2.  
  3.  
  4. import java.util.*;
  5.  
  6. public class SensitiveWordUtil {
  7.  
  8.     public static Map<String, Object> dictionaryMap = new HashMap<>();
  9.  
  10.  
  11.     /**
  12.      * 生成关键词字典库
  13.      * @param words
  14.      * @return
  15.      */
  16.     public static void initMap(Collection<String> words) {
  17.         if (words == null) {
  18.             System.out.println("敏感词列表不能为空");
  19.             return ;
  20.         }
  21.  
  22.         // map初始长度words.size()，整个字典库的入口字数(小于words.size()，因为不同的词可能会有相同的首字)
  23.         Map<String, Object> map = new HashMap<>(words.size());
  24.         // 遍历过程中当前层次的数据
  25.         Map<String, Object> curMap = null;
  26.         Iterator<String> iterator = words.iterator();
  27.  
  28.         while (iterator.hasNext()) {
  29.             String word = iterator.next();
  30.             curMap = map;
  31.             int len = word.length();
  32.             for (int i =0; i < len; i++) {
  33.                 // 遍历每个词的字
  34.                 String key = String.valueOf(word.charAt(i));
  35.                 // 当前字在当前层是否存在, 不存在则新建, 当前层数据指向下一个节点, 继续判断是否存在数据
  36.                 Map<String, Object> wordMap = (Map<String, Object>) curMap.get(key);
  37.                 if (wordMap == null) {
  38.                     // 每个节点存在两个数据: 下一个节点和isEnd(是否结束标志)
  39.                     wordMap = new HashMap<>(2);
  40.                     wordMap.put("isEnd", "0");
  41.                     curMap.put(key, wordMap);
  42.                 }
  43.                 curMap = wordMap;
  44.                 // 如果当前字是词的最后一个字，则将isEnd标志置1
  45.                 if (i == len -1) {
  46.                     curMap.put("isEnd", "1");
  47.                 }
  48.             }
  49.         }
  50.  
  51.         dictionaryMap = map;
  52.     }
  53.  
  54.     /**
  55.      * 搜索文本中某个文字是否匹配关键词
  56.      * @param text
  57.      * @param beginIndex
  58.      * @return
  59.      */
  60.     private static int checkWord(String text, int beginIndex) {
  61.         if (dictionaryMap == null) {
  62.             throw new RuntimeException("字典不能为空");
  63.         }
  64.         boolean isEnd = false;
  65.         int wordLength = 0;
  66.         Map<String, Object> curMap = dictionaryMap;
  67.         int len = text.length();
  68.         // 从文本的第beginIndex开始匹配
  69.         for (int i = beginIndex; i < len; i++) {
  70.             String key = String.valueOf(text.charAt(i));
  71.             // 获取当前key的下一个节点
  72.             curMap = (Map<String, Object>) curMap.get(key);
  73.             if (curMap == null) {
  74.                 break;
  75.             } else {
  76.                 wordLength ++;
  77.                 if ("1".equals(curMap.get("isEnd"))) {
  78.                     isEnd = true;
  79.                 }
  80.             }
  81.         }
  82.         if (!isEnd) {
  83.             wordLength = 0;
  84.         }
  85.         return wordLength;
  86.     }
  87.  
  88.     /**
  89.      * 获取匹配的关键词和命中次数
  90.      * @param text
  91.      * @return
  92.      */
  93.     public static Map<String, Integer> matchWords(String text) {
  94.         Map<String, Integer> wordMap = new HashMap<>();
  95.         int len = text.length();
  96.         for (int i = 0; i < len; i++) {
  97.             int wordLength = checkWord(text, i);
  98.             if (wordLength > 0) {
  99.                 String word = text.substring(i, i + wordLength);
  100.                 // 添加关键词匹配次数
  101.                 if (wordMap.containsKey(word)) {
  102.                     wordMap.put(word, wordMap.get(word) + 1);
  103.                 } else {
  104.                     wordMap.put(word, 1);
  105.                 }
  106.  
  107.                 i += wordLength - 1;
  108.             }
  109.         }
  110.         return wordMap;
  111.     }
  112.  
  113.     public static void main(String[] args) {
  114.         List<String> list = new ArrayList<>();
  115.         list.add("法轮");
  116.         list.add("法轮功");
  117.         list.add("冰毒");
  118.         //初始化敏感词库
  119.         initMap(list);
  120.         String content="我是一个好人，并不会卖冰毒，也不操练法轮功,我真的不卖冰毒";
  121.         //文本中查找是否存在敏感词
  122.         Map<String, Integer> map = matchWords(content);
  123.         System.out.println(map);
  124.     }
  125. }

 

Tess4j案例

①：创建项目导入tess4j对应的依赖

  1. <dependency>
  2.     <groupId>net.sourceforge.tess4j</groupId>
  3.     <artifactId>tess4j</artifactId>
  4.     <version>4.1.1</version>
  5. </dependency>

②：导入中文字体库， 把资料中的tessdata文件夹拷贝到自己的工作空间下

 ③：编写测试类进行测试

  1. package com.heima.tess4j;
  2.  
  3. import net.sourceforge.tess4j.ITesseract;
  4. import net.sourceforge.tess4j.Tesseract;
  5.  
  6. import java.io.File;
  7.  
  8. public class Application {
  9.  
  10.     /**
  11.      * 识别图片中的文字
  12.      * @param args
  13.      */
  14.     public static void main(String[] args) {
  15.         try {
  16.             //创建Tesseract对象
  17.             ITesseract tesseract = new Tesseract();
  18.             //设置字体库路径
  19.             tesseract.setDatapath("C:\\Users\\83825\\Desktop");
  20.             //设置语言 简体中文
  21.             tesseract.setLanguage("chi_sim");
  22.             //获取本地图片
  23.             File file = new File("C:\\Users\\83825\\Desktop\\test6.png");
  24.             //执行ocr识别
  25.             String result = tesseract.doOCR(file);
  26.             //替换回车和tal键  使结果为一行
  27.             result = result.replaceAll("\\r|\\n","-").replaceAll(" ","");
  28.             System.out.println("识别的结果为："+result);
  29.         } catch (Exception e) {
  30.             e.printStackTrace();
  31.         }
  32.     }
  33. }

注意要用全英文路径

 

 

 

 

 

 

 

 

  1. package com.heima.model.schedule.pojos;
  2.  
  3. import com.baomidou.mybatisplus.annotation.*;
  4. import lombok.Data;
  5.  
  6. import java.io.Serializable;
  7. import java.util.Date;
  8.  
  9. /**
  10.  * <p>
  11.  * 
  12.  * </p>
  13.  *
  14.  * @author itheima
  15.  */
  16. @Data
  17. @TableName("taskinfo_logs")
  18. public class TaskinfoLogs implements Serializable {
  19.  
  20.     private static final long serialVersionUID = 1L;
  21.  
  22.     /**
  23.      * 任务id
  24.      */
  25.     @TableId(type = IdType.ID_WORKER)
  26.     private Long taskId;
  27.  
  28.     /**
  29.      * 执行时间
  30.      */
  31.     @TableField("execute_time")
  32.     private Date executeTime;
  33.  
  34.     /**
  35.      * 参数
  36.      */
  37.     @TableField("parameters")
  38.     private byte[] parameters;
  39.  
  40.     /**
  41.      * 优先级
  42.      */
  43.     @TableField("priority")
  44.     private Integer priority;
  45.  
  46.     /**
  47.      * 任务类型
  48.      */
  49.     @TableField("task_type")
  50.     private Integer taskType;
  51.  
  52.     /**
  53.      * 版本号,用乐观锁
  54.      */
  55.     @Version
  56.     private Integer version;
  57.  
  58.     /**
  59.      * 状态 0=int 1=EXECUTED 2=CANCELLED
  60.      */
  61.     @TableField("status")
  62.     private Integer status;
  63.  
  64.  
  65. }

  1. @Service
  2. @Transactional
  3. @Slf4j
  4. public class TaskServiceImpl implements TaskService {
  5.     @Override
  6.     public long addTask(Task task) {
  7.         //1.添加任务到数据库中
  8.         boolean success = addTaskToDb(task);
  9.         if(success){
  10.             //2.添加任务到redis
  11.             addTaskToCache(task);
  12.         }
  13.         return task.getTaskId();
  14.     }
  15.  
  16.     @Autowired
  17.     private CacheService cacheService;
  18.     /**
  19.      * 把任务添加到redis中
  20.      * @param task
  21.      */
  22.     private void addTaskToCache(Task task) {
  23.         String key = task.getTaskType() + "_" + task.getPriority();
  24.         //获取5分钟之后的时间，毫秒值
  25.         Calendar calendar = Calendar.getInstance();
  26.         calendar.add(Calendar.MINUTE,5);
  27.         long nextScheduleTime = calendar.getTimeInMillis();
  28.         if(task.getExecuteTime() <= System.currentTimeMillis()){
  29.             //2.1 如果任务的执行时间小于等于当前时间，存入List
  30.             cacheService.lLeftPush(ScheduleConstants.TOPIC+key, JSON.toJSONString(task));
  31.         }else if(task.getExecuteTime() <= nextScheduleTime){
  32.             //2.2 如果任意的执行时间大于当前时间 && 小于等于预设时间（未来5分钟）存入zset中
  33.             cacheService.zAdd(ScheduleConstants.FUTURE+key,JSON.toJSONString(task),task.getExecuteTime());
  34.         }
  35.     }
  36.  
  37.     @Autowired
  38.     private TaskinfoMapper taskinfoMapper;
  39.  
  40.     @Autowired
  41.     private TaskinfoLogsMapper taskinfoLogsMapper;
  42.  
  43.     /**
  44.      * 添加任务到数据库中
  45.      * @param task
  46.      * @return
  47.      */
  48.     private boolean addTaskToDb(Task task) {
  49.         boolean flag = false;
  50.         try{
  51.             //保存任务表
  52.             Taskinfo taskinfo = new Taskinfo();
  53.             BeanUtils.copyProperties(task,taskinfo);
  54.             taskinfo.setExecuteTime(new Date(task.getExecuteTime()));
  55.             taskinfoMapper.insert(taskinfo);
  56.             //设置taskID
  57.             task.setTaskId(taskinfo.getTaskId());
  58.             //保存任务日志数据
  59.             TaskinfoLogs taskinfoLogs = new TaskinfoLogs();
  60.             BeanUtils.copyProperties(taskinfo,taskinfoLogs);
  61.             taskinfoLogs.setVersion(1);
  62.             taskinfoLogs.setStatus(ScheduleConstants.SCHEDULED);
  63.             taskinfoLogsMapper.insert(taskinfoLogs);
  64.             flag = true;
  65.         }catch (Exception e){
  66.             e.printStackTrace();;
  67.         }
  68.         return flag;
  69.     }
  70. }

  1. /**
  2.      * 取消任务
  3.      * @param taskId
  4.      * @return
  5.      */
  6.     @Override
  7.     public boolean cancelTask(long taskId) {
  8.         boolean flag = false;
  9.         //删除任务，更新任务日志
  10.         Task task = updateDb(taskId,ScheduleConstants.CANCELLED);
  11.         //删除redis的数据
  12.         if (task != null){
  13.             removeTaskFromCache(task);
  14.             flag = true;
  15.         }
  16.         return flag;
  17.     }
  18.  
  19.     /**
  20.      * 删除redis中的数据
  21.      * @param task
  22.      */
  23.     private void removeTaskFromCache(Task task) {
  24.         String key = task.getTaskType() + "_" + task.getPriority();
  25.         if(task.getExecuteTime() <= System.currentTimeMillis()){
  26.             cacheService.lRemove(ScheduleConstants.TOPIC + key,0,JSON.toJSONString(task));
  27.         }else{
  28.             cacheService.zRemove(ScheduleConstants.FUTURE + key,JSON.toJSONString(task));
  29.         }
  30.     }
  31.  
  32.     /**
  33.      * 删除任务，更新任务日志
  34.      * @param taskId
  35.      * @param status
  36.      * @return
  37.      */
  38.     private Task updateDb(long taskId, int status) {
  39.         Task task = new Task();
  40.         try{
  41.             //删除任务
  42.             taskinfoMapper.deleteById(taskId);
  43.             //更新任务日志
  44.             TaskinfoLogs taskinfoLogs = taskinfoLogsMapper.selectById(taskId);
  45.             taskinfoLogs.setStatus(status);
  46.             taskinfoLogsMapper.updateById(taskinfoLogs);
  47.             BeanUtils.copyProperties(taskinfoLogs,task);
  48.             task.setExecuteTime(taskinfoLogs.getExecuteTime().getTime());
  49.         }catch (Exception e){
  50.             log.error("task cancel exception taskId={}",taskId);
  51.         }
  52.         return task;
  53.     }

  1. /**
  2.      * 按照类型和优先级拉取任务
  3.      * @param type
  4.      * @param priority
  5.      * @return
  6.      */
  7.     @Override
  8.     public Task poil(int type, int priority) {
  9.         Task task = new Task();
  10.         try{
  11.             String key = type + "_" + priority;
  12.             //从redis中拉取数据 pop
  13.             String task_json = cacheService.lRightPop(ScheduleConstants.TOPIC + key);
  14.             if(StringUtils.isNotBlank(task_json)){
  15.                 task = JSON.parseObject(task_json, Task.class);
  16.                 //修改数据库信息
  17.                 updateDb(task.getTaskId(),ScheduleConstants.EXECUTED);
  18.             }
  19.         }catch (Exception e){
  20.             e.printStackTrace();
  21.             log.error("poll task exception");
  22.         }
  23.         return task;
  24.     }

 

  1. @Test
  2.     public void testKeys(){
  3.         Set<String> keys = cacheService.keys("future_*");
  4.         System.out.println(keys);
  5.  
  6.         Set<String> scan = cacheService.scan("future_*");
  7.         System.out.println(scan);
  8.  
  9.     }

 

  1. //耗时6151
  2.     @Test
  3.     public  void testPiple1(){
  4.         long start =System.currentTimeMillis();
  5.         for (int i = 0; i <10000 ; i++) {
  6.             Task task = new Task();
  7.             task.setTaskType(1001);
  8.             task.setPriority(1);
  9.             task.setExecuteTime(new Date().getTime());
  10.             cacheService.lLeftPush("1001_1", JSON.toJSONString(task));
  11.         }
  12.         System.out.println("耗时"+(System.currentTimeMillis()- start));
  13.     }
  14.  
  15.     //1472毫秒
  16.     @Test
  17.     public void testPiple2(){
  18.         long start  = System.currentTimeMillis();
  19.         //使用管道技术
  20.         List<Object> objectList = cacheService.getstringRedisTemplate().executePipelined(new RedisCallback<Object>() {
  21.             @Nullable
  22.             @Override
  23.             public Object doInRedis(RedisConnection redisConnection) throws DataAccessException {
  24.                 for (int i = 0; i <10000 ; i++) {
  25.                     Task task = new Task();
  26.                     task.setTaskType(1001);
  27.                     task.setPriority(1);
  28.                     task.setExecuteTime(new Date().getTime());
  29.                     redisConnection.lPush("1001_1".getBytes(), JSON.toJSONString(task).getBytes());
  30.                 }
  31.                 return null;
  32.             }
  33.         });
  34.         System.out.println("使用管道技术执行10000次自增操作共耗时:"+(System.currentTimeMillis()-start)+"毫秒");
  35.     }

 

  1. /**
  2.      * 未来数据定时刷新
  3.      */
  4.     @Scheduled(cron = "0 */1 * * * ?")
  5.     public void refresh(){
  6.         log.info("未来数据定时刷新---定时任务");
  7.         //获取所有未来数据的集合key
  8.         Set<String> futureKeys = cacheService.scan(ScheduleConstants.FUTURE + "*");
  9.         for (String futureKey : futureKeys) {//future_100_50
  10.             //获取当前数据的key topic
  11.             String topicKey = ScheduleConstants.TOPIC+futureKey.split(ScheduleConstants.FUTURE)[1];
  12.  
  13.             //按照key和分值查询符合条件的数据
  14.             Set<String> tasks = cacheService.zRangeByScore(futureKey, 0, System.currentTimeMillis());
  15.  
  16.             //同步数据
  17.             if(!tasks.isEmpty()){
  18.                 cacheService.refreshWithPipeline(futureKey,topicKey,tasks);
  19.                 log.info("成功的将"+futureKey+"刷新到了"+topicKey);
  20.             }
  21.         }
  22.     }
  1. public List<Object> refreshWithPipeline(String future_key,String topic_key,Collection<String> values){
  2.  
  3.         List<Object> objects = stringRedisTemplate.executePipelined(new RedisCallback<Object>() {
  4.             @Nullable
  5.             @Override
  6.             public Object doInRedis(RedisConnection redisConnection) throws DataAccessException {
  7.                 StringRedisConnection stringRedisConnection = (StringRedisConnection)redisConnection;
  8.                 String[] strings = values.toArray(new String[values.size()]);
  9.                 stringRedisConnection.rPush(topic_key,strings);
  10.                 stringRedisConnection.zRem(future_key,strings);
  11.                 return null;
  12.             }
  13.         });
  14.         return objects;
  15.     }
  1. @SpringBootApplication
  2. @MapperScan("com.heima.schedule.mapper")
  3. @EnableScheduling //开启定时任务注解
  4. public class ScheduleApplication {
  5.  
  6.     public static void main(String[] args) {
  7.         SpringApplication.run(ScheduleApplication.class,args);
  8.     }
  9.  
  10.     /**
  11.      * mybatis-plus乐观锁支持
  12.      * @return
  13.      */
  14.     @Bean
  15.     public MybatisPlusInterceptor optimisticLockerInterceptor(){
  16.         MybatisPlusInterceptor interceptor = new MybatisPlusInterceptor();
  17.         interceptor.addInnerInterceptor(new OptimisticLockerInnerInterceptor());
  18.         return interceptor;
  19.     }
  20. }

  1. /**
  2.      * 加锁
  3.      *
  4.      * @param name
  5.      * @param expire 过期的时间
  6.      * @return
  7.      */
  8.     public String tryLock(String name, long expire) {
  9.         name = name + "_lock";
  10.         String token = UUID.randomUUID().toString();
  11.         RedisConnectionFactory factory = stringRedisTemplate.getConnectionFactory();
  12.         RedisConnection conn = factory.getConnection();
  13.         try {
  14.  
  15.             //参考redis命令：
  16.             //set key value [EX seconds] [PX milliseconds] [NX|XX]
  17.             Boolean result = conn.set(
  18.                     name.getBytes(),
  19.                     token.getBytes(),
  20.                     Expiration.from(expire, TimeUnit.MILLISECONDS),
  21.                     RedisStringCommands.SetOption.SET_IF_ABSENT //NX
  22.             );
  23.             if (result != null && result)
  24.                 return token;
  25.         } finally {
  26.             RedisConnectionUtils.releaseConnection(conn, factory,false);
  27.         }
  28.         return null;
  29.     }
  1. /**
  2.      * 未来数据定时刷新
  3.      */
  4.     @Scheduled(cron = "0 */1 * * * ?")
  5.     public void refresh(){
  6.         String token = cacheService.tryLock("FUTRUE_TASK_SYNC",1000 * 30);
  7.         if(StringUtils.isNotBlank(token)){
  8.             log.info("未来数据定时刷新---定时任务");
  9.             //获取所有未来数据的集合key
  10.             Set<String> futureKeys = cacheService.scan(ScheduleConstants.FUTURE + "*");
  11.             for (String futureKey : futureKeys) {//future_100_50
  12.                 //获取当前数据的key topic
  13.                 String topicKey = ScheduleConstants.TOPIC+futureKey.split(ScheduleConstants.FUTURE)[1];
  14.  
  15.                 //按照key和分值查询符合条件的数据
  16.                 Set<String> tasks = cacheService.zRangeByScore(futureKey, 0, System.currentTimeMillis());
  17.  
  18.                 //同步数据
  19.                 if(!tasks.isEmpty()){
  20.                     cacheService.refreshWithPipeline(futureKey,topicKey,tasks);
  21.                     log.info("成功的将"+futureKey+"刷新到了"+topicKey);
  22.                 }
  23.  
  24.             }
  25.         }
  26.     }

  1. /**
  2.      * 数据库任务定时同步到redis中
  3.      */
  4.     @PostConstruct
  5.     @Scheduled(cron = "0 */5 * * * ?")
  6.     public void reloadData(){
  7.         //清理缓存中的数据 list zset
  8.         clearCache();
  9.         //查询小于未来5分钟的所有任务
  10.         Calendar calendar = Calendar.getInstance();
  11.         calendar.add(Calendar.MINUTE,5);
  12.         List<Taskinfo> taskinfoList = taskinfoMapper.selectList(Wrappers.<Taskinfo>lambdaQuery().lt(Taskinfo::getExecuteTime,calendar.getTime()));
  13.         //新增任务到redis
  14.         if(taskinfoList != null&&taskinfoList.size() > 0) {
  15.             for (Taskinfo taskinfo : taskinfoList) {
  16.                 Task task = new Task();
  17.                 BeanUtils.copyProperties(taskinfo, task);
  18.                 task.setExecuteTime(taskinfo.getExecuteTime().getTime());
  19.                 addTaskToCache(task);
  20.             }
  21.         }
  22.         log.info("数据库的任务同步到了redis");
  23.     }
  24.  
  25.     /**
  26.      * 清理缓存中的数据
  27.      */
  28.     public void clearCache(){
  29.         Set<String> topicKeys = cacheService.scan(ScheduleConstants.TOPIC + "*");
  30.         Set<String> futureKeys = cacheService.scan(ScheduleConstants.FUTURE + "*");
  31.         cacheService.delete(topicKeys);
  32.         cacheService.delete(futureKeys);
  33.     }

  1. package com.heima.utils.common;
  2.  
  3.  
  4. import com.heima.model.wemedia.pojos.WmNews;
  5. import io.protostuff.LinkedBuffer;
  6. import io.protostuff.ProtostuffIOUtil;
  7. import io.protostuff.Schema;
  8. import io.protostuff.runtime.RuntimeSchema;
  9.  
  10. public class ProtostuffUtil {
  11.  
  12.     /**
  13.      * 序列化
  14.      * @param t
  15.      * @param <T>
  16.      * @return
  17.      */
  18.     public static <T> byte[] serialize(T t){
  19.         Schema schema = RuntimeSchema.getSchema(t.getClass());
  20.         return ProtostuffIOUtil.toByteArray(t,schema,
  21.                 LinkedBuffer.allocate(LinkedBuffer.DEFAULT_BUFFER_SIZE));
  22.  
  23.     }
  24.  
  25.     /**
  26.      * 反序列化
  27.      * @param bytes
  28.      * @param c
  29.      * @param <T>
  30.      * @return
  31.      */
  32.     public static <T> T deserialize(byte []bytes,Class<T> c) {
  33.         T t = null;
  34.         try {
  35.             t = c.newInstance();
  36.             Schema schema = RuntimeSchema.getSchema(t.getClass());
  37.              ProtostuffIOUtil.mergeFrom(bytes,t,schema);
  38.         } catch (InstantiationException e) {
  39.             e.printStackTrace();
  40.         } catch (IllegalAccessException e) {
  41.             e.printStackTrace();
  42.         }
  43.         return t;
  44.     }
  45.  
  46.     /**
  47.      * jdk序列化与protostuff序列化对比
  48.      * @param args
  49.      */
  50.     public static void main(String[] args) {
  51.         long start =System.currentTimeMillis();
  52.         for (int i = 0; i <1000000 ; i++) {
  53.             WmNews wmNews =new WmNews();
  54.             JdkSerializeUtil.serialize(wmNews);
  55.         }
  56.         System.out.println(" jdk 花费 "+(System.currentTimeMillis()-start));
  57.  
  58.         start =System.currentTimeMillis();
  59.         for (int i = 0; i <1000000 ; i++) {
  60.             WmNews wmNews =new WmNews();
  61.             ProtostuffUtil.serialize(wmNews);
  62.         }
  63.         System.out.println(" protostuff 花费 "+(System.currentTimeMillis()-start));
  64.     }
  65.  
  66.  
  67.  
  68. }
WmNewsServiceImpl
  1. @Override
  2.     public ResponseResult submit(WmNewsDto dto) {
  3.         ......
  4.         //审核文章
  5.         //wmNewsAutoScanService.autoScanWmNews(wmNews.getId());
  6.         wmNewsTaskService.addNewsToTask(wmNews.getId(),wmNews.getPublishTime());
  7.         return ResponseResult.okResult(AppHttpCodeEnum.SUCCESS);
  8.     }
WmNewsTaskServiceImpl
  1. @Service
  2. @Slf4j
  3. public class WmNewsTaskServiceImpl implements WmNewsTaskService {
  4.     @Autowired
  5.     private IScheduleClient scheduleClient;
  6.     /**
  7.      * 添加任务到延迟队列中
  8.      * @param id 文章id
  9.      * @param publishTime 发布的时间 可以作为任务的执行时间
  10.      */
  11.     @Override
  12.     @Async
  13.     public void addNewsToTask(Integer id, Date publishTime) {
  14.         log.info("添加任务到延迟服务中------begin");
  15.         Task task = new Task();
  16.         task.setExecuteTime(publishTime.getTime());
  17.         task.setTaskType(TaskTypeEnum.NEWS_SCAN_TIME.getTaskType());
  18.         task.setPriority(TaskTypeEnum.NEWS_SCAN_TIME.getPriority());
  19.         WmNews wmNews = new WmNews();
  20.         wmNews.setId(id);
  21.         task.setParameters(ProtostuffUtil.serialize(wmNews));
  22.         scheduleClient.addTask(task);
  23.         log.info("添加任务到延迟服务中------end");
  24.     }
  25.  
  26.     @Autowired
  27.     private WmNewsAutoScanService wmNewsAutoScanService;
  28.     /**
  29.      * 消费任务，审核文章
  30.      */
  31.     @Scheduled(fixedRate = 1000)
  32.     @Override
  33.     public void scanNewsByTask() {
  34.         log.info("消费任务，审核文章");
  35.         ResponseResult responseResult = scheduleClient.poll(TaskTypeEnum.NEWS_SCAN_TIME.getTaskType(), TaskTypeEnum.NEWS_SCAN_TIME.getPriority());
  36.         if(responseResult.getCode().equals(200) && responseResult.getData() != null){
  37.             Task task = JSON.parseObject(JSON.toJSONString(responseResult.getData()),Task.class);
  38.             WmNews wmNews = ProtostuffUtil.deserialize(task.getParameters(),WmNews.class);
  39.             wmNewsAutoScanService.autoScanWmNews(wmNews.getId());
  40.  
  41.         }
  42.     }
  43.  
  44. }

 遇到问题：

java: Annotation processing is not supported for module cycles. Please ensure that all modules from cycle [heima-leadnews-schedule,heima-leadnews-feign-api] are excluded from annotation processing

原因：heima-leadnews-feign-api需要heima-leadnews-schedule里面的一个task类，heima-leadnews-schedule需要实现heima-leadnews-feign-api的接口，从而导致形成了循环依赖，即heima-leadnews-feign-api依赖heima-leadnews-schedule，heima-leadnews-schedule也依赖了heima-leadnews-feign-api。

解决：将heima-leadnews-schedule里面的这个task类抽出来放到第三个专门管理类的模块，然后两个模块都去引用它，引用一个第三方模块来专门管理类可以避免循环依赖。

 

kafka安装配置

Kafka对于zookeeper是强依赖，保存kafka相关的节点数据，所以安装Kafka之前必须先安装zookeeper

  • Docker安装zookeeper

下载镜像：

docker pull zookeeper:3.4.14

创建容器

docker run -d --name zookeeper -p 2181:2181 zookeeper:3.4.14

  • Docker安装kafka

下载镜像：

docker pull wurstmeister/kafka:2.12-2.3.1

创建容器

  1. docker run -d --name kafka \
  2. --env KAFKA_ADVERTISED_HOST_NAME=192.168.136.152 \
  3. --env KAFKA_ZOOKEEPER_CONNECT=192.168.136.152:2181 \
  4. --env KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://192.168.136.152:9092 \
  5. --env KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9092 \
  6. --env KAFKA_HEAP_OPTS="-Xmx256M -Xms256M" \
  7. --net=host wurstmeister/kafka:2.12-2.3.1

 

消息生产者

  1. package com.heima.kafka.sample;
  2.  
  3.  
  4. import org.apache.kafka.clients.producer.KafkaProducer;
  5. import org.apache.kafka.clients.producer.ProducerConfig;
  6. import org.apache.kafka.clients.producer.ProducerRecord;
  7.  
  8. import java.util.Properties;
  9.  
  10. /**
  11.  * 生产者
  12.  */
  13. public class ProducerQuickStart {
  14.  
  15.     public static void main(String[] args) {
  16.         //1.kafka连接配置信息
  17.         Properties properties = new Properties();
  18.         //kafka的连接地址
  19.         properties.put(ProducerConfig.BOOTSTRAP_SERVERS_CONFIG,"192.168.136.152:9092");
  20.         //key和value的序列化
  21.         properties.put(ProducerConfig.KEY_SERIALIZER_CLASS_CONFIG,"org.apache.kafka.common.serialization.StringSerializer");
  22.         properties.put(ProducerConfig.VALUE_SERIALIZER_CLASS_CONFIG,"org.apache.kafka.common.serialization.StringSerializer");
  23.         //2.创建生产者对象
  24.         KafkaProducer<String,String> producer = new KafkaProducer<String, String>(properties);
  25.         //3.发送消息
  26.         /**
  27.          * 第一个参数：topic
  28.          * 第二个参数：消息的key
  29.          * 第三个参数：消息的value
  30.          */
  31.         ProducerRecord<String,String> kvProducerRecord = new ProducerRecord<String,String>("topic-first","key-001","hello kafka");
  32.         producer.send(kvProducerRecord);
  33.         System.out.println("消息发送成功");
  34.         //4.关闭消息通道 必须要关闭，否则消息发送不成功
  35.         producer.close();
  36.     }
  37. }

消息消费者

  1. package com.heima.kafka.sample;
  2.  
  3. import org.apache.kafka.clients.consumer.ConsumerConfig;
  4. import org.apache.kafka.clients.consumer.ConsumerRecord;
  5. import org.apache.kafka.clients.consumer.ConsumerRecords;
  6. import org.apache.kafka.clients.consumer.KafkaConsumer;
  7.  
  8. import java.time.Duration;
  9. import java.util.Collections;
  10. import java.util.Properties;
  11.  
  12. /**
  13.  * 消费者
  14.  */
  15. public class ConsumerQuickStart {
  16.  
  17.     public static void main(String[] args) {
  18.         //1.kafka的配置信息
  19.         Properties properties = new Properties();
  20.         //连接地址
  21.         properties.put(ConsumerConfig.BOOTSTRAP_SERVERS_CONFIG,"192.168.136.152:9092");
  22.         //反序列化的key和value
  23.         properties.put(ConsumerConfig.KEY_DESERIALIZER_CLASS_CONFIG,"org.apache.kafka.common.serialization.StringDeserializer");
  24.         properties.put(ConsumerConfig.VALUE_DESERIALIZER_CLASS_CONFIG,"org.apache.kafka.common.serialization.StringDeserializer");
  25.         //设置消费者组
  26.         properties.put(ConsumerConfig.GROUP_ID_CONFIG,"gruop1");
  27.         //2.创建消费者对象
  28.         KafkaConsumer<String,String> consumer = new KafkaConsumer<String,String>(properties);
  29.         //3.订阅主题
  30.         consumer.subscribe(Collections.singletonList("topic-first"));
  31.         //4.拉取消息 每一秒钟拉取一次
  32.         while(true){ //模拟正在监听状态
  33.             ConsumerRecords<String, String> consumerRecords = consumer.poll(Duration.ofMillis(1000));
  34.             for (ConsumerRecord<String, String> consumerRecord : consumerRecords) {
  35.                 System.out.println(consumerRecord.key());
  36.                 System.out.println(consumerRecord.value());
  37.             }
  38.         }
  39.     }
  40. }

遇到问题：如果没有传输成功，需要关闭服务器的防火墙，将kafka的访问端口暴露出来

 

 

 

 

 

 

  1. package com.heima.kafka.sample;
  2.  
  3.  
  4. import org.apache.kafka.clients.producer.*;
  5.  
  6. import java.util.Properties;
  7. import java.util.concurrent.ExecutionException;
  8.  
  9. /**
  10.  * 生产者
  11.  */
  12. public class ProducerQuickStart {
  13.  
  14.     public static void main(String[] args) throws ExecutionException, InterruptedException {
  15.         //1.kafka连接配置信息
  16.         Properties properties = new Properties();
  17.         //kafka的连接地址
  18.         properties.put(ProducerConfig.BOOTSTRAP_SERVERS_CONFIG,"192.168.136.152:9092");
  19.         //key和value的序列化
  20.         properties.put(ProducerConfig.KEY_SERIALIZER_CLASS_CONFIG,"org.apache.kafka.common.serialization.StringSerializer");
  21.         properties.put(ProducerConfig.VALUE_SERIALIZER_CLASS_CONFIG,"org.apache.kafka.common.serialization.StringSerializer");
  22.         //ack配置，消息确认机制
  23.         properties.put(ProducerConfig.ACKS_CONFIG,"all");
  24.         //设置重试次数
  25.         properties.put(ProducerConfig.RETRIES_CONFIG,10);
  26.         //消息压缩
  27.         properties.put(ProducerConfig.COMPRESSION_TYPE_CONFIG,"lz4");
  28.         //2.创建生产者对象
  29.         KafkaProducer<String,String> producer = new KafkaProducer<String, String>(properties);
  30.         //3.发送消息
  31.         /**
  32.          * 第一个参数：topic
  33.          * 第二个参数：消息的key
  34.          * 第三个参数：消息的value
  35.          */
  36.         ProducerRecord<String,String> kvProducerRecord = new ProducerRecord<String,String>("topic-first","hello kafka");
  37.         //同步发送消息
  38.         //RecordMetadata recordMetadata = producer.send(kvProducerRecord).get();
  39.         //System.out.println(recordMetadata.offset());//获取偏移量
  40.         //异步发送消息
  41.         producer.send(kvProducerRecord, new Callback() {
  42.             @Override
  43.             public void onCompletion(RecordMetadata recordMetadata, Exception e) {
  44.                 if (e!=null){
  45.                     System.out.println("记录异常信息到日志表中");
  46.                 }
  47.                 System.out.println(recordMetadata.offset());
  48.             }
  49.         });
  50.  
  51.         System.out.println("消息发送成功");
  52.         //4.关闭消息通道 必须要关闭，否则消息发送不成功
  53.         producer.close();
  54.     }
  55. }

 

 

 

  1. package com.heima.kafka.sample;
  2.  
  3. import org.apache.kafka.clients.consumer.*;
  4. import org.apache.kafka.common.TopicPartition;
  5.  
  6. import java.time.Duration;
  7. import java.util.Collections;
  8. import java.util.Map;
  9. import java.util.Properties;
  10.  
  11. /**
  12.  * 消费者
  13.  */
  14. public class ConsumerQuickStart {
  15.  
  16.     public static void main(String[] args) {
  17.         //1.kafka的配置信息
  18.         Properties properties = new Properties();
  19.         //连接地址
  20.         properties.put(ConsumerConfig.BOOTSTRAP_SERVERS_CONFIG,"192.168.136.152:9092");
  21.         //反序列化的key和value
  22.         properties.put(ConsumerConfig.KEY_DESERIALIZER_CLASS_CONFIG,"org.apache.kafka.common.serialization.StringDeserializer");
  23.         properties.put(ConsumerConfig.VALUE_DESERIALIZER_CLASS_CONFIG,"org.apache.kafka.common.serialization.StringDeserializer");
  24.         //设置消费者组
  25.         properties.put(ConsumerConfig.GROUP_ID_CONFIG,"gruop1");
  26.         //手动提交偏移量
  27.         properties.put(ConsumerConfig.ENABLE_AUTO_COMMIT_CONFIG,"false");
  28.         //2.创建消费者对象
  29.         KafkaConsumer<String,String> consumer = new KafkaConsumer<String,String>(properties);
  30.         //3.订阅主题
  31.         consumer.subscribe(Collections.singletonList("topic-first"));
  32.         //4.拉取消息 每一秒钟拉取一次
  33.         //同步提交和异步提交偏移量
  34.         try{
  35.             while(true) { //模拟正在监听状态
  36.                 ConsumerRecords<String, String> consumerRecords = consumer.poll(Duration.ofMillis(1000));
  37.                 for (ConsumerRecord<String, String> consumerRecord : consumerRecords) {
  38.                     System.out.println(consumerRecord.key());
  39.                     System.out.println(consumerRecord.value());
  40.                     System.out.println(consumerRecord.offset());
  41.                     System.out.println(consumerRecord.partition());
  42.                 }
  43.                 //异步提交偏移量
  44.                 consumer.commitAsync();
  45.             }
  46.         }catch (Exception e){
  47.             e.printStackTrace();
  48.             System.out.println("记录错误的信息："+e);
  49.         }finally {
  50.             //同步
  51.             consumer.commitSync();
  52.         }
  53.  
  54.         //while(true){ //模拟正在监听状态
  55.         //    ConsumerRecords<String, String> consumerRecords = consumer.poll(Duration.ofMillis(1000));
  56.         //    for (ConsumerRecord<String, String> consumerRecord : consumerRecords) {
  57.         //        System.out.println(consumerRecord.key());
  58.         //        System.out.println(consumerRecord.value());
  59.         //        System.out.println(consumerRecord.offset());
  60.         //        //System.out.println(consumerRecord.partition());
  61.         //        //try{
  62.         //        //    //同步提交偏移量
  63.         //        //    consumer.commitSync();
  64.         //        //}catch (CommitFailedException e){
  65.         //        //    System.out.println("记录提交失败的异常："+ e);
  66.         //        //}
  67.         //        //异步提交当前最新的偏移量
  68.         //        //consumer.commitAsync(new OffsetCommitCallback() {
  69.         //        //    @Override
  70.         //        //    public void onComplete(Map<TopicPartition, OffsetAndMetadata> map, Exception e) {
  71.         //        //        if(e!=null){
  72.         //        //            System.out.println("记录错误的提交偏移量："+map+",异常信息"+e);
  73.         //        //        }
  74.         //        //    }
  75.         //        //});
  76.         //    }
  77.         //}
  78.     }
  79. }

 

搭建ElasticSearch环境

拉取镜像

docker pull elasticsearch:7.4.0

创建容器

docker run -id --name elasticsearch -d --restart=always -p 9200:9200 -p 9300:9300 -v /usr/share/elasticsearch/plugins:/usr/share/elasticsearch/plugins -e "discovery.type=single-node" elasticsearch:7.4.0

配置中文分词器 ik

因为在创建elasticsearch容器的时候，映射了目录，所以可以在宿主机上进行配置ik中文分词器

在去选择ik分词器的时候，需要与elasticsearch的版本好对应上

把资料中的elasticsearch-analysis-ik-7.4.0.zip上传到服务器上,放到对应目录（plugins）解压

  1. #切换目录
  2. cd /usr/share/elasticsearch/plugins
  3. #新建目录
  4. mkdir analysis-ik
  5. cd analysis-ik
  6. #root根目录中拷贝文件
  7. mv elasticsearch-analysis-ik-7.4.0.zip /usr/share/elasticsearch/plugins/analysis-ik
  8. #解压文件
  9. cd /usr/share/elasticsearch/plugins/analysis-ik
  10. unzip elasticsearch-analysis-ik-7.4.0.zip

2.4) 使用postman测试

创建索引和映射

使用postman添加映射

put请求 ： http://192.168.200.152:9200/app_info_article

  1. {
  2.     "mappings":{
  3.         "properties":{
  4.             "id":{
  5.                 "type":"long"
  6.             },
  7.             "publishTime":{
  8.                 "type":"date"
  9.             },
  10.             "layout":{
  11.                 "type":"integer"
  12.             },
  13.             "images":{
  14.                 "type":"keyword",
  15.                 "index": false
  16.             },
  17.             "staticUrl":{
  18.                 "type":"keyword",
  19.                 "index": false
  20.             },
  21.             "authorId": {
  22.                 "type": "long"
  23.             },
  24.             "authorName": {
  25.                 "type": "text"
  26.             },
  27.             "title":{
  28.                 "type":"text",
  29.                 "analyzer":"ik_smart"
  30.             },
  31.             "content":{
  32.                 "type":"text",
  33.                 "analyzer":"ik_smart"
  34.             }
  35.         }
  36.     }
  37. }

 GET请求查询映射：http://192.168.200.130:9200/app_info_article

DELETE请求，删除索引及映射：http://192.168.200.130:9200/app_info_article

GET请求，查询所有文档：http://192.168.200.130:9200/app_info_article/_search

搭建搜索微服务

 

在heima-leadnews-service的pom中添加依赖

  1. <!--elasticsearch-->
  2. <dependency>
  3.     <groupId>org.elasticsearch.client</groupId>
  4.     <artifactId>elasticsearch-rest-high-level-client</artifactId>
  5.     <version>7.4.0</version>
  6. </dependency>
  7. <dependency>
  8.     <groupId>org.elasticsearch.client</groupId>
  9.     <artifactId>elasticsearch-rest-client</artifactId>
  10.     <version>7.4.0</version>
  11. </dependency>
  12. <dependency>
  13.     <groupId>org.elasticsearch</groupId>
  14.     <artifactId>elasticsearch</artifactId>
  15.     <version>7.4.0</version>
  16. </dependency>

（3）nacos配置中心leadnews-search

  1. spring:
  2.   autoconfigure:
  3.     exclude: org.springframework.boot.autoconfigure.jdbc.DataSourceAutoConfiguration
  4. elasticsearch:
  5.   host: 192.168.136.152
  6.   port: 9200
  1. @SpringBootTest
  2. @RunWith(SpringRunner.class)
  3. public class ApArticleTest {
  4.  
  5.     @Autowired
  6.     private ApArticleMapper apArticleMapper;
  7.  
  8.     @Autowired
  9.     private RestHighLevelClient restHighLevelClient;
  10.  
  11.     /**
  12.      * 注意：数据量的导入，如果数据量过大，需要分页导入
  13.      * @throws Exception
  14.      */
  15.     @Test
  16.     public void init() throws Exception {
  17.         //1.查询所有符合条件的文章
  18.         List<SearchArticleVo> searchArticleVos = apArticleMapper.loadArticleList();
  19.         //2.批量导入到es索引库
  20.         BulkRequest bulkRequest = new BulkRequest("app_info_article");
  21.         for (SearchArticleVo searchArticleVo : searchArticleVos) {
  22.             IndexRequest indexRequest = new IndexRequest().id(searchArticleVo.getId().toString())
  23.                     .source(JSON.toJSONString(searchArticleVo), XContentType.JSON);
  24.             //批量添加对象
  25.             bulkRequest.add(indexRequest);
  26.         }
  27.         BulkResponse response = restHighLevelClient.bulk(bulkRequest, RequestOptions.DEFAULT);
  28.         System.out.println("插入结果:" + response.status());
  29.     }
  30. }

ArticleSearchServiceImpl
  1. @Service
  2. @Slf4j
  3. public class ArticleSearchServiceImpl implements ArticleSearchService {
  4.  
  5.     @Autowired
  6.     private RestHighLevelClient restHighLevelClient;
  7.  
  8.  
  9.     @Override
  10.     public ResponseResult search(UserSearchDto dto) throws IOException {
  11.         //1.检查参数
  12.         if(dto == null || StringUtils.isBlank(dto.getSearchWords())){
  13.             return ResponseResult.errorResult(AppHttpCodeEnum.PARAM_INVALID);
  14.         }
  15.         //2.构建查询执行查询
  16.         SearchRequest searchRequest = new SearchRequest("app_info_article");
  17.         SearchSourceBuilder searchSourceBuilder = new SearchSourceBuilder();
  18.  
  19.         //布尔查询（条件不只有一个）
  20.         BoolQueryBuilder boolQueryBuilder = QueryBuilders.boolQuery();
  21.  
  22.         //关键词的分词之后查询
  23.         QueryStringQueryBuilder queryStringQueryBuilder = QueryBuilders.queryStringQuery(dto.getSearchWords())
  24.                 .field("title").field("content").defaultOperator(Operator.OR);
  25.         boolQueryBuilder.must(queryStringQueryBuilder);
  26.  
  27.         //查询小于mindate的数据
  28.         if(dto.getMinBehotTime()!=null){
  29.             RangeQueryBuilder rangeQueryBuilder = QueryBuilders.rangeQuery("publishTime")
  30.                     .lt(dto.getMinBehotTime().getTime());
  31.             boolQueryBuilder.filter(rangeQueryBuilder);
  32.         }
  33.         //分页查询
  34.         searchSourceBuilder.from(0);
  35.         searchSourceBuilder.size(dto.getPageSize());
  36.  
  37.         //按照发布时间倒序查询
  38.         searchSourceBuilder.sort("publishTime", SortOrder.DESC);
  39.  
  40.         //设置高亮 title
  41.         HighlightBuilder highlightBuilder = new HighlightBuilder();
  42.         highlightBuilder.field("title");
  43.         highlightBuilder.preTags("<font style='color: red; font-size: inherit;'>");
  44.         highlightBuilder.postTags("</font>");
  45.         searchSourceBuilder.highlighter(highlightBuilder);
  46.  
  47.         searchSourceBuilder.query(boolQueryBuilder);
  48.         searchRequest.source(searchSourceBuilder);
  49.         SearchResponse searchResponse = restHighLevelClient.search(searchRequest, RequestOptions.DEFAULT);
  50.  
  51.         //3.结果封装返回
  52.         List<Map> list = new ArrayList<>();
  53.  
  54.         SearchHit[] hits = searchResponse.getHits().getHits();
  55.         for (SearchHit hit : hits) {
  56.             String json = hit.getSourceAsString();
  57.             Map map = JSON.parseObject(json, Map.class);
  58.             //处理高亮
  59.             if(hit.getHighlightFields() != null && hit.getHighlightFields().size() > 0){
  60.                 Text[] titles = hit.getHighlightFields().get("title").getFragments();
  61.                 String title = StringUtils.join(titles);
  62.                 //高亮标题
  63.                 map.put("h_title",title);
  64.             }else{
  65.                 //原始标题
  66.                 map.put("h_title",map.get("title"));
  67.             }
  68.             list.add(map);
  69.         }
  70.         return ResponseResult.okResult(list);
  71.     }
  72. }

 

MongoDB安装及集成

4.3.1)安装MongoDB

拉取镜像

docker pull mongo

创建容器

docker run -di --name mongo-service --restart=always -p 27017:27017 -v ~/data/mongodata:/data mongo

4.3.2)导入资料中的mongo-demo项目到heima-leadnews-test中

其中有三项配置比较关键：

第一：mongo依赖

  1. <dependency>
  2.     <groupId>org.springframework.boot</groupId>
  3.     <artifactId>spring-boot-starter-data-mongodb</artifactId>
  4. </dependency>

第二：mongo配置

  1. server:
  2.   port: 9998
  3. spring:
  4.   data:
  5.     mongodb:
  6.       host: 192.168.200.130
  7.       port: 27017
  8.       database: leadnews-history

第三：映射

  1. package com.itheima.mongo.pojo;
  2. ​
  3. import lombok.Data;
  4. import org.springframework.data.mongodb.core.mapping.Document;
  5. ​
  6. import java.io.Serializable;
  7. import java.util.Date;
  8. ​
  9. /**
  10.  * <p>
  11.  * 联想词表
  12.  * </p>
  13.  *
  14.  * @author itheima
  15.  */
  16. @Data
  17. @Document("ap_associate_words")
  18. public class ApAssociateWords implements Serializable {
  19. ​
  20.     private static final long serialVersionUID = 1L;
  21. ​
  22.     private String id;
  23. ​
  24.     /**
  25.      * 联想词
  26.      */
  27.     private String associateWords;
  28. ​
  29.     /**
  30.      * 创建时间
  31.      */
  32.     private Date createdTime;
  33. ​
  34. }

 

 

 

@Async的作用就是异步处理任务
1.在方法上添加@Async，表示此方法是异步方法

2.在类上添加@Async，表示类中的所有方法都是异步方法

3.使用此注解的类，必须是Spring管理的类
4.需要在启动类或配置类中加入@EnableAsync注解，@Async才会生效; 

 

 

 

 

 

 

 

 

 创建xxljob-demo项目，导入依赖

  1. <dependencies>
  2.     <dependency>
  3.         <groupId>org.springframework.boot</groupId>
  4.         <artifactId>spring-boot-starter-web</artifactId>
  5.     </dependency>
  6. ​
  7.     <!--xxl-job-->
  8.     <dependency>
  9.         <groupId>com.xuxueli</groupId>
  10.         <artifactId>xxl-job-core</artifactId>
  11.         <version>2.3.0</version>
  12.     </dependency>
  13. </dependencies>

application.yml配置

  1. server:
  2.   port: 8881
  3. ​
  4. ​
  5. xxl:
  6.   job:
  7.     admin:
  8.       addresses: http://192.168.200.130:8888/xxl-job-admin
  9.     executor:
  10.       appname: xxl-job-executor-sample
  11.       port: 9999
 

 

 
 

 
 

 
 

 
 

 
 

 通过业务取模的方式将多个业务分别交给不同的分片去执行
 

 

 
 

 

 

 
 

 
 

 

 

 
 

 
 

 
 

 
 

 

 
 

 
 

 
 

 引入依赖
 

在之前的kafka-demo工程的pom文件中引入
 

  1. <dependency>
  2.     <groupId>org.apache.kafka</groupId>
  3.     <artifactId>kafka-streams</artifactId>
  4.     <exclusions>
  5.         <exclusion>
  6.             <artifactId>connect-json</artifactId>
  7.             <groupId>org.apache.kafka</groupId>
  8.         </exclusion>
  9.         <exclusion>
  10.             <groupId>org.apache.kafka</groupId>
  11.             <artifactId>kafka-clients</artifactId>
  12.         </exclusion>
  13.     </exclusions>
  14. </dependency>
 

  1. package com.heima.kafka.sample;
  2.  
  3. import org.apache.kafka.common.serialization.Serdes;
  4. import org.apache.kafka.streams.KafkaStreams;
  5. import org.apache.kafka.streams.KeyValue;
  6. import org.apache.kafka.streams.StreamsBuilder;
  7. import org.apache.kafka.streams.StreamsConfig;
  8. import org.apache.kafka.streams.kstream.KStream;
  9. import org.apache.kafka.streams.kstream.TimeWindows;
  10. import org.apache.kafka.streams.kstream.ValueMapper;
  11.  
  12. import java.time.Duration;
  13. import java.util.Arrays;
  14. import java.util.Properties;
  15.  
  16. /**
  17.  * 流式处理
  18.  */
  19. public class KafkaStreamQuickStart {
  20.     public static void main(String[] args) {
  21.         //kafka配置
  22.         Properties prop = new Properties();
  23.         prop.put(StreamsConfig.BOOTSTRAP_SERVERS_CONFIG,"192.168.136.152:9092");
  24.         prop.put(StreamsConfig.DEFAULT_KEY_SERDE_CLASS_CONFIG, Serdes.String().getClass());
  25.         prop.put(StreamsConfig.DEFAULT_VALUE_SERDE_CLASS_CONFIG,Serdes.String().getClass());
  26.         prop.put(StreamsConfig.APPLICATION_ID_CONFIG,"streams-sample");
  27.         //stream构建器
  28.         StreamsBuilder streamsBuilder = new StreamsBuilder();
  29.         //流式计算
  30.         streamProcessor(streamsBuilder);
  31.         //创建kafkaStream对象
  32.         KafkaStreams kafkaStreams = new KafkaStreams(streamsBuilder.build(),prop);
  33.         //开启kafka流式计算
  34.         kafkaStreams.start();
  35.  
  36.     }
  37.  
  38.     /**
  39.      * 流式计算
  40.      * 消息的内容：hello kafka
  41.      * @param streamsBuilder
  42.      */
  43.     private static void streamProcessor(StreamsBuilder streamsBuilder) {
  44.         //创建kstream对象，同时指定从哪个topic中接收消息
  45.         KStream<String,String> stream = streamsBuilder.stream("itcast-topic-input");
  46.         //处理消息的value
  47.         stream.flatMapValues(new ValueMapper<String, Iterable<String>>() {
  48.             @Override
  49.             public Iterable<String> apply(String value) {
  50.                 return Arrays.asList(value.split(" "));
  51.             }
  52.         })      //按照value进行聚合处理
  53.                 .groupBy((key,value)->value)
  54.                 //聚合计算时间间隔
  55.                 .windowedBy(TimeWindows.of(Duration.ofSeconds(10)))
  56.                 //聚合查询：求单词总个数
  57.                 .count()
  58.                 //转成KStream
  59.                 .toStream()
  60.                 //处理后结果key和value转成string
  61.                 .map((key,value)->{
  62.                     System.out.println("key:"+key+",value:"+value);
  63.                     return new KeyValue<>(key.key().toString(),value.toString());
  64.                 })
  65.                 //发送消息
  66.                 .to("itcast-topic-out");
  67.     }
  68. }
 

 

 

 
 

 

 
 

 

 

 

遇到问题：Kafka的consumer,producer或kafkaStream不起作用
 

原因：consumer,producer或kafkaStream虽然启动了但是没有注册到kafka。
 

解决方案：可能需要在服务器中重启甚至重新配置zookeeper和kafka，然后查看kafka的日志，启动consumer,producer或kafkaStream是否会实时打印出对应的注册信息。
 

 

heima-leadnews-behavior->ApLikesBehaviorServiceImpl
 

  1. package com.heima.behavior.service.impl;
  2.  
  3. import com.alibaba.fastjson.JSON;
  4. import com.heima.behavior.service.ApLikesBehaviorService;
  5. import com.heima.common.constants.BehaviorConstants;
  6. import com.heima.common.constants.HotArticleConstants;
  7. import com.heima.common.redis.CacheService;
  8. import com.heima.model.behavior.dtos.LikesBehaviorDto;
  9. import com.heima.model.common.dtos.ResponseResult;
  10. import com.heima.model.common.enums.AppHttpCodeEnum;
  11. import com.heima.model.mess.UpdateArticleMess;
  12. import com.heima.model.user.pojos.ApUser;
  13. import com.heima.utils.thread.AppThreadLocalUtil;
  14. import lombok.extern.slf4j.Slf4j;
  15. import org.springframework.beans.factory.annotation.Autowired;
  16. import org.springframework.kafka.core.KafkaTemplate;
  17. import org.springframework.stereotype.Service;
  18. import org.springframework.transaction.annotation.Transactional;
  19.  
  20.  
  21. @Service
  22. @Transactional
  23. @Slf4j
  24. public class ApLikesBehaviorServiceImpl implements ApLikesBehaviorService {
  25.  
  26.     @Autowired
  27.     private CacheService cacheService;
  28.  
  29.     @Autowired
  30.     private KafkaTemplate<String,String> kafkaTemplate;
  31.  
  32.     @Override
  33.     public ResponseResult like(LikesBehaviorDto dto) {
  34.  
  35.         //1.检查参数
  36.         if (dto == null || dto.getArticleId() == null || checkParam(dto)) {
  37.             return ResponseResult.errorResult(AppHttpCodeEnum.PARAM_INVALID);
  38.         }
  39.  
  40.         //2.是否登录
  41.         ApUser user = AppThreadLocalUtil.getUser();
  42.         if (user == null) {
  43.             return ResponseResult.errorResult(AppHttpCodeEnum.NEED_LOGIN);
  44.         }
  45.  
  46.         UpdateArticleMess mess = new UpdateArticleMess();
  47.         mess.setArticleId(dto.getArticleId());
  48.         mess.setType(UpdateArticleMess.UpdateArticleType.LIKES);
  49.  
  50.         //3.点赞  保存数据
  51.         if (dto.getOperation() == 0) {
  52.             Object obj = cacheService.hGet(BehaviorConstants.LIKE_BEHAVIOR + dto.getArticleId().toString(), user.getId().toString());
  53.             if (obj != null) {
  54.                 return ResponseResult.errorResult(AppHttpCodeEnum.PARAM_INVALID, "已点赞");
  55.             }
  56.             // 保存当前key
  57.             log.info("保存当前key:{} ,{}, {}", dto.getArticleId(), user.getId(), dto);
  58.             cacheService.hPut(BehaviorConstants.LIKE_BEHAVIOR + dto.getArticleId().toString(), user.getId().toString(), JSON.toJSONString(dto));
  59.             mess.setAdd(1);
  60.         } else {
  61.             // 删除当前key
  62.             log.info("删除当前key:{}, {}", dto.getArticleId(), user.getId());
  63.             cacheService.hDelete(BehaviorConstants.LIKE_BEHAVIOR + dto.getArticleId().toString(), user.getId().toString());
  64.             mess.setAdd(-1);
  65.         }
  66.  
  67.         //发送消息，数据聚合
  68.         kafkaTemplate.send(HotArticleConstants.HOT_ARTICLE_SCORE_TOPIC,JSON.toJSONString(mess));
  69.  
  70.         return ResponseResult.okResult(AppHttpCodeEnum.SUCCESS);
  71.  
  72.     }
  73.  
  74.     /**
  75.      * 检查参数
  76.      *
  77.      * @return
  78.      */
  79.     private boolean checkParam(LikesBehaviorDto dto) {
  80.         if (dto.getType() > 2 || dto.getType() < 0 || dto.getOperation() > 1 || dto.getOperation() < 0) {
  81.             return true;
  82.         }
  83.         return false;
  84.     }
  85. }
 

heima-leadnews-article->config
 

  1. package com.heima.article.config;
  2.  
  3. import lombok.Getter;
  4. import lombok.Setter;
  5. import org.apache.kafka.common.serialization.Serdes;
  6. import org.apache.kafka.streams.StreamsConfig;
  7. import org.springframework.boot.context.properties.ConfigurationProperties;
  8. import org.springframework.context.annotation.Bean;
  9. import org.springframework.context.annotation.Configuration;
  10. import org.springframework.kafka.annotation.EnableKafkaStreams;
  11. import org.springframework.kafka.annotation.KafkaStreamsDefaultConfiguration;
  12. import org.springframework.kafka.config.KafkaStreamsConfiguration;
  13.  
  14. import java.util.HashMap;
  15. import java.util.Map;
  16.  
  17. /**
  18.  * 通过重新注册KafkaStreamsConfiguration对象，设置自定配置参数
  19.  */
  20.  
  21. @Setter
  22. @Getter
  23. @Configuration
  24. @EnableKafkaStreams
  25. @ConfigurationProperties(prefix="kafka")
  26. public class KafkaStreamConfig {
  27.     private static final int MAX_MESSAGE_SIZE = 16* 1024 * 1024;
  28.     private String hosts;
  29.     private String group;
  30.     @Bean(name = KafkaStreamsDefaultConfiguration.DEFAULT_STREAMS_CONFIG_BEAN_NAME)
  31.     public KafkaStreamsConfiguration defaultKafkaStreamsConfig() {
  32.         Map<String, Object> props = new HashMap<>();
  33.         props.put(StreamsConfig.BOOTSTRAP_SERVERS_CONFIG, hosts);
  34.         props.put(StreamsConfig.APPLICATION_ID_CONFIG, this.getGroup()+"_stream_aid");
  35.         props.put(StreamsConfig.CLIENT_ID_CONFIG, this.getGroup()+"_stream_cid");
  36.         props.put(StreamsConfig.RETRIES_CONFIG, 10);
  37.         props.put(StreamsConfig.DEFAULT_KEY_SERDE_CLASS_CONFIG, Serdes.String().getClass());
  38.         props.put(StreamsConfig.DEFAULT_VALUE_SERDE_CLASS_CONFIG, Serdes.String().getClass());
  39.         return new KafkaStreamsConfiguration(props);
  40.     }
  41. }
 

heima-leadnews-article->HotArticleStreamHandler
 

  1. package com.heima.article.stream;
  2.  
  3. import com.alibaba.fastjson.JSON;
  4. import com.heima.common.constants.HotArticleConstants;
  5. import com.heima.model.mess.ArticleVisitStreamMess;
  6. import com.heima.model.mess.UpdateArticleMess;
  7. import lombok.extern.slf4j.Slf4j;
  8. import org.apache.commons.lang.StringUtils;
  9. import org.apache.kafka.streams.KeyValue;
  10. import org.apache.kafka.streams.StreamsBuilder;
  11. import org.apache.kafka.streams.kstream.*;
  12. import org.springframework.context.annotation.Bean;
  13. import org.springframework.context.annotation.Configuration;
  14.  
  15. import java.time.Duration;
  16.  
  17.  
  18. @Configuration
  19. @Slf4j
  20. public class HotArticleStreamHandler {
  21.  
  22.     @Bean
  23.     public KStream<String,String> kStream(StreamsBuilder streamsBuilder){
  24.         //接收消息
  25.         KStream<String,String> stream = streamsBuilder.stream(HotArticleConstants.HOT_ARTICLE_SCORE_TOPIC);
  26.         //聚合流式处理
  27.         stream.map((key,value)->{
  28.             UpdateArticleMess mess = JSON.parseObject(value,UpdateArticleMess.class);
  29.             //重置消息的key:文章id和value:行为类型:数量 LIKE:0
  30.             return new KeyValue<>(mess.getArticleId().toString(),mess.getType().name()+":"+mess.getAdd());
  31.         })
  32.                 //按照文章id进行聚合
  33.                 .groupBy((key,value)->key)
  34.                 //时间窗口
  35.                 .windowedBy(TimeWindows.of(Duration.ofSeconds(10)))
  36.                 /**
  37.                  * 自行的完成聚合的计算
  38.                  */
  39.                 .aggregate(new Initializer<String>() {
  40.                     /**
  41.                      * 初始方法，返回值是消息的value
  42.                      * @return
  43.                      */
  44.                     @Override
  45.                     public String apply() {
  46.                         return "COLLECTION:0,COMMENT:0,LIKES:0,VIEWS:0";
  47.                     }
  48.                     /**
  49.                      * 真正的聚合操作，返回值是消息的value
  50.                      */
  51.                 }, new Aggregator<String, String, String>() {
  52.                     @Override
  53.                     public String apply(String key, String value, String aggValue) {
  54.                         if(StringUtils.isBlank(value)){
  55.                             return aggValue;
  56.                         }
  57.                         String[] aggAry = aggValue.split(",");
  58.                         int col = 0,com = 0,lik = 0,vie = 0;
  59.                         for (String agg : aggAry) {
  60.                             String[] split = agg.split(":");
  61.                             /**
  62.                              * 获得初始值，也是时间窗口内计算之后的值
  63.                              */
  64.                             switch (UpdateArticleMess.UpdateArticleType.valueOf(split[0])){
  65.                                 case COLLECTION:
  66.                                     col = Integer.parseInt(split[1]);
  67.                                     break;
  68.                                 case COMMENT:
  69.                                     com = Integer.parseInt(split[1]);
  70.                                     break;
  71.                                 case LIKES:
  72.                                     lik = Integer.parseInt(split[1]);
  73.                                     break;
  74.                                 case VIEWS:
  75.                                     vie = Integer.parseInt(split[1]);
  76.                                     break;
  77.                             }
  78.                         }
  79.                         /**
  80.                          * 累加操作
  81.                          */
  82.                         String[] valAry = value.split(":");
  83.                         switch (UpdateArticleMess.UpdateArticleType.valueOf(valAry[0])){
  84.                             case COLLECTION:
  85.                                 col += Integer.parseInt(valAry[1]);
  86.                                 break;
  87.                             case COMMENT:
  88.                                 com += Integer.parseInt(valAry[1]);
  89.                                 break;
  90.                             case LIKES:
  91.                                 lik += Integer.parseInt(valAry[1]);
  92.                                 break;
  93.                             case VIEWS:
  94.                                 vie += Integer.parseInt(valAry[1]);
  95.                                 break;
  96.                         }
  97.  
  98.                         String formatStr = String.format("COLLECTION:%d,COMMENT:%d,LIKES:%d,VIEWS:%d",col,com,lik,vie);
  99.                         System.out.println("文章的id:"+key);
  100.                         System.out.println("当前时间窗口内的消息处理结果:"+formatStr);
  101.                         return formatStr;
  102.                     }//当前流式处理的状态，如果有多个流式处理，保证不一样即可
  103.                 }, Materialized.as("hot-article-stream-count-001"))
  104.                 .toStream()
  105.                 .map((key,value)->{
  106.                     return new KeyValue<>(key.key().toString(),formatObj(key.key().toString(),value));
  107.                 })
  108.                 //发送消息
  109.                 .to(HotArticleConstants.HOT_ARTICLE_INCR_HANDLE_TOPIC);
  110.         return stream;
  111.     }
  112.  
  113.     /**
  114.      * 格式化消息的value数据
  115.      * @param articleId
  116.      * @param value
  117.      * @return
  118.      */
  119.     private String formatObj(String articleId, String value) {
  120.         ArticleVisitStreamMess mess = new ArticleVisitStreamMess();
  121.         mess.setArticleId(Long.valueOf(articleId));
  122.         //COLLECTION:%d,COMMENT:%d,LIKES:%d,VIEWS:%d
  123.         String[] valAry = value.split(",");
  124.         for (String val : valAry) {
  125.             String[] split = val.split(":");
  126.             switch (UpdateArticleMess.UpdateArticleType.valueOf(split[0])){
  127.                 case COLLECTION:
  128.                     mess.setCollect(Integer.parseInt(split[1]));
  129.                     break;
  130.                 case COMMENT:
  131.                     mess.setComment(Integer.parseInt(split[1]));
  132.                     break;
  133.                 case LIKES:
  134.                     mess.setLike(Integer.parseInt(split[1]));
  135.                     break;
  136.                 case VIEWS:
  137.                     mess.setView(Integer.parseInt(split[1]));
  138.                     break;
  139.             }
  140.         }
  141.         log.info("聚合消息处理之后和结果为:{}",JSON.toJSONString(mess));
  142.         return JSON.toJSONString(mess);
  143.     }
  144. }
 

heima-leadnews-article->ArticleIncrHandleListener
 

  1. @Component
  2. @Slf4j
  3. public class ArticleIncrHandleListener {
  4.  
  5.     @Autowired
  6.     private ApArticleService apArticleService;
  7.  
  8.  
  9.     @KafkaListener(topics = HotArticleConstants.HOT_ARTICLE_INCR_HANDLE_TOPIC )
  10.     public void onMessage(String mess){
  11.         if(StringUtils.isNotBlank(mess)){
  12.             ArticleVisitStreamMess articleVisitStreamMess = JSON.parseObject(mess, ArticleVisitStreamMess.class);
  13.             apArticleService.updateScore(articleVisitStreamMess);
  14.         }
  15.     }
  16.  
  17. }
 

 

 遇到问题：将文章ApArticle列表数据返回给前端后，到达前端的ApArticle列表的文章id前后不一致
 

 

原因：ApArticle的id类型为long，而long类型数据在网络传输时会丢失精度，所以末尾出现0
 

解决方案：jackson进行序列化和反序列化解决
 

 

  •  
    当后端响应给前端的数据中包含了id或者特殊标识（可自定义）的时候，把当前数据进行转换为String类型
     
  •  
    当前端传递后后端的dto中有id或者特殊标识（可自定义）的时候，把当前数据转为Integer或Long类型。
     
 

特殊标识类说明：
 

IdEncrypt 自定义注解 作用在需要转换类型的字段属性上，用于非id的属性上 在model包下
 

  1. package com.heima.model.common.annotation;
  2.  
  3. import com.fasterxml.jackson.annotation.JacksonAnnotation;
  4.  
  5. import java.lang.annotation.ElementType;
  6. import java.lang.annotation.Retention;
  7. import java.lang.annotation.RetentionPolicy;
  8. import java.lang.annotation.Target;
  9.  
  10. @JacksonAnnotation
  11. @Retention(RetentionPolicy.RUNTIME)
  12. @Target({ElementType.FIELD, ElementType.METHOD, ElementType.PARAMETER})
  13. public @interface IdEncrypt {
  14. }
 

序列化和反序列化类说明：以下类理解为主，可直接在资料文件夹下拷贝到leadnews-common模块中使用。
 

  •  
    ConfusionSerializer 用于序列化自增数字的混淆
     
 

  1. public class ConfusionSerializer extends JsonSerializer<Object> {
  2.  
  3.     @Override
  4.     public  void serialize(Object value, JsonGenerator jsonGenerator, SerializerProvider serializers) throws IOException {
  5.         try {
  6.             if (value != null) {
  7.                 jsonGenerator.writeString(value.toString());
  8.                 return;
  9.             }
  10.         }catch (Exception e){
  11.             e.printStackTrace();
  12.         }
  13.         serializers.defaultSerializeValue(value, jsonGenerator);
  14.     }
  15. }
 

  •  
    ConfusionDeserializer 用于反序列化自增数字的混淆解密
     
    1. public class ConfusionDeserializer extends JsonDeserializer<Object> {
    2. ​
    3.     JsonDeserializer<Object>  deserializer = null;
    4.     JavaType type =null;
    5. ​
    6.     public  ConfusionDeserializer(JsonDeserializer<Object> deserializer, JavaType type){
    7.         this.deserializer = deserializer;
    8.         this.type = type;
    9.     }
    10. ​
    11.     @Override
    12.     public  Object deserialize(JsonParser p, DeserializationContext ctxt)
    13.             throws IOException{
    14.         try {
    15.             if(type!=null){
    16.                 if(type.getTypeName().contains("Long")){
    17.                     return Long.valueOf(p.getValueAsString());
    18.                 }
    19.                 if(type.getTypeName().contains("Integer")){
    20.                     return Integer.valueOf(p.getValueAsString());
    21.                 }
    22.             }
    23.             return IdsUtils.decryptLong(p.getValueAsString());
    24.         }catch (Exception e){
    25.             if(deserializer!=null){
    26.                 return deserializer.deserialize(p,ctxt);
    27.             }else {
    28.                 return p.getCurrentValue();
    29.             }
    30.         }
    31.     }
    32. }
     
  •  
    ConfusionSerializerModifier 用于过滤序列化时处理的字段
     
 

  1. public class ConfusionSerializerModifier extends BeanSerializerModifier {
  2.  
  3.     @Override
  4.     public List<BeanPropertyWriter> changeProperties(SerializationConfig config,
  5.                                                      BeanDescription beanDesc, List<BeanPropertyWriter> beanProperties) {
  6.         List<BeanPropertyWriter> newWriter = new ArrayList<>();
  7.         for(BeanPropertyWriter writer : beanProperties){
  8.             String name = writer.getType().getTypeName();
  9.             if(null == writer.getAnnotation(IdEncrypt.class) && !writer.getName().equalsIgnoreCase("id")){
  10.                 newWriter.add(writer);
  11.             } else {
  12.                 writer.assignSerializer(new ConfusionSerializer());
  13.                 newWriter.add(writer);
  14.             }
  15.         }
  16.         return newWriter;
  17.     }
  18. }
 

  •  
    ConfusionDeserializerModifier 用于过滤反序列化时处理的字段
     
    1. public class ConfusionDeserializerModifier extends BeanDeserializerModifier {
    2. ​
    3.     @Override
    4.     public BeanDeserializerBuilder updateBuilder(final DeserializationConfig config, final BeanDescription beanDescription, final BeanDeserializerBuilder builder) {
    5.         Iterator it = builder.getProperties();
    6. ​
    7.         while (it.hasNext()) {
    8.             SettableBeanProperty p = (SettableBeanProperty) it.next();
    9.             if ((null != p.getAnnotation(IdEncrypt.class)||p.getName().equalsIgnoreCase("id"))) {
    10.                 JsonDeserializer<Object> current = p.getValueDeserializer();
    11.                 builder.addOrReplaceProperty(p.withValueDeserializer(new ConfusionDeserializer(p.getValueDeserializer(),p.getType())), true);
    12.             }
    13.         }
    14.         return builder;
    15.     }
    16. }
     
  •  
    ConfusionModule 用于注册模块和修改器
     
    1. public class ConfusionModule extends Module {
    2. ​
    3.     public final static String MODULE_NAME = "jackson-confusion-encryption";
    4.     public final static Version VERSION = new Version(1,0,0,null,"heima",MODULE_NAME);
    5. ​
    6.     @Override
    7.     public String getModuleName() {
    8.         return MODULE_NAME;
    9.     }
    10. ​
    11.     @Override
    12.     public Version version() {
    13.         return VERSION;
    14.     }
    15. ​
    16.     @Override
    17.     public void setupModule(SetupContext context) {
    18.         context.addBeanSerializerModifier(new ConfusionSerializerModifier());
    19.         context.addBeanDeserializerModifier(new ConfusionDeserializerModifier());
    20.     }
    21. ​
    22.     /**
    23.      * 注册当前模块
    24.      * @return
    25.      */
    26.     public static ObjectMapper registerModule(ObjectMapper objectMapper){
    27.         //CamelCase策略，Java对象属性：personId，序列化后属性：persionId
    28.         //PascalCase策略，Java对象属性：personId，序列化后属性：PersonId
    29.         //SnakeCase策略，Java对象属性：personId，序列化后属性：person_id
    30.         //KebabCase策略，Java对象属性：personId，序列化后属性：person-id
    31.         // 忽略多余字段，抛错
    32.         objectMapper.configure(DeserializationFeature.FAIL_ON_UNKNOWN_PROPERTIES, false);
    33. //        objectMapper.setPropertyNamingStrategy(PropertyNamingStrategy.SNAKE_CASE);
    34.         return objectMapper.registerModule(new ConfusionModule());
    35.     }
    36. ​
    37. }
     
  •  
    InitJacksonConfig 提供自动化配置默认ObjectMapper，让整个框架自动处理id混淆
     
    1. @Configuration
    2. public class InitJacksonConfig {
    3. ​
    4.     @Bean
    5.     public ObjectMapper objectMapper() {
    6.         ObjectMapper objectMapper = new ObjectMapper();
    7.         objectMapper = ConfusionModule.registerModule(objectMapper);
    8.         return objectMapper;
    9.     }
    10. ​
    11. }
     
 

在common模块中的自动配置的spring.factories中添加如下内容
 

  1. org.springframework.boot.autoconfigure.EnableAutoConfiguration=\
  2.   com.heima.common.swagger.SwaggerConfiguration,\
  3.   com.heima.common.swagger.Swagger2Configuration,\
  4.   com.heima.common.exception.ExceptionCatch,\
  5.   com.heima.common.aliyun.GreenTextScan,\
  6.   com.heima.common.aliyun.GreenImageScan,\
  7.   com.heima.common.jackson.InitJacksonConfig
 

在dto中传递参数的时候如果想要把数值类型转为json，可以使用@IdEncrypt标识字段进行转换，如下：
 

  1. @Data
  2. public class ArticleInfoDto {
  3.     
  4.     // 文章ID
  5.     @IdEncrypt
  6.     Long articleId;
  7. }
 

 

 

 

 
 

 
 

 
 

Jenkins介绍
 

 
 

 

 

Jenkins 是一款流行的开源持续集成（Continuous Integration）工具，广泛用于项目开发，具有自动化构建、测试和部署等功能。官网： Jenkins。
 

Jenkins的特征：
 

  •  
    开源的 Java语言开发持续集成工具，支持持续集成，持续部署。
     
  •  
    易于安装部署配置：可通过 yum安装,或下载war包以及通过docker容器等快速实现安装部署，可方便web界面配置管理。
     
  •  
    消息通知及测试报告：集成 RSS/E-mail通过RSS发布构建结果或当构建完成时通过e-mail通知，生成JUnit/TestNG测试报告。
     
  •  
    分布式构建：支持 Jenkins能够让多台计算机一起构建/测试。
     
  •  
    文件识别： Jenkins能够跟踪哪次构建生成哪些jar，哪次构建使用哪个版本的jar等。
     
  •  
    丰富的插件支持：支持扩展插件，你可以开发适合自己团队使用的工具，如 git，svn，maven，docker等。
     
 

 

 Jenkins安装配置
 

  •  首先服务器需要安装java环境(JDK11以上)
  •  去Jenkins官网Jenkins下载Jenkins.war包
 

 
 

 

  • 将jenkins.war包上传到服务器后通过Java命令运行jenkins.war包，启动jenkins服务，这里顺便指定了端口号为16060。
 

 

  •  如果在Centos7 上Open JDK 11 安装启动Jenkins的时候报了一个错误：
 

hudson.util.AWTProblem at hudson.WebAppMain.contextInitialized(WebAppMain.java:251)

 

  • 解决方案：
 

yum install fontconfig

 

  • 再次启动查看成功启动的日志，提醒管理员账户已经自动帮我们创建成功了，并生成了密钥。
 

 

  • 浏览器首次访问Jenkins服务，就需要将这个密钥进行输入才能登录
 

 

按默认设置，把建议的插件都安装上  
 

 

 

这一步等待时间较长， 安装完成之后， 创建管理员用户：  
 

 

配置访问地址：
 

 

 

 配置完成之后， 会进行重启， 之后可以看到管理后台：
 

 

 

 
 

 
 

 

Jenkins工具配置
 

1.进入【系统管理】--> 【全局工具配置】
 

 

 2.MAVEN配置全局设置
 

 

3. 指定JDK配置
 

 

4.指定MAVEN 目录
 

 

5.指定DOCKER目录
 

 

 如果不清楚docker的安装的目录，可以使用whereis docker 命令查看docker的安装的目录
 

 
 

 

 

 

 

 

 

 

每个微服务都引入该依赖,以heima-leadnews-user微服务为例
 

  1. <?xml version="1.0" encoding="UTF-8"?>
  2. <project xmlns="http://maven.apache.org/POM/4.0.0"
  3.          xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
  4.          xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
  5.     <parent>
  6.         <artifactId>heima-leadnews-service</artifactId>
  7.         <groupId>com.heima</groupId>
  8.         <version>1.0-SNAPSHOT</version>
  9.     </parent>
  10.     <modelVersion>4.0.0</modelVersion>
  11. ​
  12.     <artifactId>heima-leadnews-user</artifactId>
  13. ​
  14.     <properties>
  15.         <maven.compiler.source>8</maven.compiler.source>
  16.         <maven.compiler.target>8</maven.compiler.target>
  17.         <docker.image>docker_storage</docker.image>
  18.     </properties>
  19. ​
  20.     <build>
  21.         <finalName>heima-leadnews-user</finalName>
  22.         <plugins>
  23.             <plugin>
  24.                 <groupId>org.springframework.boot</groupId>
  25.                 <artifactId>spring-boot-maven-plugin</artifactId>
  26.                 <executions>
  27.                     <execution>
  28.                         <goals>
  29.                             <goal>repackage</goal>
  30.                         </goals>
  31.                     </execution>
  32.                 </executions>
  33.             </plugin>
  34.             <plugin>
  35.                 <groupId>org.apache.maven.plugins</groupId>
  36.                 <artifactId>maven-compiler-plugin</artifactId>
  37.                 <version>3.7.0</version>
  38.                 <configuration>
  39.                     <source>${java.version}</source>
  40.                     <target>${java.version}</target>
  41.                 </configuration>
  42.             </plugin>
  43.             <plugin>
  44.                 <groupId>com.spotify</groupId>
  45.                 <artifactId>dockerfile-maven-plugin</artifactId>
  46.                 <version>1.3.6</version>
  47.                 <configuration>
  48.                     <repository>${docker.image}/${project.artifactId}</repository>
  49.                     <buildArgs>
  50.                         <JAR_FILE>target/${project.build.finalName}.jar</JAR_FILE>
  51.                     </buildArgs>
  52.                 </configuration>
  53.             </plugin>
  54.         </plugins>
  55.     </build>
  56. ​
  57. </project>
 

服务集成Dockerfile文件
 

  1. # 设置JAVA版本
  2. FROM java:8
  3. # 指定存储卷, 任何向/tmp写入的信息都不会记录到容器存储层
  4. VOLUME /tmp
  5. # 拷贝运行JAR包
  6. ARG JAR_FILE
  7. COPY ${JAR_FILE} app.jar
  8. # 设置JVM运行参数， 这里限定下内存大小，减少开销
  9. ENV JAVA_OPTS="\
  10. -server \
  11. -Xms256m \
  12. -Xmx512m \
  13. -XX:MetaspaceSize=256m \
  14. -XX:MaxMetaspaceSize=512m"
  15. #空参数，方便创建容器时传参
  16. ENV PARAMS=""
  17. # 入口点， 执行JAVA运行命令
  18. ENTRYPOINT ["sh","-c","java -jar $JAVA_OPTS /app.jar $PARAMS"]
 

 

利用Jenkins编译打包时可能会因为镜像源失效而导致拉取镜像不成功的编译失败问题，更新 Dockerfile 中的基础镜像，将 FROM java:8 中的 java:8 替换为所需的镜像版本。例如，如果要使用 JDK 8，可以将其更改为 FROM openjdk:8-jdk。
 

 

 

 
 

 

 

遇到问题：Jenkins项目编译不成功。
 

原因：在Jenkins服务器上，Jenkins通过maven编译打包到服务器本地仓库的依赖会有可能损坏或不完整，就算删除重新编译打包也会有相同的问题。
 

解决方案：将本地maven仓库对应的依赖包替换掉Jenkins服务器上maven本地仓库的可能损坏或不完整的依赖包，甚至替换掉依赖相关的整个文件夹。因为本地maven仓库的项目测试是没有问题的。
 

 

 

 

 

clean install -Dmaven.test.skip=true  dockerfile:build -f heima-leadnews/heima-leadnews-service/heima-leadnews-user/pom.xml
 

 

  1. if [ -n  "$(docker ps -a -f  name=$JOB_NAME  --format '{{.ID}}' )" ]
  2.  then
  3.  #删除之前的容器
  4.  docker rm -f $(docker ps -a -f  name=$JOB_NAME  --format '{{.ID}}' )
  5. fi
  6.  # 清理镜像
  7. docker image prune -f 
  8.  # 启动docker服务
  9. docker run -d --net=host -e PARAMS="--spring.profiles.active=prod"  --name $JOB_NAME docker_storage/$JOB_NAME
 

 

 构建镜像
 

 

 清理容器，创建新的容器
 

 

 可以发现服务已经通过docker容器的方式启动
 

 

 

 

 
 

 安装配置私有仓库
 

对于持续集成环境的配置，Jenkins会发布大量的微服务， 要与多台机器进行交互， 可以采用docker镜像的保存与导出功能结合SSH实现， 但这样交互繁琐，稳定性差， 而且不便管理， 这里我们通过搭建Docker的私有仓库来实现， 这个有点类似GIT仓库， 集中统一管理资源， 由客户端拉取或更新。
 

  1.  
    下载最新Registry镜像
     
    docker pull registry:latest
     
  2.  
    启动Registry镜像服务
     
    docker run -d -p 5000:5000 --name registry -v /usr/local/docker/registry:/var/lib/registry registry:latest
     
    映射5000端口； -v是将Registry内的镜像数据卷与本地文件关联， 便于管理和维护Registry内的数据。
     
  3.  
    查看仓库资源
     
    访问地址：http://192.168.200.100:5000/v2/_catalog
     
    启动正常， 可以看到返回：
     
    {"repositories":[]}
     
    目前并没有上传镜像， 显示空数据。
     
    如果上传成功， 可以看到数据: 
     
 

jenkins中安装插件
 

 

jenkins系统配置远程服务器链接
 

位置：Manage Jenkins-->Configure System
 

 

需要添加凭证
 

位置：Manage Jenkins-->Manage CreDentials
 

 

添加链接到130服务器的用户名和密码
 

 

 
 

 

 
 

maven命令
 

clean install -Dmaven.test.skip=true dockerfile:build -f heima-leadnews/heima-leadnews-service/heima-leadnews-article/pom.xml
 

shell脚本
 

  1. image_tag=$docker_registry/docker_storage/$JOB_NAME
  2. echo '================docker镜像清理================'
  3. if [ -n  "$(docker ps -a -f  name=$JOB_NAME  --format '{{.ID}}' )" ]
  4.  then
  5.  #删除之前的容器
  6.  docker rm -f $(docker ps -a -f  name=$JOB_NAME  --format '{{.ID}}' )
  7. fi
  8.  # 清理镜像
  9. docker image prune -f 
  10. ​
  11. # 创建TAG
  12. docker tag docker_storage/$JOB_NAME $image_tag
  13. echo '================docker镜像推送================'
  14. # 推送镜像
  15. docker push $image_tag
  16. # 删除TAG
  17. docker rmi $image_tag
  18. echo '================docker tag 清理 ================'
 

 

 远程服务器执行的shell脚本
 

  1. echo '================拉取最新镜像================'
  2. docker pull $docker_registry/docker_storage/$JOB_NAME
  3.  
  4. echo '================删除清理容器镜像================'
  5. if [ -n  "$(docker ps -a -f  name=$JOB_NAME  --format '{{.ID}}' )" ]
  6.  then
  7.  #删除之前的容器
  8.  docker rm -f $(docker ps -a -f  name=$JOB_NAME  --format '{{.ID}}' )
  9. fi
  10.  # 清理镜像
  11. docker image prune -f 
  12.  
  13. echo '===============启动容器================'
  14. docker run -d   --net=host -e PARAMS="--spring.profiles.active=prod" --name $JOB_NAME $docker_registry/docker_storage/$JOB_NAME
 

 

 

 遇到问题：镜像推送dockers仓库失败
 

  1. received unexpected HTTP status: 500 Internal Server Error
  2. Build step 'Execute shell' marked build as failure
  3. Finished: FAILURE
 

原因：是由于selinux未关闭导致docker出现异常情况
 

解决方案：
 

关闭selinux
 

临时关闭
 

[root@ip-10-0-1-46 ~]# setenforce 0
 

或永久关闭
 

[root@ip-10-0-1-46 ~]# sed -i 's/SELINUX=enforcing/SELINUX=disabled/g' /etc/selinux/config
 

重新push
 

 

 遇到问题：SSH拉取docker仓库镜像失败
 

  1. echo '===============启动容器================'
  2. docker run -d   --net=host -e PARAMS="--spring.profiles.active=prod" --name $JOB_NAME $docker_registry/docker_storage/$JOB_NAME
  3.  
  4. [SSH] executing...
  5. Error response from daemon: Get "https://192.168.136.153:5000/v2/": http: server gave HTTP response to HTTPS client
  6. Unable to find image '192.168.136.153:5000/docker_storage/heima-leadnews-article:latest' locally
  7. docker: Error response from daemon: Get "https://192.168.136.153:5000/v2/": http: server gave HTTP response to HTTPS client.
  8. See 'docker run --help'.
  9. ================拉取最新镜像================
  10. Using default tag: latest
  11. ================删除清理容器镜像================
  12. Total reclaimed space: 0B
  13. ===============启动容器================
  14.  
  15. [SSH] completed
  16. [SSH] exit-status: 125
  17.  
  18. Build step 'Execute shell script on remote host using ssh' marked build as failure
  19. Finished: FAILURE
  20. ​
 

原因: 拉取端服务器的docker没有配置指向安装Registry的服务IP与端口，也就是说，不管是推送服务器的docker或者拉取服务器的docker都需要配置指向安装Registry的服务IP与端口。
 

解决方案：
 

先确保持续集成环境的机器已安装好Docker客户端， 然后做以下修改：
 

vi /lib/systemd/system/docker.service
 

修改内容：
 

ExecStart=/usr/bin/dockerd --insecure-registry=192.168.136.153:5000
 

指向安装Registry的服务IP与端口。
 

重启生效：
 

  1. systemctl daemon-reload
  2. systemctl restart docker.service 
 

 

 

 

 遇到问题:
 

  1. javax.net.ssl.SSLHandshakeException: No appropriate protocol (protocol is disabled or cipher suites are inappropriate)
  2. 	at sun.security.ssl.HandshakeContext.<init>(HandshakeContext.java:171) ~[na:1.8.0_292]
  3. 	at sun.security.ssl.ClientHandshakeContext.<init>(ClientHandshakeContext.java:98) ~[na:1.8.0_292]
  4. 	at sun.security.ssl.TransportContext.kickstart(TransportContext.java:220) ~[na:1.8.0_292]
  5. 	at sun.security.ssl.SSLSocketImpl.startHandshake(SSLSocketImpl.java:428) ~[na:1.8.0_292]
  6. 	at com.mysql.cj.protocol.ExportControlled.performTlsHandshake(ExportControlled.java:316) ~[mysql-connector-java-8.0.17.jar:8.0.17]
  7. 	at com.mysql.cj.protocol.StandardSocketFactory.performTlsHandshake(StandardSocketFactory.java:188) ~[mysql-connector-java-8.0.17.jar:8.0.17]
  8. 	at com.mysql.cj.protocol.a.NativeSocketConnection.performTlsHandshake(NativeSocketConnection.java:99) ~[mysql-connector-java-8.0.17.jar:8.0.17]
  9. 	at com.mysql.cj.protocol.a.NativeProtocol.negotiateSSLConnection(NativeProtocol.java:331) ~[mysql-connector-java-8.0.17.jar:8.0.17]
  10. 	... 68 common frames omitted
 

原因：在Java8及高版本以上的版本在调用ssl时会出现javax.net.ssl.SSLHandshakeException: No appropriate protocol的异常。
 

解决方案一：
 

 jdbc-url中添加配置useSSL=false
 

  1. spring:
  2.   datasource:
  3.     driver-class-name: com.mysql.jdbc.Driver
  4.     url: jdbc:mysql://192.168.136.152:3306/leadnews_article?useUnicode=true&characterEncoding=UTF-8&serverTimezone=UTC&useSSL=false 
 

解决方案二：
 

Java\jre里面的lib\security 下面有个java.security。找到对应的SSLv3，删除掉，重启项目就好了。（删掉SSLv3就是允许SSL调用）
 

然后重启java服务 
 

 

 

 

 

 
 


                

        
声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/weixin_40725706/article/detail/988105
推荐阅读
相关标签
Copyright ©  2003-2013 www.wpsshop.cn  版权所有，并保留所有权利。

  
闽ICP备14008679号