（中职）数据采集技术（初级）项目10：项目实战：业务系统日志数据采集教学课件

1、正版可修改PPT课件（中职）数据采集技术（初级）项目10：项目实战：业务系统日志数据采集教学课件CONTENTS任务一：收集SpringBoot项目日志项目情景经理：小张，创建完SpringBoot项目后，知道下一步需要做什么工作吗? 小张：经理，我看日志采集工具在前面已经学习过，是不是要搭建环境。 经理：没错，第一步需要下载软件。 小张：这个分linux和Windows版本，咱们需要哪个呢？ 经理：linux吧，我们的业务系统基本都运行了Linux系统上。 小张：好的，没问题。 经理：搭建完环境之后，相关的配置，实现业务系统日志数据的采集。 小张：好的。 小张和经理谈完话后，使用filebe

2、at采集SpringBoot项目里的日志，使用Logstash 接收日志数据并拆分，并保存在MySQL数据库中。实现该项目的步骤为： 步骤一：使用filebeat采集SpringBoot项目里的日志。 步骤二：使用Logstash接收日志数据。 步骤三：保存在MySQL数据库中。学习目标【知识目标】l 了解filebeat下载方式l 掌握filebeat启动方式l 掌握filebeat配置方式l 掌握Logstash用法及配置l 掌握数据库存储日志【技能目标】l 能够成功配置filebeatl 能够成功配置Logstashl 能够成功存储数据任务步骤任务一：收集SpringBoot项目日志第一

3、步：打开filebeat官网，如图10-1所示。点击“WINDOWS ZIP 64-BIT”进行下载。Download Logstash任务步骤任务一：收集SpringBoot项目日志第二步：解压下载的文件。解压后的logstash$ tar -zxvf logstash-7.7.tgz解压后的filebeat$ tar -zxvf filebeat-7.7.0.tgz任务步骤任务一：收集SpringBoot项目日志了解logstash的配置最简单的配置：读取日志文件：如果需要输出到jdbc需要安装插件：在线安装： logstash-pugin install logstash-outout-

4、jdbc或是离线安装：logstash-plugin install file:/logstash-outout-jdbc.zip任务步骤任务一：收集SpringBoot项目日志了解logstash的配置关于更多logstash的配置，可以参考官网的inputs和outpouts两个配置版块：地址：https:/www.elastic.co/guide/en/logstash/current/getting-started-with-logstash.html 默认情况下，没有jdbc的output，可以在github上找到它： /theangryangel/logstash-output-j

5、dbc任务步骤任务一：收集SpringBoot项目日志了解filebeat的配置登录官网，即可以看到filebeat和配置，也分为input和output.地址：https:/www.elastic.co/guide/en/beats/filebeat/current/filebeat-getting-started.html控制台输入输出：输出到logstash:读取数据文件，并输出到logstash:任务步骤任务一：收集SpringBoot项目日志第三步：准备springboot项目将之前开发的Spring-boot项目打成一个jar包，并发布到linux运行即可.运行可以使用命令：$ j

6、ava -jar springboot-demo.jar 将会独立当前命令行窗口也可以使用后台方式运行：$nohup java -jar springboot-demo.java 1/dev/null 2&1 &无论哪种方式，都会当前目录下，创建一个logs目录，并记录日志到demo.log文件中。任务步骤任务一：收集SpringBoot项目日志第四步：在mysql数据中，创建数据表，用于保存日志：任务步骤任务一：收集SpringBoot项目日志第五步：配置logstash配置logstash包含： 1：安装logstash-output-jdbc插件。 2：将mysql-5.1的驱动程序放到vendor/jar/jdbc目录下。 3：创建logstash.conf配置文件。 4: 启动logstash : # logstash -f .conf任务步骤任务一：收集SpringBoot项目日志第六步：配置filebeat收集业务系统日志具体步骤如下：1：创建或修改配置文件。2：启动filebeat : filebeat -e -c .yml3：最后，启动springboot项目 : java -jar springboot-demo.jar 任务步骤