设为首页 收藏本站

运维网

查看: 528|回复: 2

[经验分享] Linux的企业-ELK日志分析

[复制链接]

尚未签到

发表于 2017-11-8 10:16:43 | 显示全部楼层 |阅读模式
一、简介
1、核心组成
ELK由Elasticsearch、Logstash和Kibana三部分组件组成;
Elasticsearch是个开源分布式搜索引擎,它的特点有:分布式,零配置,自动发现,索引自动分片,索引副本机制,restful风格接口,多数据源,自动搜索负载等。
Logstash是一个完全开源的工具,它可以对你的日志进行收集、分析,并将其存储供以后使用
kibana 是一个开源和免费的工具,它可以为 Logstash 和 ElasticSearch 提供的日志分析友好的 Web 界面,可以帮助您汇总、分析和搜索重要数据日志。


2、四大组件

Logstash: logstash server端用来搜集日志;
Elasticsearch: 存储各类日志;
Kibana: web化接口用作查寻和可视化日志;
Logstash Forwarder: logstash client端用来通过lumberjack 网络协议发送日志到logstash server;


3、ELK工作流程

在需要收集日志的所有服务上部署logstash,作为logstash agent(logstash shipper)用于监控并过滤收集日志,将过滤后的内容发送到Redis,然后logstash indexer将日志收集在一起交给全文搜索服务ElasticSearch,可以用ElasticSearch进行自定义搜索通过Kibana 来结合自定义搜索进行页面展示。
QQ截图20171108101325.jpg


4、ELK的帮助手册

ELK官网:https://www.elastic.co/
ELK官网文档:https://www.elastic.co/guide/index.html
ELK中文手册:http://kibana.logstash.es/conten ... onitor/logging.html

注释
ELK有两种安装方式
(1)集成环境:Logstash有一个集成包,里面包括了其全套的三个组件;也就是安装一个集成包。
(2)独立环境:三个组件分别单独安装、运行、各司其职。(比较常用)

二.安装配置
1.环境配置
server1:172.25.29.1 master

server2:172.25.29.2 data

server3:172.25.29.3 data
2.安装

eadd5c5b28ba462c23df0082e8796b37.png
安装java环境

b99c82804f65301409d1e9083dc4a4df.png

3.配置server1
14bbb830023be24f556bc065832f8da7.png
8723fd5de21591ef0eeb3fd0773953a4.png
05c576cb5d79c83cf2ddd7743dfa8d5c.png



4.测试是否正常

2c7203832fa9a5c731055728b6ddd213.png
66799606294a10d0353b615696bc5ea2.png
三.安装head插件,web访问管理节点,增加数据存储节点
1.安装插件

2cb1ec71f3850d532ae553a2ded79de1.png
f1ca6ab25d501c754dc1f75f323cb927.png

查看插件是否安装成功

28c5b92d507a764754e118bcd3463920.png

2.网页通过访问管理节点172.25.29.1:9200/_plugin/head/

2e4cce9da8955fa209078ede38bc1544.png
测试采集

5330ba3251e7778cc355384f6ddb338c.png

3.增加第二台主机server2
安装配置服务,注意打开server1和server2的discovery选项,并修改正确的主机名
fb0d7b4420c84810e430ab6bca46f053.png
564e78578636912ea311802167ec8eea.png



server1和server2都要修改




4.访问master节点,server1和server显示正常

e11b5190428f6da447c005cd75313716.png

03208b391c48e0456669adc7c78b82ab.png

运维网声明 1、欢迎大家加入本站运维交流群:群①:263444886群②:197202523群③:485755530群④:201730672群⑤:202807635运维网交流群⑥:281548029
2、本站所有主题由该帖子作者发表,该帖子作者与运维网享有帖子相关版权
3、其他单位或个人使用、转载或引用本文时必须注明原文的出处
4、如本帖侵犯到任何版权问题,请立即告知本站,本站将及时予与删除并致以最深的歉意
5、运维网 - 服务您的运维操作管理专家!
6、联系人Email:admin@yunvn.com 网址:www.iyunv.com

点击关注更多内容
您需要登录后才可以回帖 登录 | 立即注册  

本版积分规则  允许回帖邮件提醒楼主

关注运维网官方微信X

关注运维网官方微信

扫描二维码关注运维网官方微信,最新一手资源尽在官方微信!快快关注我们吧...

扫描微信二维码查看详情

客服 E-mail:kefu@yunvn.com

本站由安畅网络和青云提供云计算服务

运维网--中国最专业的运维工程师交流社区

京ICP备14039699号-1 Copyright © 2012-2018

使用手机软件扫描微信二维码

关注我们可获取更多热点资讯

Good good study day day up !


提醒:禁止发布任何违反国家法律、法规的言论与图片等内容;本站内容均来自个人观点与网络等信息,非本站认同之观点.


合作伙伴: 青云cloud 安畅网络

快速回复 返回顶部 返回列表